Scrapy 蜘蛛数据管道
使用自定义项目管道构建和管理Scrapy网络爬虫。支持Splash渲染JavaScript页面,通过scrapy-rotating-proxies旋转代理,以及导出到MongoDB或Elasticsearch。
Browse curated skills with source links, package snapshots, README assets and install signals in one calm, searchable catalog.
使用自定义项目管道构建和管理Scrapy网络爬虫。支持Splash渲染JavaScript页面,通过scrapy-rotating-proxies旋转代理,以及导出到MongoDB或Elasticsearch。
通过Apache Tika Server REST API从1400多种文件格式中提取文本和元数据。处理PDF、DOCX、PPTX、电子邮件归档以及带有MIME类型检测的嵌入式文档提取。
使用 Mermaid 图表、决策点、错误状态和转换指标来可视化和映射用户流程,以优化用户旅程。
API key for MaxHub data APIs. Get one at https://www.aconfig.cn
番茄小说(fanqienovel.com)指定频道与类目的榜单扫描与开书决策助手。当用户提出「扫榜」「番茄小说扫榜」「看看番茄XX类目现在什么火」「番茄榜单分析」「这个类目还能不能开书」「帮我找番茄的蓝海题材」「出一份番茄扫榜报告」「番茄新书榜现在什么风向」时使用。抓取官网阅读榜/新书榜一手数据,按 20 个维度拆解题材结构、包装规律与内容层套路,最终产出三件套:扫榜报告文档、开书建议文档、一张可…
qsv 是一个高性能的命令行工具包,用于查询、转换、验证和分析 CSV 及表格数据。该工具用 Rust 编写,提供了超过 50 个命令来处理数据整理任务,并支持 Excel、Parquet、JSON 等多种格式。
从研究数据创建详细可操作的用户画像,包含待办任务、痛点、期望结果和意外行为洞察,指导产品决策。
Profile people from social-media traces — avatar, profile/cover background, nickname, privacy/visibility settings, chat behavior, shared content, self-reported labels — across platforms (WeChat, Whats…
NC账龄分析全流程——支持截图分析、.xls辅助明细账FIFO分析、Excel自动追加与明细重建。用于用友NC科目明细账截图分析或.xls文件批量分析,输出标准账龄明细表。
gron将JSON转换为离散的赋值语句,使得可以使用标准Unix工具通过复杂的JSON结构进行grep搜索。它通过ungron反转该过程,将过滤后的赋值语句重新转换为有效的JSON。
使用自定义的Item Pipelines构建生产环境的Scrapy爬虫进行数据清洗和存储。使用scrapy.linkextractors.LinkExtractor进行爬取范围控制,使用带有MapCompose处理器的ItemLoader进行字段标准化。
Detects whether anyone has fallen within a specified target area. Supports both image and short video analysis. Suitable for scenarios such as home care for elderly people living alone and safety moni…
客户声音(VOC)会话分析技能。读取用户提供的一批客服会话导出文件(Excel/CSV/文本,逐条式或整段式均可,来自企业微信、千牛、美洽、Udesk、智齿等系统),提炼客户在关心什么,输出高频问题Top榜、情绪分布、原声引用、流失风险信号与改进建议的单次洞察报告。适用场景:客户声音分析、VOC分析、会话洞察、客户反馈分析、客户需求分析、客诉归因,以及用户提供一批客服会话并希望了解客户整体反馈的任…
xan 是一个高性能的命令行工具,用于处理 CSV 文件,使用 Rust 编写,配备了一种新颖的 SIMD CSV 解析器。它提供了过滤、切片、聚合、排序、连接和可视化 CSV 数据的功能,并拥有自己的表达式语言用于复杂转换,同时支持相邻的数据格式。
在小程序会员中心场景中,控制会员权益的真实使用成本,交付权益成本表并以会员中心月活率复查。当用户提供相关业务资料、要求处理“小程序会员中心权益成本测算表”或需要对应交付物时使用。
读拆本场地需求 × 候选场地清单,四维评分五类硬门槛自动比价选址,L1-L8 勘景风险体检与成本门禁,输出 HTML 看板 + 勘景检查单 + 比价台账。
分析公开的YouTube 视频并生成清洗、分段并标注缺失信息的字幕文稿。当用户提供YouTube视频链接并提出“提取这个视频的字幕、把视频口播转成文字、整理完整视频文稿”等请求时使用。不用于主要需要摘要、营销拆解、账号分析或互动数据的请求;链接不可访问或字幕缺失时如实报告,不补写内容。
xsv 是一个由 Andrew Gallant (BurntSushi) 使用 Rust 编写的快速 CSV 命令行工具包。它提供了索引、切片、分析、分割、连接、搜索、采样和统计操作,能够在 CSV 文件上实现卓越的速度和内存效率。
通过 SerpAPI(Google、Bing、DuckDuckGo)自动化多引擎搜索,并进行结构化 JSON 提取。支持分页、位置定位和使用 MinHash LSH 进行结果去重。
一个每日 AI 资讯聚合与推送技能:用 agent-browser 从 AIbase(aibase.com/zh/news)和量子位(qbitai.com)实时抓取当日最新 AI 头条,整理成白底黑字、带来源与时间的 HTML 简报,并通过 present_files 推送。当用户说"每日AI资讯""AI日报""AI早报""抓取AI资讯""AI新闻推送"或想配置每日定时 AI 资讯推送时使用。
一键拉取泛微OA中本人负责的全部客户数据,自动计算活跃度评分和关注度分类,生成交互式HTML监控大屏。触发词:客户活跃度大屏、客户活跃度监控、活跃度监控大屏、生成活跃度大屏、客户活跃度分析、一键生成大屏。
Metrics architecture — produce a complete metrics plan given a product description. North Star, input metrics tree, instrumentation spec, action triggers, and counter-metrics. Use 当用户需要处理相关业务场景时使用。
面向中国品牌增长与流量团队,在搜索、落地页、渠道、转化和增长实验中完成网页加载速度、体验与转化性能优化,输出可执行方案、检查点和风险边界。 当用户需要处理相关业务场景时使用。
基于竞品网站URL结合实时网页抓取和SEO数据,生成包含定位、产品和营销策略的完整竞品档案文档。