data-cleaning-standards
清洗和标准化车辆保险CSV/Excel数据。在处理缺失值、修复数据格式、删除重复项或标准化字段时使用。提及“清洗数据”、“处理空值”、“标准化”、“重复项”或“规范化”。
把 Skill 的源码、资源快照、README、包体和安装信号放进一个可搜索、可筛选的公开目录。
清洗和标准化车辆保险CSV/Excel数据。在处理缺失值、修复数据格式、删除重复项或标准化字段时使用。提及“清洗数据”、“处理空值”、“标准化”、“重复项”或“规范化”。
使用reportlab创建包含文本、表格和嵌入图像的专业PDF报告。适用于任何LLM提供商(GPT、Gemini、Claude等)。
审查数据处理以确保隐私和保留。当高级开发人员需要治理验证时使用。
使用生命周期策略组织对象存储。
从.synnovator/*.md文件导入Synnovator平台数据到通过SQLAlchemy模型建立的SQLite数据库中。当需要填充测试数据、从基于文件的数据初始化数据库或将.synnovator内容迁移到关系型数据库时使用。触发条件包括“导入synnovator数据”、“从.synnovator填充数据库”、“用测试数据填充数据库”,或当用户需要用真实数据测试FastAPI端点时。
数据湖架构与管理,包括奖章架构(铜/银/金区域)、使用AWS Glue的数据目录、分区策略、模式演变、数据质量、治理、成本优化、S3生命周期策略、数据保留、合规性、使用Athena的查询优化、数据格式(Parquet、ORC、Avro)、增量处理、CDC模式以及可扩展数据湖的生产最佳实践。
数据映射模式,用于将API响应转换为内部类型
TMNL的服务范围数据编排。在实现搜索、数据流、内核系统或基于效果的数据采集时调用。涵盖了混合调度(纤程+工作线程)、Atom作为状态模式以及渐进式流处理。
在格式之间转换数据(JSON、XML、CSV、YAML、TOML)。在转换数据结构或在不同数据格式间迁移时使用。
使用openpyxl将分析结果、数据表和格式化的电子表格导出到Excel文件。适用于任何LLM提供商(GPT、Gemini、Claude等)。
专业技能用于Claude Code,允许通过data.gouv.fr访问、下载和分析法国开放数据。包括完整的Python库、代码示例以及最常用数据集的详细文档。
检测数据完整性问题,包括孤立记录、外键关系断裂、约束违规,并提供自动修复迁移。用于“数据完整性”、“孤立记录”、“关系断裂”或“数据质量”。
检测数据完整性问题,包括孤立记录、外键关系断裂、约束违规,并提供自动修复迁移。用于“数据完整性”、“孤立记录”、“关系断裂”或“数据质量”。
Metabase REST API的自动化和故障排除:进行身份验证(优先使用API密钥,会话作为备选),导出/更新问题(卡片)和仪表板,标准化可视化设置,以及运行/导出结果。
PB-000的成果物以文件形式保存和管理。负责创建文件夹、确认文件存在以及执行历史记录管理。在数据管理和文件操作中必须使用。
计划并执行数据库迁移、数据转换和系统迁移,使用回滚策略和数据完整性验证来确保安全。在迁移数据库、转换数据模式、在数据库系统之间移动、实现版本化迁移、处理数据转换、确保数据完整或规划零停机迁移时使用。
构建可扩展的数据管道、现代化的数据仓库和
房间作为管道节点,出口作为边,物体作为消息
管理从外部来源到本地数据库的武器和改装数据生命周期
根据FF Analytics注册表模式构建新的数据摄入提供者。当向数据管道添加新的数据源(API、文件、数据库)时,应使用此技能。按照既定模式指导创建提供者包、注册表映射、加载器函数、存储集成、主键测试和采样工具。
此技能提供了与数据层模块配合使用的模式。在创建/编辑src/data-layer/、src/lib/data/中的文件或添加新的数据源时使用。
计划并执行系统、数据库和格式之间的数据迁移
安全地计划和执行数据库迁移、数据转换和系统迁移,包括回滚策略和数据完整性验证。在迁移数据库、转换数据模式、在数据库系统之间移动、实施版本化迁移、处理数据转换、确保数据完整或规划零停机时间迁移时使用。
分析并重构TypeScript数据模型。检测重复,提高类型安全性,并验证接口/类型中的关系。