PySpark 数据转换辅助
围绕输入数据、目标结构和处理规则规划 PySpark 转换步骤,辅助编写数据管道逻辑。运行前需校验数据类型、分区策略和结果质量。
先选你要完成的事,也可以按职业筛选。技术、工具与产品名称保留在标签中。
围绕输入数据、目标结构和处理规则规划 PySpark 转换步骤,辅助编写数据管道逻辑。运行前需校验数据类型、分区策略和结果质量。
本条目介绍 dbt模型生成器 的公开用途。DeepSkill 当前公开目录说明:“生成 dbt 模型生成器操作。数据管道技能的自动激活功能。 触发条件:dbt 模型生成器,dbt 模型生成器 属于数据管道技能类别。在使用 dbt 模型生成器功能时使用。可通过以下短语触发:“dbt 模型生成器”、“dbt 生成器”、“dbt”。” 适用场景包括写 S
本条目介绍 数据处理 的公开用途。DeepSkill 当前公开目录说明:“用于处理结构化数据文件(CSV、JSON、YAML、TOML、Parquet)——包括查询、转换、过滤、聚合或在不同格式之间进行转换” 适用场景包括分析数据与指标归因、写 SQL 取数。本页根据公开目录资料和固定版本的上游仓库整理,建议使用前核对该版本的环境、工具、权限及数据处理要求
本条目介绍 SQL转换助手 的公开用途。DeepSkill 当前公开目录说明:“协助执行 SQL 转换辅助操作。数据管道的自动激活技能。 触发条件:sql transform helper, sql transform helper 属于数据管道技能类别。在使用 SQL 转换辅助功能时使用。可通过以下短语触发:“sql transform helpe
本条目介绍 响应转换器 的公开用途。DeepSkill 当前公开目录说明:“转换响应转换器操作。API集成的自动激活技能。 触发条件:响应转换器、响应转换器 属于API集成技能类别。在使用响应转换器功能时使用。可通过“响应转换器”、“响应转换器”、“响应”等短语触发。” 适用场景包括应用接入与集成、写代码与代码审查。本页根据公开目录资料和固定版本的
本条目介绍 数据管道构建 的公开用途。DeepSkill 当前公开目录说明:“构建数据管道 — 实现ETL/ELT流程,包括数据提取、转换、加载、错误处理以及任务调度。适用于需要“构建ETL”、“数据管道”、“将数据从X迁移至Y”或“数据同步”的场景。” 适用场景包括分析数据与指标归因、写 SQL 取数。本页根据公开目录资料和固定版本的上游仓库整理,建议使
本条目介绍 元数据提取器 的公开用途。DeepSkill 当前公开目录说明:“处理元数据提取器操作。数据管道自动激活技能。 触发条件:元数据提取器、元数据提取器 属于数据管道技能类别。在使用元数据提取器功能时使用。可通过“元数据提取器”、“元数据提取器”、“元数据”等短语触发。” 适用场景包括写代码与代码审查、部署发布与上云。本页根据公开目录资料和