GPT中文www.gpt.com.cn挑几下就能开工
我积分

写数据管道方案

直接说你要办的事。下面是别人怎么办的,点任何一项就换成你自己的。左边是别人怎么办的,右边是你的,点一项就开始改。
示范 · 别人这样说

「哎,我们系统数据乱成一锅粥,领导要个数据管道方案,下周就要,我完全不知道从哪下手!」

替他选了:批处理 · 详细级

按示范选好的 点一项就变成你的

你的成品会在这里出现
示例成品 · 不是你的AI 按示范写的,看个样子
背景:当前系统数据源包括关系型数据库和日志文件,数据量约1-10TB,目标为数据仓库。需设计每日批处理管道,对数据进行去重、格式转换和异常检测,保证数据质量。 管道架构:采用批处理模式,通过ETL工具从源系统抽取数据,经过清洗层、转换层后加载到数据仓库。数据格式包含JSON和CSV,建议使用Apache Spark或类似框架实现,并定期调度。

条款 · 隐私