丁婷婷第一个月实习月报.pptx

实习月报总结 丁婷婷2016 5 16 2016 6 17 目录 关键工作总结 本月学习工作总结 本月学习总结 目录 关键工作总结 下月学习工作计划 目录 关键工作总结 4 1 2020 9 4 1 2020 10 在ETL的操作流程中 接口开发是十分重要的一个环节 是作业自动运行的前提 只有正确配置好作业接口 才能让后面对应上线的作业进行正常的数据加载和数据转换等操作 接口开发的过程就是配置一些表使得作业满足被ftp服务器调用的条件 等作业上线后 加载作业能正常运行 进行接口开发的目的就是方便数据的自动加载 为数据加载和数据转换做准备 数据加载是指数据 送过来的时候一般在 ETLA yunda daily 和 ETLA yunda hourly 中 按照SDDL表的对应表结构从源数据库中加载到SDATA库中 数据转换是指数据从SDATA库中转换到PDATA库中 数据加载后SDATA库中表的数据内容跟从源数据库中提交过来的对应表的数据内容是完全一样的 而数据转换是将SDATA库中的数据转换成了PDATA库所需要的数据 转换完成后PDATA库中表的数据内容跟SDATA库中对应表的数据并不是完全一样的 接口开发 4 1 2020 11 接口配置前材料准备两个材料 一是接口对应作业的相关信息 包括源系统 源应用系统描述 源表名 中文名 送数频率 增量全量 源库类型等相关信息 二是所配置接口对应的源系统中表的具体表结构 包括其各个字段英文名 中文名 类型 长度 小数点位数 是否PK等信息 接口开发操作步骤 a 填写 D SVNTD project 3系统设计与开发 34ETL 346ETL接口开发 目录下的 02韵达 ETL 源系统抽取列表 xls 重点 表总揽 具体表结构 b 依次点击 生成STAGE表名 生成STAGE表结构 替换关键字 等一些按钮 自动生成文档中未填写部分内容 c 将自动生成的SQL语句刷入2690和2550的Teradata数据库中 这里的SQL语句有三个部分 一是在作业配置表PETL CTL LOAD CFG中插入接口对应作业的配置信息 二是在作业最后批次表PETL JOB LASTSEQ中插入接口对应作业的最后批次信息 三是在Teradata的SDDL库中刷入接口对应作业的STAGE表结构 接口开发 4 1 2020 12 新科目维护 4 1 2020 注意点 利润中心中转站实际编码 10位 公司编码为利润中心中转站前四位实际省份编码为6位数 不足前补零 利润中心中转站和利润中心中转站实际编码为10位数 不足前补零 利润中心维护 目录 关键知识点总结 学习感悟 第一个月以学习为主 这一个月可谓是既短暂又漫长 既枯燥而又充实的存在 从初入项目组的无知懵懂到不断的汲取新知 这其中有一知半解 枯燥乏味 也有柳暗花明 踌躇满志 随着实习逐步进入正常的轨道 在学习理论知识的同时 结合mentor及同事给出的一些实际工作的操练 渐渐熟悉项目组 工作学习中收获很多 也体悟到一些与人相处之道 发现自己存在一些不足 1 从简单的维护新科目来看 未来的工作中还有很多值得注意的地方 很多细节需要足够的细心和耐心去认真对待 稍稍不慎就会造成错误 2 TeradataBasic及SQL基础还是学习重点 由于缺乏实际的应用 印象不够深刻 需要进一步的深入体会 3 沟通能力 整合归纳能力有待加强 4 提高学习效率 相较于前半