
工作职责:
1、按照业务需求,进行数据开发设计,并编写相关文档,如ETL模型映射文档,模型规则设计文档等。
2、负责数据平台集成不同数据源的数据,以及数据仓库支撑数据应用场景,数据服务搭建。
3、负责数据平台ETL任务的开发、测试、数据质量排查等相关工作。
4、负责数据清理、数据备份、数据迁移等相关功能脚本开发工作。
5、负责数据处理相关流程的监控和运维,派驻驻客户现场时完成项目组开发任务以及及时解决系统运行中遇到的问题。
任职资格:
1、本科及以上学历,3年以上数据平台建设经验,5年以上金融行业ETL工作经验。扎实的数据开发能力,熟练使用SQL语言以及Perl.Python.SAS.Shell等编程语言。
2、熟悉数据平台ETL的工作原理,能够对ETL脚本进行性能优化;熟悉模型设计,有数据仓库或数据湖开发、设计经验,有分布式数据库开发经验。
3、熟悉数据开发,数据分析的相关方法,了解数据治理的相关方法。
4、熟练使用git.svn等版本控制工具,具有良好的版本管理意识。
5、对现有的大数据计算架构或者框架具有一定的了解,了解例如Greenplum.MPP.Spark.hive等。
6、思路清晰、工作认真、态度端正、乐于学习、乐于沟通合作。