etl开发岗位职责

岗位职责：

1、负责数据仓库平台的ETL设计、开发与调度；
2、快速定位和排查数据处理中的问题，进行troubleshooting和性能调优；
3、进行数据库sql逻辑，存储过程的开发与优化；
4、进行多种数据源不同类型数据的处理、加工和集成；


任职要求：

1、学历要求：本科或本科以上学历；
2、熟练使用ETL工具informatica，具有3年以上开发、调度和调优经验；
3、熟悉1-2种主流的关系型数据库，有DB2使用经验*佳；
4、具有大型数据仓库项目经验，熟悉数据仓库架构和建模，精湛的sql能力；
5、熟悉UNIX、LINUX操作系统及相关技术；
6、具有一定的Java或Python的编程能力，有数据挖掘经验*佳；
7、思路清晰，善于思考，具有快速学习、独立解决问题的能力；

职责描述：
1、参与业务分析，负责数据流程分析；
2、参与数据仓库、数据集市模型设计；
3、完成BI/DW/DM的ETL开发、测试、优化工作；
4、完成报表开发相关工作。
任职要求：
1.3年以上工作经验，本科及以上学历，计算机及相关专业；
2.精通SQL；至少熟悉Oracle、mysql、高斯、TDSQL等数据库中一种；熟悉当前主流大数据平台架构及相关技术产品，如Hadoop/Spark/Kafka/NoSQL 等技术，熟悉大数据的分布式存储，处理等技术；
3.熟悉数据仓库架构及原理，熟悉数据仓库建模理论，有数据仓库模型设计，需求分析、ETL开发等相关工作经验；
4.熟悉报表工具使用；
5.工作态度端正，高度责任心，学习能力较强，客户意识良好。
有以下经验者优先：
熟悉金融业务，有银行数据分析等系统开发、建模经验；
有DW/BI项目或金融监管报送项目实施和开发经验；

1.Bachelor’s degree in Information Technology, Computer Science, Software Engineering, Data Engineering, related disciplines.
2.Minimum 3 years of experience in Data Platform, Data Engineering, Analytics projects.
3.Minimum 2 years of hands-on experience in ETL/ELT design, development, optimization; Databricks experience is highly preferred.
4.Minimum 1 year of Python programming experience fdata processing, automation, workflow development.
5.Strong experience in SQL/Spark SQL development, performance tuning, query optimization.
6.Solid understanding of Data Warehouse, Data Lake, Delta Lake, Modern Data Platform architectures.
7.Experience in data modeling (dimensional modeling, star schema, snowflake schema, etc.) is preferred.
8.Experience working on Microsoft Azure cloud platform is preferred.
9.Experience in Python Shell scripting is preferred.
10.Good English reading writing skills; CET-4/CET-6 certification is required.
AI & Data Engineering Skills