大数据平台架构师岗位职责

工作职责
1、负责公司大数据方向的数据处理架构和模型设计，结合公司实际业务情况进行技术选型；

2、带领团队完成ETL任务调度系统设计，业务数据ETL流程处理，并确保数据质量；

3、负责数据多维分析引擎性能优化，协助团队解决开发过程中的技术难题；

4、参与数据平台产品的整体评估、设计、架构及关键模块的研发；

5、制定数据开发、主数据、数据质量、数据服务等规范。

任职要求
1.计算机、通信、数学相关专业毕业，大学本科以上学历，6年以上的工作经验；

2.熟悉Java，Scala、SQL等常用开发语言；

3.基于开源hadoop生态构建的大数据基础架构，包括但是不限于HDFS/YARN/Hive/Spark/Flink/HBase/ES/Presto等分布式系统

4.扎实的计算机基础及编程能力，熟悉常用算法和设计模式；

5.具有强烈的责任心以及团队合作精神，具有较强沟通能力，积极向上。

工作职责
1、负责参与公司数据中台的统一调度平台、实时数仓平台、离线数仓平台、资产管理平台、OLAP、数据湖等平台建设，为海量数据和业务系统提供可靠的业务能力支撑。
2、负责大数据平台的基础工具和平台的研发和维护;
3、大数据前沿开发技术的研究和推广。
任职资格
1、工科、计算机、统计或其它相关专业本科及以上学历，5年以上开发经验，2年以上大数据相关研发和运维经验;
2、理解Java运行时工作原理，熟悉jvm性能调优，熟练掌握并发编程，并熟练掌握Java相关开发技术和工具;
3、熟练掌握Spring/Spring Boot/MyBatis等主流开发框架及其运行机制；
4、熟悉Hadoop平台开源产品的架构、运维、调优，开源产品包括不限于hdfs、yarn、flink、spark、hbase、hive等;
5、熟悉Hadoop平台开源产品的实际应用业务场景；
6、深度理解软件工程，具备分布式、高性能等开发经验，有过大数据平台开发经验者优先;
7、肯钻研，能抗压，有较强的解决问题和沟通协调的能力。

【工作内容】
- 负责公司大数据平台的整体架构设计与优化，提升系统性能与稳定性；
- 参与数据采集、处理、存储及分析系统的规划与实施；
- 与产品、开发团队紧密协作，推动数据驱动的业务决策；
- 持续研究大数据相关技术，探索新技术在实际场景中的应用。
【任职要求】
- 大专及以上学历，计算机相关专业优先；
- 1-3年大数据平台架构或相关工作经验，具备实际项目落地经验；
- 熟悉Hadoop、Spark、Flink等大数据技术栈，了解数据仓库和实时计算框架；
- 具备良好的逻辑思维能力和沟通协调能力，能独立解决问题。