Data Engineer_Guangzhou
2 weeks ago
Job Summary
工作生活平衡 行业顶尖外企 技术革新,提升空间大公司介绍:
行业顶尖外资银行,具有独立的IT研发团队,IT技术人员将近30000人
主要职责:
• 设计、开发和维护可扩展且高效的 ETL 管道,以从各种来源提取、转换和加载数据到我们的数据仓库和其他数据存储系统中。
• 与数据分析师、团队中的同行和其他利益相关者协作,了解数据需求并开发满足他们需求的 ETL 解决方案。
• 优化和改进现有的 ETL 流程,以确保数据质量、准确性和性能。
• 排查和解决与数据相关的问题,包括数据差异、数据完整性问题和性能瓶颈。
• 开发和维护 ETL 流程、数据流和数据模型的文档,以确保知识转移和可维护性。
• 紧跟最新的行业趋势和技术,以确保我们的 ETL 流程保持最新和高效。
• 参与代码开发和审查,并提供建设性的反馈,以提高ETL代码库的整体质量。
• 与 Scrum Master 密切合作,确定任务的优先级并确保及时
岗位要求:
• 计算机科学、工程或相关领域的学士学位。
• 至少 3 年的 ETL 开发、数据工程或类似角色经验。
•对ETL工具和技术有深入的了解,例如Apache NiFi,Talend,Informatica或Microsoft SQL Server Integration Services(SSIS)。
• 熟练使用SQL和云数据库,如GCP Bigquery、GCP Cloud SQL、AWS RDS、AWS DynamoDB、
• 熟悉 GCP 等云技术者优先。
• 较强的分析和解决问题的能力,能够解决复杂的数据问题。
• 出色的沟通和协作能力,能够与跨职能团队有效合作。