关于职位
作为高级Azure数据工程师，您将负责设计、构建和维护跨medallion层的数据管道，确保端到端的所有权和强大的故障处理能力。您的职责包括创建易于其他工程师理解和维护的管道，并遵守团队标准。
职责
- 设计、构建和维护从原始数据摄取到报告数据集的管道。
- 确保管道具有抗故障能力，并能够有效监控。
- 开发生产就绪、可维护并符合最佳实践的转换逻辑。
- 处理来自各种运营系统的数据摄取，确保正确管理增量加载和模式漂移。
- 在每个数据层实施质量检查，并维护跨层的模式一致性。
要求
- 具有Azure数据服务和管道设计的经验。
- 精通SQL和数据转换逻辑。
- 能够处理运营系统并处理增量数据加载。
- 对数据质量和模式管理有深入理解。
- 具有以Azure技术为重点的数据工程职位经验。
您将负责
- 负责数据管道的端到端流程，从设计到维护。
- 构建具有弹性的管道，易于被其他团队成员接管。
- 确保数据管道各层的数据质量和一致性。
- 识别并解决数据源中的问题，以防止下游问题。
福利
- 有机会远程工作，采用混合角色结构。
- 与经验丰富的专业人士团队合作。
- 参与设计和实施健壮的数据解决方案。
- 在Azure数据技术方面持续学习和成长。
关于我们
Manila Recruitment是一家领先的人力资源公司，专注于将顶尖人才与创新公司联系起来。我们致力于培养成长、多元和卓越的文化。
加分项
- 具有Azure Data Factory或Azure Synapse Analytics等数据编排工具的经验。
- 了解数据仓库原则和实践。
- 熟悉数据工程环境中的DevOps实践。
- 具有以数据完整性和可靠性为重点的强大问题解决能力。