公司概况
Rackner是一家专注于为美国政府构建关键任务系统的软件咨询公司。我们的团队在云平台、DevSecOps、AI/ML、分布式系统以及支持联邦机构和国家安全任务的现代软件工程项目中开展工作。Rackner的工程师和技术团队与领导层、项目团队和任务利益相关者密切合作，设计、展示和改进解决复杂运营挑战的软件系统。
职位名称
数据工程师
远程工作地点
远程 - 美国（需要有效的机密许可）
概述
Rackner正在寻找一名数据工程师，负责设计、开发并维护数据摄取、转换、集成和数据质量流程，以支持基于现代云的数据平台。数据工程师将主要在Microsoft Fabric环境中工作，开发可扩展的数据管道，并在分配的数据域中实施Bronze、Silver和Gold奖章架构层。该职位将支持从学生信息系统、人力资源/人事系统、财务系统、运营数据库和其他企业数据源摄取和转换数据。
数据工程师还将支持使用Ed-Fi数据标准和REST API的教育数据集成，包括源到Ed-Fi的映射、描述符定制、同步、验证和未来的迁移活动。
工作职责
- 在Microsoft Fabric中开发和维护数据摄取管道、转换逻辑和数据质量流程
- 为分配的数据域实施和维护Bronze、Silver和Gold奖章架构层
- 从企业源系统提取、转换和加载数据，包括学生信息系统、人力资源和人事系统、财务系统、物流系统、IT服务管理平台和运营数据库
- 开发ETL和ELT管道，将源系统数据摄取到Microsoft Fabric Lakehouse中
- 构建和维护数据集成管道、API连接和自动化同步流程
- 开发支持教育数据工作流的Ed-Fi REST API集成
- 实施Aspen到Ed-Fi的导出映射、描述符定制、转换逻辑和基于API的数据同步
- 开发支持HR/DCPDS、财务、物流和IT服务管理领域的数据摄取管道
- 执行源系统数据分析、映射、清理和转换
- 进行对账测试，并验证源系统和目标系统之间数据的完整性、准确性和一致性
- 识别、排除和解决数据质量、管道和集成问题
- 开发SQL查询、Python或PySpark处理逻辑和可重用的数据转换组件
- 支持云和企业数据环境中的数据填充和迁移活动
- 编写和维护数据管道、接口、映射、转换逻辑和运营流程的技术文档
- 与数据架构师、分析师、治理专家、应用程序团队和源系统所有者协作，定义和实施数据集成需求
- 在数据管理服务（DMS）达到生产就绪状态时，支持DMS迁移规划
- 支持已实施的管道和数据服务的知识转移和运营过渡活动
要求
- 有开发数据管道、ETL/ELT流程和数据集成的经验
- 有使用Microsoft Fabric、Azure Data Factory或类似云数据平台的经验
- 强大的SQL能力，包括查询、转换、验证和故障排除
- 有使用Python和/或PySpark进行数据工程工作负载的经验
- 有处理结构化和半结构化企业数据的经验
- 了解基于云的数据湖、湖仓或数据仓库架构
- 有数据映射、数据分析、对账测试和数据质量流程的经验
- 有通过REST API或类似的应用程序接口集成系统的经验
- 能够记录数据流、管道配置、映射和技术流程
- 强大的故障排除、分析和沟通能力
- 需要有效的机密许可
首选资格
- 有使用Microsoft Fabric湖仓架构的经验
- 有实施Bronze、Silver和Gold奖章数据架构的经验
- 有使用Ed-Fi数据标准、Ed-Fi ODS/API或Ed-Fi REST API的经验
- 有进行Aspen到Ed-Fi映射或使用Ed-Fi集成其他学生信息系统的经验
- 有HR/DCPDS、财务、物流或IT服务管理数据的经验
- 有支持大规模云数据迁移或现代化计划的经验
- 熟悉数据治理、元数据管理、谱和数据质量企业实践
福利
- 公司资助的认证，与当前和未来的项目工作相一致，包括云、Kubernetes、DevSecOps、安全、AI/ML、项目管理及相关技术领域
- 清晰的晋升路径和未来的领导机会
- 401(k)计划，100%匹配高达6%
- 全面的医疗、牙科、视力、人寿和残疾保险
- 慷慨的带薪休假和带薪假期
- 家庭办公设备计划和远程工作支持
- 健身和健康报销
- 每周支付工资，并有现代福利，包括团队活动
如何申请
要申请此职位，请通过我们的在线门户提交申请。您需要提供您的简历/履历、求职信、教育详情，并回答一些与您在SQL、Python、Power BI和云平台方面的经验相关的问题。此职位需要有效的机密许可，因此您必须是能够获得并保持此许可级别的美国公民。
Rackner是一个机会均等的雇主，并考虑所有符合资格的申请人，不考虑种族、肤色、宗教、性别、性取向、性别认同、国籍、残疾、退伍军人身份或其他受保护的特征。