Website Not specified Egen
职位描述
Egen 是一家快速成长的创业型公司，秉承数据第一的理念。我们将最优秀的工程人才与最先进的技术平台（包括 Google Cloud 和 Salesforce）结合在一起，通过数据和洞察力帮助客户推动行动并产生影响。我们致力于成为最优秀的人才选择工作的地方，这样他们就能运用自己的工程和技术专长，展望数据和平台如何改变世界的下一步。我们致力于学习，在解决棘手问题的过程中茁壮成长，并不断创新以实现快速、有效的成果。
作为一名 Egen 数据工程师，您将负责构建和实施分布式 ETL/ELT 数据管道，以便处理庞大的数据集，解决大规模摄取和数据建模难题，并不断改进数据处理的周转性和可用性。
理想的候选人资源丰富，在 Python、复杂 SQL 程序、关系型数据库和 NoSQL 数据库、分布式数据仓库、数据映射、数据转换和数据集成方面拥有丰富的生产经验。
offer要求 [offer requirements]
- 相关领域的学士学位
- 必须在构建事件驱动和/或批处理 ETL 数据管道方面拥有丰富的专业知识和经验
- 企业数据迁移和多源摄取经验
- 熟练掌握 Python、复杂的 SQL 程序，并熟悉分布式数据仓库的架构和处理。
offer福利 [offer benefits]
- 熟悉使用 Kafka、Airflow 和/或 Spark 的事件驱动架构。
- 具有使用 Docker、Kubernetes 的经验。
- 为数据工程开发和部署 CICD 管道