数据工程师Software Developer(太仓)

您的主要职责

• 负责设计、构建和维护高效、可靠的数据管道和数据仓库，确保数据的准确性、一致性和可用性。
• 开发和优化ETL（抽取、转换、加载）流程，处理大规模数据集，提升数据处理效率和性能。
• 与数据科学家、分析师和业务团队协作，理解数据需求，提供数据解决方案，支持数据驱动的决策。
• 监控和维护数据系统的稳定性和安全性，及时发现并解决数据相关的问题。
• 研究和引入新的数据技术和工具，持续优化数据架构和流程。

您的任职资格

• 计算机科学、信息技术、数学或相关专业的本科及以上学历。
• 5年以上数据工程或相关领域的工作经验，有处理大规模数据集的实战经验, 国际环境工作经验优先。
• 具有良好的英语沟通和人际交往能力。
• 熟练掌握至少一种编程语言，如Python、Java、Scala等，具备良好的编码习惯。
• 精通SQL，熟悉主流关系型数据库（如MySQL、PostgreSQL）和NoSQL数据库（如MongoDB、Cassandra）。
• 熟悉大数据技术栈，如Hadoop、Spark、Hive、Flink等，有实际项目经验。
• 了解数据仓库和数据湖的概念，有设计和实现数据模型的经验。
• 具备良好的沟通能力、团队协作精神和问题解决能力，能够承受一定的工作压力。
• 有敏捷开发相关经验，熟悉Scrum流程。