logo

招聘Data Engineer数据工程师

头像
Odelia YU
484阅读16评论1 个月前

新加坡公司招数据工程师,线上办公,早十晚六,待遇丰厚。

• Develops and maintains scalable data pipelines and builds out new API integrations to support continuing increases in data volume and complexity.
• Collaborates with analytics and business teams to improve data models that feed business intelligence tools, increasing data accessibility and fostering data-driven decision making across the organization.
• Implements processes and systems to monitor data quality, ensuring production data is always accurate and available for key stakeholders and business processes that depend on it.
• Writes unit/integration tests, contributes to engineering wiki, and documents work.
• Performs data analysis required to troubleshoot data related issues and assist in the resolution of data issues.
• Works closely with a team of frontend and backend engineers, product managers, and analysts.
• Designs data integrations and data quality framework.
• Designs and evaluates open source and vendor tools for data lineage.
• Works closely with all business units and engineering teams to develop strategy for long term data platform architecture.
• Builds algorithms and prototypes • Combines raw information from different sources • Explores ways to enhance data quality and reliability
• Identifies opportunities for data acquisition
• Develops analytical tools and programs Requirements and skills
• Graduate degree in Computer Science, Statistics, Informatics, Information Systems or another quantitative field.
• 5+ years of experience in a Data Engineer role or in a similar role
• Technical expertise with data models, data mining, and segmentation techniques
• Knowledge of programming languages (e.g. Java and Python)
• Hands-on experience with SQL database design
• Great numerical and analytical skills Experience using the following software/tools:
• Experience with big data tools: Hadoop, Spark, Kafka, etc.
• Experience with relational SQL and NoSQL database, specifically MySQL, MongoDB and CouchDB.
• Experience with data pipeline and workflow management tools: Azkaban, Luigi, Airflow, etc.
• Experience with AWS cloud services: EC2, EMR, RDS, Redshift
• Experience with stream-processing systems: Storm, Spark-Streaming, etc.
• Experience with object-oriented/object function scripting languages: NodeJS, Python
• Experience designing, building, and maintaining data processing systems
• Experience working with either a Map Reduce or an MPP system on any size/scale

  • 开发和维护可扩展的数据管道,建立新的API集成,以支持数据量和复杂性的持续增长。
  • 与分析和业务团队合作,改进为商业智能工具提供的数据模型,提高数据的可访问性,促进整个组织的数据驱动决策。
  • 实施监测数据质量的流程和系统,确保生产数据始终是准确的,并可用于关键利益相关者和依赖它的业务流程。
  • 编写单元/集成测试,为工程维基作出贡献,并记录工作。
  • 进行必要的数据分析,以排除数据相关问题,并协助解决数据问题。
  • 与前端和后端工程师、产品经理和分析师组成的团队紧密合作。
  • 设计数据集成和数据质量框架。
  • 设计和评估开放源码和供应商工具的数据线。
  • 与所有业务部门和工程团队密切合作,为长期的数据平台架构制定战略。
  • 构建算法和原型 - 结合来自不同来源的原始信息 - 探索提高数据质量和可靠性的方法
  • 确定数据采集的机会
  • 开发分析工具和程序 要求和技能
  • 计算机科学、统计学、信息学、信息系统或其他定量领域的研究生学位。
  • 有5年以上数据工程师的工作经验或类似工作经验
  • 具有数据模型、数据挖掘和细分技术的技术专长
  • 熟悉编程语言(如Java和Python)。
  • 有SQL数据库设计的实践经验
  • 优秀的数字和分析能力 使用以下软件/工具的经验。
  • 具有大数据工具的经验。Hadoop, Spark, Kafka等。
  • 有关系型SQL和NoSQL数据库的经验,特别是MySQL、MongoDB和CouchDB。
  • 有数据管道和工作流管理工具的经验。Azkaban, Luigi, Airflow等。
  • 有AWS云服务的经验。EC2, EMR, RDS, Redshift
  • 有流处理系统的经验。Storm、Spark-Streaming等。
  • 有面向对象/对象函数脚本语言的经验。NodeJS, Python
  • 有设计、构建和维护数据处理系统的经验
  • 在任何规模的Map Reduce或MPP系统方面的工作经验
招聘类型:
企业招聘
专业领域:
开发
工作方式:
远程工作
职位:
国内远程工作
需消耗电量 5
加载中…
精选评论
头像
1 个月前陈三石

有薪资范围吗

open 看的

头像
1 个月前rovernerd

是远程工作还是要去坡县呀

远程工作哦。但是对英文口语有要求,面试需要

1 个月前rovernerd

面试都是全英文吗

头像
1 个月前Crazy

3年多全链路大数据开发和分析,有机会吗

英文可以不?

1 个月前Crazy

英语读写可以,听说差一些。我是本科学历。如果有机会的话,我也愿意有英语工作环境。

面试是全英的哦

头像
1 个月前180****8096

支持part time吗? 我之前干过etl的工作

全职工作哈

头像
1 个月前Williammmm
  • 近乎母语英文能力,听读写能力强
  • 工作经验:5+年
  • 在国内工作就可,反正远程就可以了
  • 如何联系呢?谢谢

应该可以点击联系我哦

头像
1 个月前Node技术点

支持下

头像
1 个月前Echo Dai

up~