Data engineer 职位在 中国
-
该职位来源于猎聘 工作职责: 负责基于 Databricks 平台 进行数据管道(Data Pipeline) 的设计、开发、部署与运维,确保其高效性与可靠性。 · ...
Shanghai ¥18,000 - ¥30,000 (CNY)1周前
-
+负责基于 Databricks 平台 进行数据管道(Data Pipeline)的设计、开发、部署与运维,确保其高效性与可靠性。 · +利用 Delta Lake 技术构建企业级数据湖仓,执行数据建模、数据清洗、转换和集成工作,并负责其性能优化(如优化文件索引、压缩小文件) · 使用 Databricks Workflows 与 Apache Airflow 等工具进行工作流的调度、监控与告警,保障数据任务的稳定交付 · +Benefits</h2<ul style= ...
Shanghai2周前
-
该职位来源于猎聘 岗位职责 数据仓库技术把控:熟练运用 AWS Glue(ETL 数据抽取转换)、S3(海量数据存储)、Redshift(结构化数据仓库)、Airflow(工作流调度)等工具,掌握现有数据仓库技术逻辑与流程,保障数据处理全链路稳定 · ...
Shanghai ¥18,000 - ¥25,000 (CNY)6天前
-
该职位来源于猎聘 工作职责: 负责基于 Databricks 平台 进行数据管道(Data Pipeline)的设计、开发、部署与运维,确保其高效性与可靠性。 利用 Delta Lake 技术构建企业级数据湖仓,执行数据建模、数据清洗、转换和集成工作,并负责其性能优化(如优化文件索引、压缩小文件)。 使用 Databricks Workflows 与 Apache Airflow 等工具进行工作流的调度、监控与告警,保障数据任务的稳定交付。 协同数据科学家与数据分析师,为其提供高质量、可信任的数据资产,并支持机器学习模型的部署与运维工作。 遵循数据治理实 ...
Shanghai, Shanghai3天前
-
该职位是数据工程相关工作经验5-8年/8-12年的本科及以上学历计算机、数据相关专业优先 · 对 ETL 数据准确性、Redshift 查询性能、数据流程逻辑等进行验证规避数据错误影响下游业务决策 · ...
Shanghai2周前
-
+ · 数据仓库技术把控:熟练运用 AWS Glue(ETL 数据抽取转换)、S3(海量数据存储)、Redshift(结构化数据仓库)、Airflow(工作流调度)等工具, · 质量与团队支撑:自主负责测试工作、知识传递 · 学历:本科及以上学历, · 经验:5-8 年/8-12 年数据工程相关工作经验 ...
Shanghai1个月前
-
该职位来源于猎聘 岗位职责 数据仓库技术把控:熟练运用 AWS Glue(ETL 数据抽取转换)、S3(海量数据存储)、Redshift(结构化数据仓库)、Airflow(工作流调度)等工具,掌握现有数据仓库技术逻辑与流程,保障数据处理全链路稳定 项目交付落地:以项目成功交付为核心目标,围绕业务需求搭建 / 优化数据仓库、设计数据流程,通过项目成果(如数据流程稳定运行、仓库功能达标)体现技术能力,支撑业务发展 质量与团队支撑: 自主负责测试工作:对 ETL 数据准确性、Redshift 查询性能、数据流程逻辑等进行验证,规避数据错误影响下游业务决策 知识 ...
Shanghai, Shanghai5天前
-
· ...
Shanghai1个月前
-
Snowflake 核心管理:管理 Snowflake 环境的各个方面,包括用户配置、基于角色的访问控制 (RBAC) 和安全策略。 · 性能与成本管理:主动监控并优化虚拟仓库、查询性能和存储,以确保平台的效率和成本效益。 · ...
Shanghai, Shanghai1个月前
-
We are seeking a highly skilled and motivated Data Engineer specializing in Production Support for AWS EMR with spark, scala, Talend or any ETL tool knowledge to join our dynamic team. · The ideal candidate will ensure the smooth operation, performance, and stability of large-sca ...
Shanghai2周前
-
We are seeking a highly skilled Data Engineer to join our dynamic team.The ideal candidate will ensure the smooth operation performance stability of large-scale distributed data processing pipelines applications deployed on AWS EMR. · ...
Shanghai2周前
-
We are seeking a highly skilled and motivated Data Engineer specializing in Production Support for AWS EMR with spark, scala, Talend or any ETL tool knowledge to join our dynamic team. · The ideal candidate will ensure the smooth operation performance stability of large-scale dis ...
Shanghai2周前
-
We are seeking a highly skilled and motivated Data Engineer specializing in Production Support for AWS EMR (Elastic MapReduce) with spark, scala, Talend or any ETL tool knowledge to join our dynamic team. · The ideal candidate will ensure the smooth operation, performance, and st ...
Shanghai2周前
-
图像和视频数据的处理工作包括清洗、打标、筛选、增强等; · 根据产品目标和训练策略拆解数据目标制定数据处理策略和计划; · 对数据处理结果进行评估并根据结果迭代处理策略; · 与数据打标员合作推进大批量数据打标工作。 · ...
Beijing1个月前
-
该职位来源于猎聘 · 图像和视频数据的处理工作包括清洗、打标、筛选、增强等; · ...
Beijing2周前
-
· , · ,,, · ,,, · ,,,,,. , ...
Beijing ¥250 - ¥500 (CNY)6天前
-
Pattern 把🏌🏃 Data Engineer. · 6–8 ユ야 data engineering related experience. · At least 3 years SQL practical experience. · At least 3 years modern data warehouse architecture practice experience. · At least 2 years using Redshift,BigQuery,Snowflake etc data warehouse experience,kno ...
Guangzhou City3周前
-
This role will be responsible for assigning data engineering efforts for the Uer Platform (CDP) and Recommendation Engine, ensuring data accuracy, performance, and security across pipelines connecting Snowflake, Postgres, Kafka, and API Gateway services. · ...
Beijing $90,000 - $110,000 (USD) 全职1个月前
-
My client is a hedge fund looking for a Data Engineer to join their team in Shanghai. · You'll build and manage data systems that help their investment team make better decisions. · ...
Shanghai3周前
-
We are seeking a Data Engineer to join our data team at OKX. The successful candidate will design and build resilient and efficient data pipelines for both batch and real-time streaming data. · Design and build resilient and efficient data pipelines for both batch and real-time s ...
Hong Kong Island 全职1个月前