腾讯云原生数仓研发工程师 - Beijing, 中国 - Tencent

Tencent Beijing, 中国

1周前

描述

腾讯云原生数仓研发工程师北京分享

分享岗位

方式1:复制岗位链接

方式2:分享岗位海报

手机扫描二维码分享

收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年04月26日岗位职责

1.TCHouse是腾讯云商业级云原生数据湖仓,为腾讯云客户和腾讯内部业务提供全场景、一体化的数据智能分析服务;开放的生态兼容,智能化计算引擎,超大规模可靠存储,以及云原生架构,赋能客户完美挖掘数据价值;2.负责构建TCHouse智能优化器的核心能力,完善优化器Framework,打磨CBO/CRO/CHO工程实现,优化分布式查询计划,探索 learned optimizer;3.负责构建TCHouse离在线一体的极限速度分布式计算引擎,完善MPP+DAG融合计算引擎和智能优化技术,优化全并行计算效率、内存计算;4.负责构建TCHouse超大规模智能可靠存储,优化云原生数据湖智能管理,实现 OTFs 极致性能优化,研发高效多级存储以及数据缩减等高性价比存储技术;5.负责构建TCHouse智能云原生统一平台,实现容器化、秒级弹性、租户级资源隔离等云原生集群基础能力,研发超大规模集群自治、智能调度以及统一纳管能力,实现统一分布式元数据管理。;6.负责构建TCHouse连接、入仓、查询等多模态接入能力,对接业界DMS、BI、ETL、DTS等相关生态集成,实现超高性能入仓;7.负责TCHouse架构持续演进以及极致工程技术落地,跟踪Data Infra前沿软硬件技术,挖掘和推动落地。

岗位要求

1.熟练掌握C/C++或者Go语言、数据结构和操作系统等基础知识,熟悉复杂软件工程开发流程;2.追求极致,对技术充满激情,对新技术有敏说的洞察力,具备在压力下解决复杂问题的能力;3.熟悉优化器相关理论和工程实现,对于优化器的可预测性、鲁棒性和有效性有实践经验,包括但不限于:计划缓存、计划管理、统计信息收集、代价模型、复杂查询优化,自适应查询等;4.熟悉大规模分布式计算,有在线、离线计算引擎的研发经验,对于数据仓库常用算子有实现及优化经验,熟悉Compilation/Vectorization/Prefetch/Pipeline等常用优化技术;5.熟悉大规模存储系统架构,有高性能存储引擎、分布式存储集群管理、分布式缓存等研发和运维经验,熟悉OTFs、行列混存、索引、事务以及数据缩减等技术;6.熟悉Kubernetes、Docker等相关技术,有大规模分布式集群管理平台和产品化经验,熟悉分布式元数据架构以及工程实现;7.熟悉岗位亮点 1.有 Snowflake、BigQuery、Redshift、Databricks等产品研发经验;2.深度参与Starrocks、Doris、Spark、Impala等大数据类开源项目开发经验;3.有SIGMOD、VLDB、ATC、OSDI、 SOSP、FAST 等会议论文;4.有超大规模数据分析、数据库平台产品的0-1成功构建经验。

腾讯云数据库内核开发工程师

2周前

Tencent Beijing, 中国

腾讯云数据库内核开发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术三年以上工作经验更新于年05月06日岗位职责 1.负责腾讯自研云原生数据库TDSQLCMySQL内核开发;2.负责计算引擎、分布式事务的设计和开发,包括执行计划生成、优化和执行、分布式任务管理以及相关的稳定性优化等工作;3.负责计算引擎对OLTP/HTAP场景的支持,包括但不限于SQL优化器、SQL执行引擎设计和开发、HTAP融合设计和开发;4.负责解决数据库SQL ...
腾讯云数据库内核开发工程师(杭州/深圳/成都/北京))

2周前

Tencent Beijing, 中国

腾讯云数据库内核开发工程师(杭州/深圳/成都/北京)) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术三年以上工作经验更新于年05月07日岗位职责 1.负责腾讯自研云原生数据库TDSQLCMySQL内核开发;2.负责计算引擎、分布式事务的设计和开发,包括执行计划生成、优化和执行、分布式任务管理以及相关的稳定性优化等工作;3.负责计算引擎对OLTP/HTAP场景的支持,包括但不限于SQL优化器、SQL执行引擎设计和开发、HTAP融合设计和开 ...
腾讯云数据库内核开发工程师(杭州/深圳/成都/北京))

1周前

Tencent Beijing, 中国

腾讯云数据库内核开发工程师(杭州/深圳/成都/北京)) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术三年以上工作经验更新于年05月10日岗位职责 1.负责腾讯自研云原生数据库TDSQLCMySQL内核开发;2.负责计算引擎、分布式事务的设计和开发,包括执行计划生成、优化和执行、分布式任务管理以及相关的稳定性优化等工作;3.负责计算引擎对OLTP/HTAP场景的支持,包括但不限于SQL优化器、SQL执行引擎设计和开发、HTAP融合设计和开 ...
腾讯云中间件高级研发工程师

1周前

Tencent Beijing, 中国

腾讯云中间件高级研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年02月28日岗位职责 1.负责腾讯云微服务产品(包括不限于微服务平台、注册配置中心、微服务框架、服务网格、云原生网关等)的研发工作,提升产品竞争力;2.负责腾讯云微服务产品的架构规划、容量评估和部署方案,构建标准化的交付流程和实施工具,保障客户现网业务的稳定运行;3.深入理解不同行业的系统架构和微服务应用场景,输出可复制、可扩展的产品技术方案 ...
腾讯云htap数据库高级研发工程师

2周前

Tencent Beijing, 中国

腾讯云HTAP数据库高级研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术三年以上工作经验更新于年04月29日岗位职责 1.负责腾讯自研分布式数据库TDSQLHTAP引擎研发,包括但不限于存储引擎,查询优化器以及SQL引擎等模块;2.在存储层,负责符合HTAP工作负载的存储引擎的架构演进及深度优化,保证高可用、高可靠的同时,提供极致的HTAP体验;3.在引擎层,负责提升TDSQL在HTAP场景的能力支持,包括但不限于SQL优化器、 ...
腾讯云大数据Elasticsearch研发工程师

1周前

Tencent Beijing, 中国

腾讯云大数据Elasticsearch研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年04月17日岗位职责 1.负责腾讯云大数据 Elasticsearch 内核研发工作及相关生态建设;2.负责研发下一代超大规模云原生分布式实时检索分析引擎,打造世界领先的云原生分布式大数据平台,解决日志、时序等海量数据场景下的性能和成本等痛点;3.负责相关系统架构设计,性能瓶颈分析,存储成本优化,并参与开源社区的合作与建 ...
腾讯云中间件高级研发工程师

4天前

Tencent Beijing, 中国

腾讯云中间件高级研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年05月17日岗位职责 1.负责腾讯云微服务产品(包括不限于微服务平台、注册配置中心、微服务框架、服务网格、云原生网关等)的研发工作,提升产品竞争力;2.负责腾讯云微服务产品的架构规划、容量评估和部署方案,构建标准化的交付流程和实施工具,保障客户现网业务的稳定运行;3.深入理解不同行业的系统架构和微服务应用场景,输出可复制、可扩展的产品技术方案 ...
腾讯云大数据Elasticsearch研发工程师

3天前

Tencent Beijing, 中国

腾讯云大数据Elasticsearch研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年05月15日岗位职责 1.负责腾讯云大数据 Elasticsearch 内核研发工作及相关生态建设;2.负责研发下一代超大规模云原生分布式实时检索分析引擎,打造世界领先的云原生分布式大数据平台,解决日志、时序等海量数据场景下的性能和成本等痛点;3.负责相关系统架构设计,性能瓶颈分析,存储成本优化,并参与开源社区的合作与建 ...
Associate Solutions Architect Intern

2周前

Amazon Connect Technology Services (Beijing) Co., Ltd. Beijing, 中国全职

At Amazon Web Services, we are working to be the most customer-centric company on earth. To get there, we need exceptionally talented, bright, and driven people. Amazon is continually evolving and is a place where motivated employees thrive and also where employee ownership and a ...
实时湖仓后台研发工程师(北京/上海)

1周前

Tencent Beijing, 中国

实时湖仓后台研发工程师(北京/上海) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 TEG 点击了解更多BG信息技术三年以上工作经验更新于年03月11日岗位职责 1.负责腾讯天穹大数据湖仓平台研发, 打造业界领先的EB级实时智能湖仓一体平台, 支撑腾讯内部各个核心大数据分析业务,推进实时智能湖仓一体平台的迭代和演进;2. 负责湖仓平台关键组件架构的升级和核心模块研发, 推动在业务方落地, 赋能业务发展;3.负责湖仓领域前沿技术调研, 与开源社区保持交流, 根据业务特性和需 ...
数据库交付平台研发高级工程师

1周前

Tencent Beijing, 中国

数据库交付平台研发高级工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年05月08日岗位职责 1.负责腾讯自研分布式数据库TDSQL-MySQL/TDSQL-PG的交付平台产品化的设计和研发工作;2.负责TDSQL-MySQL/TDSQL-PG不同客户场景下批量部署/升级/切换演练/巡检等的平台研发和优化;3.负责重点客户版本问题跟踪,提升客户使用产品的稳定性和运维体验,并提升产品交付和售后效率。 · 岗位要求 ...
云平台安全策略工程师

2周前

Tencent Beijing, 中国

云平台安全策略工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年04月07日岗位职责 1.腾讯云反入侵策略的建设与运营。通过大数据分析和挖掘发现腾讯云平台中出现的各种恶意行为,制定相应的安全策略检出攻击;2.安全应急响应。针对安全风险事件的发现、跟踪、分析和协调处理,安全事件应急响应,同时能对安全事件进行影响范围评定、利用复杂度分析等;3.负责云平台架构安全设计和实践落地。 · 岗位要求 1.五年以上工作经验 ...
数据库交付平台研发高级工程师

2周前

Tencent Beijing, 中国

数据库交付平台研发高级工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年04月06日岗位职责 1.负责腾讯自研分布式数据库TDSQL-MySQL/TDSQL-PG的交付平台产品化的设计和研发工作;2.负责TDSQL-MySQL/TDSQL-PG不同客户场景下批量部署/升级/切换演练/巡检等的平台研发和优化;3.负责重点客户版本问题跟踪,提升客户使用产品的稳定性和运维体验,并提升产品交付和售后效率。 · 岗位要求 ...
腾讯云数据仓库高级内核工程师

1周前

Tencent Beijing, 中国

腾讯云数据仓库高级内核工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年05月13日岗位职责 1.参与产品功能规划与架构设计,打造高效、实时、稳定的云原生数仓;2.负责腾讯云云原生数据仓库产品的内核优化,包括Greenplum、Clickhouse、PostgreSQL、Impala、Doris等产品;3.设计并开发高性能分布式计算引擎、强一致高性价比的分布式存储引擎、极致弹性Serverless化技术等;4. ...
云存储高级研发工程师(北京/深圳/上海/成都)

2周前

Tencent Beijing, 中国

云存储高级研发工程师(北京/深圳/上海/成都) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 TEG 点击了解更多BG信息技术两年以上工作经验更新于年05月07日岗位职责 1.负责分布式存储相关方向的技术研发以及运营,打造业界领先的超大规模存储系统;2.不断丰富产品功能,提升产品竞争力,满足不同行业客户的业务诉求;3.持续优化系统服务质量,提升系统性能,降低运营成本,为客户提供稳定可靠的云存储服务。 · 岗位要求 1.至少精通C/C++/GO其中一门编程语言,深入理解操 ...
腾讯云数据仓库高级内核工程师

1周前

Tencent Beijing, 中国

腾讯云数据仓库高级内核工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术五年以上工作经验更新于年04月24日岗位职责 1.参与产品功能规划与架构设计,打造高效、实时、稳定的云原生数仓;2.负责腾讯云云原生数据仓库产品的内核优化,包括Greenplum、Clickhouse、PostgreSQL、Impala、Doris等产品;3.设计并开发高性能分布式计算引擎、强一致高性价比的分布式存储引擎、极致弹性Serverless化技术等;4. ...
云存储高级研发工程师(北京/深圳/上海/成都)

3周前

Tencent Beijing, 中国

云存储高级研发工程师(北京/深圳/上海/成都) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 TEG 点击了解更多BG信息技术两年以上工作经验更新于年04月22日岗位职责 1.负责分布式存储相关方向的技术研发以及运营,打造业界领先的超大规模存储系统;2.不断丰富产品功能,提升产品竞争力,满足不同行业客户的业务诉求;3.持续优化系统服务质量,提升系统性能,降低运营成本,为客户提供稳定可靠的云存储服务。 · 岗位要求 1.至少精通C/C++/GO其中一门编程语言,深入理解操 ...
腾讯云htap数据库高级研发工程师

1周前

Tencent Beijing, 中国

腾讯云HTAP数据库高级研发工程师北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息技术三年以上工作经验更新于年05月13日岗位职责 1.负责腾讯自研分布式数据库TDSQLHTAP引擎研发,包括但不限于存储引擎,查询优化器以及SQL引擎等模块;2.在存储层,负责符合HTAP工作负载的存储引擎的架构演进及深度优化,保证高可用、高可靠的同时,提供极致的HTAP体验;3.在引擎层,负责提升TDSQL在HTAP场景的能力支持,包括但不限于SQL优化器、 ...
高性能云存储研发工程师(北京/深圳)

2周前

Tencent Beijing, 中国

高性能云存储研发工程师(北京/深圳) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 TEG 点击了解更多BG信息技术三年以上工作经验更新于年05月04日岗位职责 1.打造亚毫秒级高性能分布式存储系统,针对性能,成本,可靠性持续优化;2.负责EB级分布式系统的线上运营,数据分析,以及现网问题攻坚;3.与服务器团队密切配合,持续引入新硬件,并实现软硬结合,发挥硬件性能成本优势;4.负责相关云存储系统的私有化和国产化工作。 · 岗位要求 1.熟练使用C/C++,有多进程、线程 ...
腾讯专有云产品经理(云产品方向)

2周前

Tencent Beijing, 中国

腾讯专有云产品经理(云产品方向) 北京分享分享岗位 · 方式1:复制岗位链接 · 方式2:分享岗位海报 · 手机扫描二维码分享 · 收藏 CSIG 点击了解更多BG信息产品三年以上工作经验更新于年04月12日岗位职责 1.负责腾讯TCE专有云产品的规划和设计;2.需要积极接触客户和前后端团队,积极了解市场和行业信息,收集转化客户需求为产品需求,提供完整的产品规划和设计建议;3.需要深入了解行业内头部产品的功能特性、优势特点和方案设计,能够向售前架构师等团队提供全面的产品支撑;4.需要根据产品功能需求设计可用易用的产品原型和交互; ...