数据开发工程师(实时计算方向)

Gate.io
China
Workplace: RemoteFull timeFunction: Software EngineeringExperience: 5+ yearsEducation: bachelorsSkills: ["沟通协作","书面表达","业务理解","问题排查","责任心"]

负责实时数据处理链路的需求分析、方案设计与开发交付,基于 Flink、Kafka 等技术构建实时计算与数据服务能力。参与实时数仓建设与模型/指标口径设计,并持续优化任务延迟、反压、Checkpoint 异常与状态膨胀等问题,提升稳定性与效率。协同开展数据治理、工程质量建设及大数据平台/计算引擎的维护排障,沉淀实时开发最佳实践。

Loading

Loading job details...

Preparing the role view and application actions.

FursaFursa
Gate.io
Gate.io
1 day ago

数据开发工程师(实时计算方向)

✓ Verified Job

Canonical indexed version, validated from employer's careers page.

Source: Company careers pageValidated by: Fursa AI
Last checked: 5 hours agoStatus: Live

Job Summary

负责实时数据处理链路的需求分析、方案设计与开发交付,基于 Flink、Kafka 等技术构建实时计算与数据服务能力。参与实时数仓建设与模型/指标口径设计,并持续优化任务延迟、反压、Checkpoint 异常与状态膨胀等问题,提升稳定性与效率。协同开展数据治理、工程质量建设及大数据平台/计算引擎的维护排障,沉淀实时开发最佳实践。
Location: China
Workplace: Remote
Employment Type: Full time
Job Function: Software Engineering
Seniority: Mid level

Key Responsibilities

  • •负责实时数据需求分析、方案设计与开发交付,构建实时数据处理链路,为实时分析、监控与指标决策提供数据支持。
  • •参与实时数仓建设与模型设计,完成数据分层、指标口径、维度模型与数据服务的设计落地。
  • •持续优化实时任务,解决数据延迟、反压、Checkpoint 异常、状态膨胀、资源利用率与数据不一致等问题。
  • •参与数据治理和工程质量建设,包括任务依赖梳理、元数据管理、数据质量监控、告警机制与开发规范。
  • •参与大数据平台与计算引擎的日常维护与问题处理,协同上下游保障数据链路稳定性、准确性与时效性。

Key Requirements

  • •本科及以上学历,计算机/软件工程/信息技术相关专业;5年以上数据开发或大数据研发经验,优秀者可放宽。
  • •具备完整的数据仓库项目经验,熟悉实时数仓架构、数据分层与数据模型设计。
  • •熟练掌握 Flink,具有 Flink SQL 与 DataStream API 的实际项目经验,理解 State、Checkpoint、Watermark、窗口、反压与容错。
  • •具备实时任务开发与优化经验,能独立分析并解决延迟、资源消耗、状态异常、数据倾斜与数据一致性等问题。
  • •熟悉 Kafka 与实时数据链路,理解数据采集、传输、计算、存储与服务的完整流程。
Experience:5+ yearsBig DataReal-time dataData warehouse
Education:Bachelor's in 计算机、软件工程、信息技术或相关专业
Skills:沟通协作书面表达业务理解问题排查责任心
Tech Stack:FlinkKafkaFlink SQLDataStream APISQLPythonJavaScalaHadoopHiveSparkMySQLPostgreSQLElasticsearchHologresClickHouseDoris实时 OLAP

Company Brief

Gate.io
Operates a global cryptocurrency trading platform offering spot, derivatives, margin, and other digital asset products for retail and institutional users. The platform also provides wallet, staking, and Web3-related services.
Industry: Trading Platforms
Company Size: Large (251 to 1,000 employees)
Growth: Established Company
Headquarters: George Town, Cayman Islands
Founded: 2013
WebsiteLinkedIn