数据管道开发工程师(Golang/ Python ),上海虹口区, GenAI 公司(一年内四轮融资,市值一亿美金+)

1 天前
 fancyfrees
- 端到端负责数据管道:采集/解析/清洗与匿名化/结构化建模/存储与查询/结果回传,保障稳定性与可扩展性。
- 使用 Golang/Python 交付高质量后端与 CLI ,关注性能、可靠性与可维护性。
- 基于 OpenTelemetry 建立日志/指标/追踪可观测性;使用 SigNoz 进行监控、排障与性能分析。
- 进行 MongoDB 的数据建模、索引与查询优化,持续提升读写与成本效率。
- 建立基础的回归与评估( evaluation )机制:数据集与口径、指标设计、离线/在线对比与追踪,输出改进建议。
- 用英文撰写技术文档与变更说明,参与英文代码评审与跨团队协作。

任职要求
- 本科及以上,3 年以上数据管道/Data Pipeline 实战经验,能独立承担端到端交付。
- 精通 Golang 或 Python 至少一门,并能熟练使用另一门进行生产级开发;具备良好工程实践(代码评审、测试、CI/CD )。
- 熟悉 OpenTelemetry 与 SigNoz 的集成与使用,能完成观测、告警与问题定位。
- 熟练掌握 MongoDB ( Schema 设计、索引与查询优化、容量规划)。
- 具备系统设计与性能优化能力,能在稳定性、成本与可维护性间平衡。
- 英文读写良好,适应全英文文档、评审与协作环境。

加分项
- 海量会话/日志/文本数据的近实时处理与查询优化经验。
- 评估与实验经验(指标口径治理、离线/在线回归、版本化与可追溯)。
- 熟悉常见消息/缓存(如常见 MQ/流式系统、Redis 等)、容器化与云上数据库/存储。

微信:fancyfrees
163 次点击
所在节点    酷工作
0 条回复

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1161384

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX