高级数据工程师
岗位摘要
开发和维护管道及工具,将机器人日志转换为更易于访问、可视化和自动检测感兴趣事件的形式;优化数据处理,减少数据卸载与工程团队可用数据之间的时间;设计和优化数据存储解决方案,处理复杂、高容量的时间序列和结构化数据
登录后保留你的岗位线索
邮箱登录后可继续查看完整职责、任职要求和原岗位入口,并使用收藏与浏览记录沉淀适合自己的机会。
岗位职责
- 开发和维护管道及工具,将机器人日志转换为更易于访问、可视化和自动检测感兴趣事件的形式
- 优化数据处理,减少数据卸载与工程团队可用数据之间的时间
- 设计和优化数据存储解决方案,处理复杂、高容量的时间序列和结构化数据
- 构建和维护数据库模式和查询,支持分析和可视化提取的模式
- 支持机械、电气、软件、集成和测试工程师提取和可视化数据的需求
- 开发仪表板和自定义数据可视化工具,使工程师能够快速从数据中提取信息并跟踪机器人性能
- 将您的解决方案与现有数据管道和机器人测试框架集成
任职要求
- 计算机科学、数据工程或相关领域的学士或硕士学位
- 3年以上数据工程经验,最好有时序或日志数据处理经验
- 精通Python,有使用Pandas、Polars或PySpark进行大规模数据处理的经历
- 对数据库设计、索引和查询优化(SQL和NoSQL)有深入理解
- 有处理复杂数据格式(如Parquet、MCAP或protobuf)的经验
- 有构建基于Web的自定义数据可视化工具(JavaScript、React等)的经验
- 熟悉Grafana等数据可视化工具,用于实时分析和监控
- 有分布式计算框架和基于云的数据存储解决方案的经验
- 具备强大的调试能力,并能与实验室团队合作解释机器人系统日志
登录后查看完整岗位详情
使用邮箱验证码登录后,可查看完整职责、任职要求、原岗位入口,并继续使用收藏和浏览记录。列表摘要保持公开,完整详情用于保护数据质量和降低恶意抓取。