岗位描述
摘要:为电池研究构建和运营研发数据基础。你将负责数据库系统(MySQL/Postgres/MongoDB),构建可靠的数据管道,将多源数据清洗/拆分/加载到精选数据集中,并交付基于代码的内部仪表板。你还将应用先进的自动化技术(基于代理的工作流;OpenClaw 或类似工具为加分项)来减少数据清洗、验证和报告中的手动工作,并将其集成到日常 ETL/DQ 运营中。职责数据库运维与优化:数据库的 schema 设计、索引/分区、查询调优、备份/恢复、监控/告警及日常维护。数据管道:构建批处理/增量作业,从多个来源摄取研发数据,执行清洗/标准化,按规则拆分/路由数据,并加载到精选表/集合和视图中。数据建模与数据集交付:在数据库中设计主题域数据集和轻量级指标/KPI 层,以支持分析和建模。数据质量与回归:实施验证规则(单位/定义、完整性、一致性、范围),生成质量报告,并针对 schema/逻辑变更运行回归检查。基于代码的可视化:为关键研发指标和数据健康状况构建并维护一小组高影响力的内部仪表板/应用。高级效率提升:使用基于代理的自动化来加速重复性任务,如 schema 映射、清洗规则生成、异常分诊、文档/运行手册草稿和 QA 报告生成。协作:与科学家/工程师合作,明确定义、迭代数据模型并提升数据可用性。要求:精通 Python 和 SQL;能够独立实现可靠的数据处理/加载作业并维护生产代码。至少具备以下两项的实操经验:MySQL、PostgreSQL、MongoDB;熟悉数据库故障排查和性能调优。具备 ETL/ELT、数据建模以及处理杂乱的真实研发/工业数据集的实践经验。工程基础:作业调度、日志记录、监控、错误处理、版本控制和文档。优先:流处理或现代数据栈经验(如 Kafka、Spark/Flink、Trino/Presto)。Streamlit(或类似)应用开发及内部工具的基本前端意识。用于开发者生产力或数据工作流自动化的代理/自动化框架(如 OpenClaw、LangChain、LlamaIndex)。具备时间序列/曲线数据、实验室/测试数据或科学数据格式经验。