数据开发工程师面经
完整信息
本篇目录
面试公司:网易
面试职位:数据开发
面试时间:10.15
自我介绍
项目难点问答
Spark 数据倾斜
现象:某key数据量过大,单节点负载高,任务变慢、资源暴涨 解决三板斧:
① 预处理:过滤/打散热点key
② SQL/任务拆分:倾斜key单独处理,结果再合并回主数据
③ 调参:调整分区数量,匹配数据量与并发
指标口径变更怎么处理
事前:提前确认口径,评估上下游影响
小范围变更:后续迭代修改
大范围、存在血缘依赖:详细评估影响范围,制定变更方案,准备回滚预案,保障上下游不崩
对AIGC理解
底层:大模型,支持对话+工具调用,自主判断是否调用工具
学习渠道:企业内部落地文档 > 外网博客;博客偏理论,和生产环境差距大
行业趋势:AI智能体,多家公司把AI嵌入完整研发流程
求职偏好:互联网/金融均可;金融有多模态数据,业务更有挑战
个人职业期望
方向:大数据基础上持续向AI发展,看好AI辅助研发,人机协同模式
工作目标:希望负责完整数据链路(从数据产生到报表产出),不希望只做链路中间片段
反问面试官
团队规模、核心业务方向,数据团队人数?
团队内部AI落地、AI工具使用现状?
本篇目录
当前问题0110
- 01
自我介绍
- 02
项目难点问答
- 03
Spark 数据倾斜
- 04
指标口径变更怎么处理
- 05
对AIGC理解
- 06
学习渠道:企业内部落地文档 > 外网博客;博客偏理论,和生产环境差距大
- 07
求职偏好:互联网/金融均可;金融有多模态数据,业务更有挑战
- 08
个人职业期望
- 09
团队规模、核心业务方向,数据团队人数?
- 10
团队内部AI落地、AI工具使用现状?