職位描述:
1.負(fù)責(zé)大模型在數(shù)據(jù)分析方向評測集的構(gòu)建,參與定制相關(guān)評測的標(biāo)準(zhǔn),與算法、產(chǎn)品協(xié)同提升評測的質(zhì)量與效率。
2.在數(shù)據(jù)分析方向,探索鏈路合成query/答案/自動評估標(biāo)準(zhǔn),實現(xiàn)自動生產(chǎn)數(shù)據(jù)和自動評估。
3.分析模型當(dāng)下的bad case,給出模型弱點分布,為算法、標(biāo)注側(cè)提出行之有效的優(yōu)化建議。
職位要求:
1.本科及以上學(xué)歷,計算機、人工智能、應(yīng)用數(shù)學(xué)、統(tǒng)計學(xué)等相關(guān)專業(yè)優(yōu)先,必須熟練掌握python。
2.數(shù)據(jù)分析評測方向的同學(xué),需要有過數(shù)據(jù)分析項目,了解一定數(shù)分理論,熟練掌握python和sql
3.熟悉 Prompt Engineering 核心方法論,有 PE 項目實踐經(jīng)驗,理解 AI Agent 工作原理、Function Call 機制,掌握 SFT 與 RL 等基礎(chǔ)概念,對大模型相關(guān)工作充滿熱情。
4.能夠熟練掌握 Python 進(jìn)行數(shù)據(jù)處理,有自動化腳本開發(fā)經(jīng)驗優(yōu)先。
5.有具體的數(shù)據(jù)合成項目、自動評估方案實踐的同學(xué)優(yōu)先。