職位描述：
1、根據(jù)業(yè)務(wù)目標(biāo)參與評測方案制定、建設(shè)評估數(shù)據(jù)集，并能夠站在用戶視角和模型視角構(gòu)建理想態(tài)答案并拆解考察點；
2、通過人工評估或自動評估的方法對模型回復(fù)效果或搜索效果進(jìn)行定性和定量的評估分析，能夠從全鏈路中進(jìn)行問題拆解和分析，幫助產(chǎn)研側(cè)定位問題并推動優(yōu)化；
3、撰寫PE或搭建workflow的方法推進(jìn)評估自動化，提升團隊評測效率和準(zhǔn)確性；
崗位要求：
1、985或211本科及以上，碩士可適當(dāng)放寬，有大模型相關(guān)經(jīng)驗優(yōu)先；
在較多垂直領(lǐng)域有很好的涉獵，能夠剖析專業(yè)、行業(yè)領(lǐng)域問題，輸出自己的見解；
2、有較好的搜索習(xí)慣，或大模型產(chǎn)品使用習(xí)慣，善于站在用戶視角反饋體驗問題，善于結(jié)合多角度拆解問題，有競品分析經(jīng)驗優(yōu)先 ；
3、對數(shù)據(jù)和文字敏感，文字理解及歸納能力強且擅長數(shù)據(jù)分析者優(yōu)先；
4、做事細(xì)心，較強的溝通協(xié)作能力、執(zhí)行力、復(fù)盤思考以及抗壓能力