崗位職責(zé):
1、AI模型質(zhì)量保障
設(shè)計并執(zhí)行針對機(jī)器學(xué)習(xí)/深度學(xué)習(xí)模型的測試方案,覆蓋模型準(zhǔn)確性、魯棒性、泛化能力及公平性驗(yàn)證
開發(fā)自動化測試工具鏈,實(shí)現(xiàn)模型訓(xùn)練、推理環(huán)節(jié)的持續(xù)集成/持續(xù)測試(CI/CT)
2、數(shù)據(jù)質(zhì)量管理
構(gòu)建數(shù)據(jù)質(zhì)量評估體系,檢測訓(xùn)練/測試數(shù)據(jù)的分布偏移、標(biāo)注錯誤及偏差問題
設(shè)計數(shù)據(jù)增強(qiáng)策略測試方案,評估增強(qiáng)策略對模型性能的影響
3、系統(tǒng)級測試開發(fā)
搭建AI服務(wù)壓力測試框架,驗(yàn)證高并發(fā)場景下的模型推理性能與資源消耗
設(shè)計端到端測試場景,驗(yàn)證AI系統(tǒng)與業(yè)務(wù)邏輯的集成表現(xiàn)
4、前沿技術(shù)研究
跟蹤AI測試領(lǐng)域新技術(shù)(如對抗樣本檢測、模型可解釋性驗(yàn)證),推動測試方法升級
建立AI系統(tǒng)風(fēng)險評估體系,制定模型迭代的準(zhǔn)出標(biāo)準(zhǔn)
任職要求:
1、硬性條件:
計算機(jī)/數(shù)學(xué)/統(tǒng)計學(xué)本科以上學(xué)歷,3年以上AI相關(guān)測試經(jīng)驗(yàn)
精通Python,掌握Pytest/Unittest框架,具備TensorFlow/PyTorch模型調(diào)試經(jīng)驗(yàn)
深入理解機(jī)器學(xué)習(xí)原理,熟悉常見模型評估指標(biāo)(如AUC、F1-score、混淆矩陣)
熟練使用Prometheus+Grafana監(jiān)控體系,有MLOps工具鏈(MLflow/Kubeflow)實(shí)戰(zhàn)經(jīng)驗(yàn)
2、高階能力:
具備對抗樣本生成(Foolbox/ART)或模型可視化(Captum/TF-explain)項(xiàng)目經(jīng)驗(yàn)
熟悉模型壓縮技術(shù)(量化/剪枝)的測試驗(yàn)證方法
有云原生AI服務(wù)測試經(jīng)驗(yàn)(AWS SageMaker/Azure ML)
3、素質(zhì)要求:
具備測試左移思維,能在需求階段識別AI系統(tǒng)潛在風(fēng)險
擅長通過A/B測試設(shè)計進(jìn)行多模型版本效果對比
持有ISTQB高級認(rèn)證或云平臺AI專項(xiàng)認(rèn)證優(yōu)先