Clever Geek Handbook

期待と現実: ML システムの指標が売上を下げるのはなぜですか? ケルススの仕事の事例

画像



, ML- , . ML-, , . - , , ML-.



, ( ).



本番環境でのメトリクス低下の最も一般的な理由、つまり技術的なエラーから始めましょう 。たとえば、オフライン テストと本番環境でのモデルの予測は、画像の前処理に使用されるコードの違いにより異なる場合があります。この恥から身を守る簡単な方法がいくつかあります。



  • . (, , ) , . . : , - , ( – , – ).



    画像



    • -. , -. , , -, , ML- .


    画像



    • . , , ML-, , (, ). , , COVID-19 . , , . ( ).


    — , . .



    , (ROC-AUC = 0.53, ), . , ML- . , ML- - , , .



    , . , , . , , , - . ML- Out-of-Distribution . , , ML-. .



    画像





    . , , (, ). , (, ML- - ) . ML covariate shift concept drift.



    , , ML- , . , , , , .



    , , . ( , , ) , . , - . , , : .



    , . -. - . ML- , , .



    , . – , .



    , ( ) ML- , - . ML- . -, , .



    , ML- – ML-. , , :



    • ( -, , )
    • ML- Out-of-Distribution-
    • ,
    • , –


More articles:


All Articles