Čo je fine-tuning
Fine-tuning je ďalšie trénovanie existujúceho modelu na starostlivo pripravených príkladoch. Cieľom je stabilnejší štýl, formát alebo správanie v presne vymedzenej úlohe. Nie je to spôsob priebežného ukladania aktuálnych firemných znalostí do modelu.
Kedy dáva zmysel
Úprava je vhodná, ak kvalitné pokyny a niekoľko príkladov stále neprinášajú dostatočne konzistentné výsledky. Typickým cieľom je opakovaný formát odpovede, špecifická klasifikácia alebo jednotný tón pri veľkom počte požiadaviek.
Príprava tréningových údajov
Príklady musia zodpovedať skutočnému použitiu, obsahovať správne odpovede a pokrývať bežné aj náročné situácie. Duplicitné, rozporné či citlivé údaje sa odstraňujú. Samostatná testovacia sada nesmie byť súčasťou tréningu.
Meranie kvality
Upravený model sa porovnáva so základnou verziou na rovnakých úlohách. Sleduje sa presnosť, stabilita formátu, počet chýb, náklady a rýchlosť. Hodnotenie zahŕňa automatické metriky aj kontrolu ľudí, ktorí procesu rozumejú.
Riziká a údržba
Model môže prevziať chyby, predsudky alebo zastarané vzorce z údajov. Potrebuje preto verzovanie, kontrolu prístupu, možnosť návratu a opakované hodnotenie po zmene zadania. Nové fakty je často vhodnejšie poskytovať cez bezpečne riadený zdroj znalostí.
Prístup PAR HOUSE Agency
Fine-tuning odporúčame až po overení jednoduchších metód. Najprv meriame východiskovú kvalitu, pripravujeme reprezentatívne údaje a stanovujeme kritériá prijatia. Nasadenie prepájame s monitoringom, bezpečnosťou a jasnou zodpovednosťou za aktualizácie.
