Dla biznesu
Co to jest
To, co poprawiają recenzenci, wraca do systemu: lepsze przykłady, zaktualizowana wiedza, ponownie zaindeksowane dokumenty.
Dlaczego to ważne
System poprawia się w miarę używania, zamiast stać w miejscu po starcie.
Ryzyko bez tego
Te same błędy się powtarzają, a recenzenci przestają mu ufać.
Dla inżynierów
Jak to działa
Poprawki i oceny recenzentów stają się przypadkami ewaluacyjnymi oraz, tam gdzie to zasadne, aktualizacjami bazy wiedzy; zmiany uruchamiają ponowny chunking i embedding dotkniętych dokumentów; zmiany promptów przechodzą ewaluacje przed release’em.
Typowy stack
- magazyn feedbacku
- przyrostowe zadania reindeksacji
- pipeline ewaluacji
Pułapki i kompromisy
- Nie każda poprawka jest lekcją. Segreguj je.
- Reindeksuj przyrostowo.
- Pokazuj recenzentom, że ich feedback został uwzględniony.
Przykładowy wzorzec · fikcyjne dane · nie system klienta