Zmiany w umowie: kiedy warto dostosować model do ich kategoryzacji?

Zaznaczona różnica i jej miejsce w przeglądzie

Klient odsyła umowę po poprawkach. W wersji do uzgodnienia jest „Raport przekazywany co miesiąc”, a w wersji po uwagach „Raport przekazywany co tydzień”. W innym miejscu zmienił się tylko podział akapitu na wiersze. Porównanie zaznacza oba miejsca, a koordynator musi ustalić, komu przekazać każde z nich.

Model przypisuje pierwszej zmianie kategorię zobowiązań raportowych, a drugiej zmian formatowania. Koordynator widzi oba fragmenty obok siebie, sprawdza kategorię i kieruje zmianę merytoryczną do właściwego recenzenta, bez przekazywania całego zestawienia. Gdy sens nowego sformułowania zależy od odesłania do innego punktu, kategoria zostaje nierozstrzygnięta, a widok pozwala wrócić do dokumentów.

Ile daje prostsza zmiana, a ile trening

W tym rachunku uzgodnione definicje kategorii daje większość efektu za ułamek kosztu. Trening ma sens przy większej skali albo gdy pozostałe błędy są kosztowne. Znaczenie kategorii oddzielamy od nazwiska recenzenta: zmiana odpowiedzialności w zespole wymaga aktualizacji przypisania, bez ponownego uczenia modelu.

Zbiór przykładów do uczenia trzeba utrzymywać: gdy zmienia się proces, nazewnictwo albo model bazowy, ocenę powtarza się na tym samym zbiorze testowym. Ten koszt wpisujemy do wyceny razem z samym uczeniem.

Najpierw porównanie tekstu

Jeśli zespół potrzebuje głównie znaleźć zmienione miejsca, zacznij od narzędzia, które ma: Microsoft Word porównuje dwa dokumenty i pokazuje różnice w trzecim dokumencie. Systemy do zarządzania umowami porównują też klauzule semantycznie, co opisuje dokumentacja Conga. Kategoryzacja to osobna praca, gdy zaznaczonych fragmentów jest wiele, a zespół porządkuje je według tych samych tematów. Przed dostosowaniem eksperci firmy uzgadniają, co znaczy „zmiana redakcyjna”, bo dla jednej osoby to układ tekstu, a dla drugiej też nowe sformułowanie.

Od czego zacząć

Do fine-tuningu potrzebne są zmiany między dwiema wersjami z kategorią potwierdzoną przez eksperta; komentarz „zaakceptowane” z dawnych negocjacji nie wyjaśnia rodzaju zmiany. Porównanie robimy na parach wersji niewykorzystanych do dostosowania. Zakres obiegu umów opisuje AI do umów. Dostosowanie modeli prowadzimy w ramach prywatnych modeli LLM, a aplikację, w której pracownik widzi wynik obok źródła, w ramach aplikacji AI. Na bezpłatną analizę wystarczy kilka przykładów błędu, który wraca, i opis, kto go dziś poprawia.