Research orzeczeń: jak działa ten proces

Czy cytat rzeczywiście podtrzymuje argument

Prawnik potrzebuje fragmentu orzeczenia wraz z miejscem, z którego pochodzi. Lista podobnych dokumentów staje się przydatna dopiero wtedy, gdy można otworzyć pełny kontekst i sprawdzić, czy fragment wspiera argument, czy tylko zawiera podobne słowa. Model, który parafrazuje uzasadnienie, daje tekst, którego nie da się zacytować w piśmie.

Dlatego cytat jest osobnym typem danych: dokładny fragment, sygnatura, adres rekordu i czas pobrania. System sprawdza, czy fragment występuje dosłownie w tekście źródłowym. Teza bez takiego oparcia zostaje zatrzymana. W naszym demonstratorze zbiór obejmował 40 fragmentów orzeczeń z SAOS z adresem i czasem pobrania, a lokalny przebieg 10 pytań nie wymagał opłat za zewnętrzne API.

Ocenę ustaw osobno dla trafności źródła i zgodności cytatu. Etykiety tematyczne w małym zbiorze są słabe i mogą zniekształcać ocenę wyszukiwania, dlatego pełny kontekst zawsze sprawdza się w kanonicznym rekordzie SAOS.

Ile to kosztuje i kiedy się zwraca

Rachunek liczy pracę wokół sprawy: szukanie, czytanie, pisanie i przekazywanie. Zostaje czas na sprawdzenie wyniku, w scenariuszu 40% dzisiejszej pracy. Przed wyceną mierzymy oba czasy na 20 do 100 sprawach, które zespół już obsłużył, w teście za 0 zł trwającym 5 dni roboczych.

Ważniejszy od godzin jest błąd, którego nie ma: cytat, którego nie ma w orzeczeniu, w piśmie procesowym. Dlatego najważniejszą miarą próby jest liczba tez, które przeszły walidację bez dosłownego oparcia w źródle: docelowo zero.

Ograniczenia demonstratora

Korpus obejmował 40 ukierunkowanych fragmentów, bez pełnego SAOS i akt spraw. Benchmark miał 10 zapisanych pytań, a narzędzie nie udziela porad prawnych i nie było wdrożone u klienta. Wdrożenie w kancelarii zaczyna się od jednej dziedziny i zestawu pytań z ręcznie wskazanymi fragmentami, na których mierzymy trafność. Zasady oceny opisuje przewodnik OpenAI o ewaluacji: ten sam zestaw przypadków przed zmianą i po niej.

Od czego zacząć

Pierwszy zakres obejmuje jedną dziedzinę i zestaw pytań z fragmentami wskazanymi przez prawników. Ekrany demonstratora pokazuje strona researchu orzeczeń. Takie wdrożenie budujemy w ramach aplikacji AI. Na bezpłatną analizę wystarczy opis jednej sprawy z ostatnich tygodni i narzędzi, w których się toczyła. Nie trzeba przesyłać poufnych dokumentów, a plan na piśmie dostajesz w 2 dni robocze.