Długie dokumenty i AI: umowy, raporty i PDF-y bez gubienia faktów

Dostajesz od kontrahenta umowę na 38 stron. Termin na uwagi: jutro. Wrzucasz PDF do czatu i piszesz „streść”. Po minucie masz zgrabne podsumowanie na pół strony. Wygląda rozsądnie. Podpisujesz.

Trzy miesiące później okazuje się, że w punkcie 14.3 była kara umowna za opóźnienie płatności, której streszczenie nie wspomniało. Model nie skłamał. Po prostu uznał ją za szczegół.

AI naprawdę potrafi czytać długie dokumenty i robi to imponująco szybko. Ale „przeczytać” i „wyłapać to, co ważne dla Ciebie” to dwie różne rzeczy. Ten odcinek jest o tym, jak pracować z umowami, raportami i PDF-ami tak, żeby szybkość nie kosztowała dokładności.

Okno kontekstu i dlaczego środek bywa pomijany

Każdy model ma okno kontekstu, czyli ilość tekstu, którą może „widzieć” naraz. Mierzy się je w tokenach (token to mniej więcej kawałek słowa; w języku polskim jedno słowo to zwykle 2-3 tokeny). Współczesne modele mają okna liczone w setkach tysięcy tokenów, a niektóre w milionach. Typowa umowa czy raport mieści się bez problemu.

Ale to, że tekst się mieści, nie znaczy, że każdy jego fragment dostaje tyle samo uwagi. Badanie Liu i współpracowników z 2023 roku pod wymownym tytułem „Lost in the Middle” pokazało, że modele najlepiej wykorzystują informacje z początku i z końca długiego kontekstu, a najsłabiej te ukryte w środku. Nowsze modele radzą sobie z tym znacznie lepiej, ale zasada ostrożności zostaje: im dłuższy dokument i im bardziej ogólne pytanie, tym większa szansa, że coś ze środka umknie.

Druga sprawa: niektóre aplikacje przy bardzo dużych plikach albo wielu plikach naraz nie czytają wszystkiego w całości, tylko wyszukują fragmenty pasujące do pytania. Wtedy jakość odpowiedzi zależy od tego, czy Twoje pytanie naprowadzi wyszukiwanie na właściwe miejsce.

Wniosek praktyczny: nie pytaj ogólnie. Pytaj konkretnie, pod swój cel.

Trzy sposoby czytania dokumentu

Streszczenie ogólne

„Streść ten dokument” daje to, co model uzna za najważniejsze z perspektywy przeciętnego czytelnika. Dobre na pierwsze spojrzenie: o czym to jest, jak jest zbudowane, czy warto czytać dalej. Złe jako podstawa decyzji.

Streszczenie pod cel

Tu mówisz, kim jesteś i co masz zdecydować:

Jestem właścicielem małej firmy transportowej i mam podpisać tę umowę ramową jako podwykonawca. Wypisz wszystkie zapisy, które: 1) nakładają na mnie kary lub odpowiedzialność, 2) pozwalają drugiej stronie zmienić warunki lub wypowiedzieć umowę, 3) dotyczą terminów płatności. Przy każdym podaj numer punktu.

To zupełnie inne zadanie niż „streść”. Model nie ocenia już, co jest ważne „ogólnie”, tylko szuka konkretnych kategorii. A numery punktów pozwalają Ci każdą informację sprawdzić w kilka sekund.

Ekstrakcja do tabeli

Najbezpieczniejsza forma. Prosisz o wypisanie wszystkich elementów danego rodzaju w ustalonym formacie:

Wypisz w tabeli wszystkie terminy i kwoty pojawiające się w umowie. Kolumny: co (krótki opis), wartość, punkt umowy, dosłowny cytat (maks. 20 słów).

Tabela ma ogromną zaletę: każdy wiersz da się sprawdzić osobno. Streszczenie w prozie miesza fakty z interpretacją, a tabela oddziela je od siebie.

Metoda dwóch przebiegów

Przy dokumentach, od których coś zależy (umowa, oferta przetargowa, decyzja urzędowa, raport finansowy), stosuję prostą metodę.

Przebieg pierwszy: ekstrakcja z cytatami. Model wypisuje fakty razem z dosłownym cytatem i numerem strony lub punktu. Prośba o dosłowny cytat ma znaczenie. Model, który musi podać źródło, rzadziej dopowiada od siebie.

Przebieg drugi: weryfikacja w nowej rozmowie. Otwierasz nową rozmowę, wrzucasz ten sam dokument i tabelę z pierwszego przebiegu:

Poniżej jest tabela faktów wyciągniętych z załączonej umowy. Dla każdego wiersza sprawdź, czy cytat występuje w dokumencie dosłownie i czy wartość jest zgodna. Oznacz: ZGODNE / NIEZGODNE / NIE ZNALEZIONO. Przy niezgodnych podaj prawidłowy fragment.

Nowa rozmowa jest ważna, bo model nie jest wtedy „przywiązany” do swojej wcześniejszej odpowiedzi.

Twoja kontrola wyrywkowa. Sam sprawdzasz w oryginale 3-5 najważniejszych punktów: kary, terminy, kwoty, warunki wypowiedzenia. To zajmuje kilka minut, a daje pewność, której żaden model nie zapewni.

Dopiero potem wnioski. Streszczenie, ocena ryzyka, lista pytań do drugiej strony. Na podstawie sprawdzonej tabeli, a nie odwrotnie.

Liczby wymagają szczególnej ostrożności

Modele językowe są dobre w rozumieniu tekstu, gorsze w precyzyjnej arytmetyce na danych z dokumentu. Jeśli raport ma tabelę z przychodami za 12 miesięcy, a Ty pytasz o średnią, model może ją policzyć poprawnie, ale może też pomylić wiersz albo źle odczytać liczbę z rozbitej tabeli w PDF-ie.

Bezpieczniejsza ścieżka:

1. Poproś o przepisanie danych do tabeli (bez liczenia).
2. Sprawdź tabelę wzrokiem z oryginałem.
3. Obliczenia zrób w arkuszu albo poproś model o wykonanie ich narzędziem do analizy danych (wiele czatów ma tryb, w którym model pisze i uruchamia krótki kod do obliczeń; o tym więcej w odcinku o arkuszach).

Rozdzielenie odczytu od liczenia to stara zasada księgowych. W pracy z AI sprawdza się tak samo.

Gdy plik jest „trudny”

Nie każdy PDF jest równy. Model czyta tekst, a nie wszystkie PDF-y tekst zawierają.

Skany bez warstwy tekstu. Jeśli nie możesz zaznaczyć tekstu w PDF-ie myszką, to w środku jest tylko obraz. Większość dużych czatów potrafi odczytać tekst z obrazu, ale robi to mniej pewnie, szczególnie przy słabej jakości, małej czcionce albo pieczątkach. Przy ważnych dokumentach lepiej najpierw przepuścić plik przez porządne rozpoznawanie tekstu (OCR), np. w programie do skanowania albo w aplikacji do PDF-ów, i sprawdzić wynik.

Tabele rozbite na strony. Tabela, która zaczyna się na stronie 12, a kończy na 14, często „rozsypuje się” przy odczycie. Wiersze się przesuwają, nagłówki giną. Jeśli to możliwe, poproś o oryginał w Excelu albo Wordzie.

Dopiski, pieczątki, pismo odręczne. Tu AI bywa zaskakująco dobra, ale nie na tyle, żeby jej ślepo ufać. Wszystko, co odręczne, sprawdzaj sam.

Porównywanie wersji dokumentu

Bardzo praktyczne zastosowanie: druga strona odsyła poprawioną umowę „z drobnymi zmianami”. Zamiast czytać 38 stron od nowa:

Załączam dwie wersje umowy: A (moja) i B (odesłana przez kontrahenta). Wypisz wszystkie różnice merytoryczne w tabeli: punkt, brzmienie w A, brzmienie w B, znaczenie zmiany dla mnie (jedno zdanie). Pomiń różnice w formatowaniu i literówki.

Uwaga: przy długich dokumentach model może przeoczyć drobną zmianę, np. „14 dni” na „7 dni”. Jeśli masz pliki Word, użyj też wbudowanej funkcji porównywania dokumentów. Jest nudna, ale bezbłędna. AI dorzuca wtedy to, czego Word nie umie: wyjaśnienie, co zmiana oznacza.

Pytania, które warto zadać każdemu dokumentowi

Kilka uniwersalnych pytań, które wyciągają z dokumentu to, czego ogólne streszczenie nie pokaże:

• „Czego w tym dokumencie brakuje, a co zwykle jest w dokumentach tego typu?” Model zna setki umów i raportów. Potrafi zauważyć, że w umowie nie ma zapisu o poufności albo że raport nie podaje metodologii.
• „Które zapisy są niejednoznaczne i mogą być różnie interpretowane?” Świetne przed negocjacjami.
• „Wypisz wszystkie zobowiązania mojej strony z terminami.” Gotowa lista do kalendarza.
• „Jakie pytania zadałby tu doświadczony prawnik/księgowy/analityk?” Nie zastąpi specjalisty, ale przygotuje Cię do rozmowy z nim.

Granice: kiedy potrzebny jest człowiek

AI świetnie przygotowuje Cię do decyzji, ale nie bierze za nią odpowiedzialności. Przy umowach o dużej wartości, sprawach spadkowych, podatkowych, sądowych czy medycznych analiza z AI jest punktem wyjścia do rozmowy ze specjalistą, nie jej zastępstwem.

Paradoksalnie, właśnie tu AI daje najwięcej oszczędności. Prawnik, któremu przynosisz listę 12 konkretnych pytań do konkretnych punktów, pracuje krócej (i taniej) niż ten, któremu dajesz umowę ze słowami „proszę zobaczyć, czy wszystko OK”.

Prywatność dokumentów

Zanim wrzucisz dokument do czatu, zadaj sobie pytanie: czy mogę go przekazać zewnętrznej firmie? Umowa z klauzulą poufności, dokumentacja medyczna, dane osobowe pracowników to materiały, które w wielu przypadkach nie powinny trafiać do prywatnego konta w czacie AI.

Rozwiązania: wersje firmowe z umową powierzenia danych, usunięcie danych osobowych przed wklejeniem (anonimizacja), albo model uruchomiony lokalnie na własnym komputerze. O modelach lokalnych i całym temacie bezpieczeństwa piszemy w finale serii.

Przykład z życia: oferta przetargowa w jeden wieczór

Tomasz prowadzi firmę instalacyjną i chce wystartować w przetargu gminy na modernizację oświetlenia w szkole. Specyfikacja warunków zamówienia ma 64 strony plus 7 załączników. Termin: za cztery dni.

Zamiast czytać wszystko od deski do deski, Tomasz pracuje etapami.

Etap 1: mapa dokumentu. „Wypisz spis treści tej specyfikacji z numerami stron i jednym zdaniem o tym, czego dotyczy każda część”. Po dwóch minutach wie, gdzie są warunki udziału, kryteria oceny ofert, wymagane dokumenty i wzór umowy.

Etap 2: lista wymagań. „Wypisz w tabeli wszystkie warunki, które musi spełnić wykonawca, i wszystkie dokumenty do złożenia z ofertą. Kolumny: wymaganie, punkt specyfikacji, dosłowny cytat, czy dotyczy oferty czy późniejszego etapu”. Tabela ma 31 wierszy.

Etap 3: weryfikacja. W nowej rozmowie sprawdza tabelę z dokumentem. Dwa cytaty okazują się nieprecyzyjne (model połączył dwa punkty w jeden), jeden wymóg był pominięty: wadium. Tomasz poprawia tabelę i sam sprawdza w oryginale pięć najważniejszych pozycji: termin, wadium, wymagane doświadczenie, kryteria oceny, kary umowne.

Etap 4: ryzyka we wzorze umowy. „Jestem wykonawcą. Wypisz zapisy wzoru umowy, które przenoszą na mnie ryzyko lub koszty: kary, gwarancje, terminy płatności, odpowiedzialność za opóźnienia podwykonawców”. Okazuje się, że kara za każdy dzień opóźnienia jest wysoka, a termin realizacji krótki. To informacja, która wpływa na wycenę.

Etap 5: pytania do zamawiającego. „Które zapisy są niejednoznaczne i warto o nie zapytać zamawiającego przed złożeniem oferty?” Tomasz wysyła dwa pytania, oba z numerami punktów.

Cała analiza zajęła wieczór zamiast dwóch dni. Ale zwróć uwagę: każdy etap kończył się sprawdzeniem przez człowieka tego, od czego zależą pieniądze.

Najczęstsze pytania

Czy mogę wgrać kilka dokumentów naraz? Tak, większość czatów na to pozwala. Przy wielu plikach mów wprost, w którym dokumencie szukać („w załączniku nr 3”), i proś o podawanie nazwy pliku przy każdym fakcie. Inaczej trudno potem sprawdzić, skąd pochodzi informacja.

Co zrobić, gdy dokument przekracza limit? Podziel go na części (np. rozdziały) i pracuj z każdą osobno, a na końcu poproś o połączenie wniosków. Albo najpierw zrób „mapę dokumentu”, a potem wklejaj tylko te fragmenty, które są istotne dla Twojego pytania.

Czy AI zauważy, że w umowie czegoś brakuje? Często tak, jeśli o to zapytasz wprost: „Czego brakuje w porównaniu z typową umową tego rodzaju?”. Bez tego pytania model skupia się na tym, co jest w tekście, a nie na tym, czego w nim nie ma.

Czy tłumaczenie dokumentu z AI jest wiarygodne? Do zrozumienia treści zwykle tak. Do celów urzędowych i prawnych potrzebujesz tłumacza, a często tłumacza przysięgłego. Przy tłumaczeniu umów proś o zachowanie numeracji punktów, żeby łatwo porównać wersje.

Typowe błędy przy pracy z dokumentami

Pytanie „czy wszystko w porządku?”. Model prawie zawsze odpowie uspokajająco, bo nie wie, co dla Ciebie znaczy „w porządku”. Zamiast tego pytaj o konkretne kategorie: kary, terminy, odpowiedzialność, koszty ukryte.

Ufanie numerom stron. W PDF-ach numer strony w stopce bywa inny niż numer strony w pliku. Proś o numery punktów i nagłówki rozdziałów, a nie tylko o strony.

Mieszanie wersji. Rozmowa, w której pracowałeś na wersji 1 umowy, a potem wkleiłeś wersję 2, łatwo miesza zapisy z obu. Każda wersja to osobna rozmowa albo wyraźne oznaczenie „WERSJA A” i „WERSJA B”.

Streszczenie streszczenia. Gdy prosisz o skrót raportu, potem o skrót skrótu, a na końcu o „jedno zdanie”, każdy krok gubi niuanse. Jeśli potrzebujesz krótkiej wersji, poproś o nią od razu na podstawie oryginału.

Pomijanie załączników. Najważniejsze bywają w załącznikach: cenniki, harmonogramy, specyfikacje techniczne, ogólne warunki. Upewnij się, że model je dostał, i zapytaj o nie wprost.

Najważniejsze w skrócie

AI czyta szybko, ale ocenia ważność „ogólnie”, nie z Twojej perspektywy. Dlatego zamiast prosić o streszczenie, mów, jaką decyzję podejmujesz, i proś o konkretne kategorie informacji z numerami punktów. Przy ważnych dokumentach stosuj dwa przebiegi: ekstrakcję z dosłownymi cytatami, a potem weryfikację w nowej rozmowie. Liczby przepisuj, a liczenie zostaw arkuszowi. Trudne pliki (skany, rozbite tabele) najpierw przygotuj.

Ćwiczenie na dziś: weź dowolną umowę, którą masz pod ręką (np. z operatorem telefonii albo z dostawcą prądu). Poproś AI o tabelę wszystkich opłat, kar i terminów wypowiedzenia z numerami punktów i cytatami. Sprawdź trzy wiersze w oryginale. Prawdopodobnie dowiesz się o swojej umowie czegoś nowego.