Jak weryfikować odpowiedzi Copilota krok po kroku

Microsoft 365 Copilot

Jak weryfikować odpowiedzi Copilota krok po kroku

W skrócie

Jeśli używasz Copilota do liczb i podsumowań, które trafiają dalej, potrzebujesz szybkiego sposobu na sprawdzenie, czy odpowiedzi można ufać. Ten problem dotyczy każdego, kto nie chce ślepo wklejać wyników, ale też nie chce spędzać nad każdą odpowiedzią kwadransa. Pokazujemy prostą procedurę weryfikacji, która po kilku powtórzeniach wchodzi w krew.

Jak to wyglada w praktyce

Dostajesz od Copilota gotowe podsumowanie z kwotami i procentami. Wygląda profesjonalnie, ton jest pewny, więc pokusa brzmi: skopiować i mieć z głowy. Kłopot w tym, że na oko nie odróżnisz liczby przepisanej wprost z pliku od takiej, którą model policzył sam albo oszacował. Nie widać też, czy podsumowanie nie pominęło warunku, od którego zależy sens całości. W naszym pomiarze wartości liczone na pliku wskazanym ukośnikiem zgadzały się z arkuszem co do grosza, a mimo to część "danych" po dopytaniu okazywała się interpretacją modelu, na przykład ranking "TOP 3", którego dokument wcale nie nazywał w ten sposób. Bez weryfikacji te dwie warstwy się zlewają.

Dlaczego Copilot tak robi

Copilot odpowiada w jednym spójnym tekście, w którym miesza to, co odczytał z Twoich plików, z tym, co dopowiedział albo policzył. Nie oznacza sam z siebie, gdzie kończy się cytat, a zaczyna jego porządkowanie. Sprawdziliśmy na ośmiu pytaniach o własne pliki, przy włączonym Work IQ: tam, gdzie brakowało podstaw, Copilot odmawiał i nazywał powód, a tam, gdzie liczył, wynik był zgodny z arkuszem. Weryfikacja nie polega więc na tropieniu zmyśleń, których w tym trybie nie było, tylko na rozdzieleniu faktu ze źródła od interpretacji. To Ty odpowiadasz za treść, która wychodzi pod Twoim nazwiskiem, więc to Ty tę granicę musisz wymusić.

Jak to rozwiazac krok po kroku

1. Poproś o źródła: "Podaj źródła dla każdej informacji w powyższej odpowiedzi. Przy każdej liczbie i twierdzeniu napisz, z którego dokumentu, arkusza albo maila to pochodzi. Jeśli czegoś nie ma w dostępnych plikach, oznacz to wyraźnie jako informację niepotwierdzoną."
2. Rozdziel fakty od oszacowań: "Które liczby w tej odpowiedzi pochodzą wprost z dokumentu, a które oszacowałeś albo wyliczyłeś samodzielnie? Rozpisz to w dwóch osobnych listach: dane pewne ze źródła oraz Twoje oszacowania."
3. Przy cytatach poproś o dokładny fragment: "Zacytuj dokładny fragment dokumentu, na którym opierasz to twierdzenie. Podaj oryginalne zdanie oraz nazwę pliku i sekcję."
4. Kluczowe liczby przelicz sam, najlepiej w tabeli Excela, gdzie Copilot generuje formułę liczącą naprawdę, a nie pojedynczy wynik.
5. Klikaj w cytowane odwołania w aplikacjach, które pokazują przypisy do plików (na przykład Word czy Teams), i sprawdzaj, czy dokument mówi to, co Copilot streścił.
6. Traktuj każdą odpowiedź jako wersję roboczą - nic nie wychodzi z Twoich rąk bez przeczytania całości.

Jak sprawdzic, ze zadzialalo

Po prompcie o źródła odpowiedź zamienia się w coś sprawdzalnego: przy każdej liczbie pojawia się plik, arkusz i kolumny, a wartości zapisane w pliku są oddzielone od policzonych. Po prompcie rozdzielającym dostajesz dwie osobne listy zamiast jednej, więc od razu widzisz, ile z odpowiedzi jest cytatem, a ile interpretacją. Gdy klikniesz w odnośnik "Źródła" i podlinkowany dokument potwierdza treść, weryfikacja jest domknięta. Jeśli natomiast Copilot nie potrafi wskazać źródła liczby, to najsilniejszy możliwy sygnał, że nie wzięła się ona z Twoich plików, tylko z ogólnej wiedzy modelu. Brak źródła traktuj jak ostrzeżenie.

Wroc do listy: 200 najczestszych problemow z Microsoft 365 Copilot