Copilot podał zapis, którego nie ma w dokumencie - dlaczego tak robi

Microsoft 365 Copilot

Copilot podał zapis, którego nie ma w dokumencie - dlaczego tak robi

W skrócie

Zdarza się, że pytasz Copilota o konkretny zapis w dokumencie - kwotę kary, termin, warunek - a w odpowiedzi pojawia się coś, czego w pliku nie ma albo co brzmi inaczej niż oryginał. Ten problem dotyczy każdego, kto opiera decyzję na tym, co Copilot "wyczytał" z umowy, raportu czy protokołu. Pokazujemy, dlaczego tak się dzieje i jak sprawić, żeby Copilot trzymał się tego, co faktycznie zapisano.

Jak to wyglada w praktyce

Pytasz na przykład: "Jaka jest wysokość kary umownej za opóźnienie zapisana w tym raporcie i na jakiej stronie się znajduje?". Spodziewasz się kwoty i numeru strony. Jeśli tego zapisu w dokumencie nie ma, są dwa możliwe scenariusze. W gorszym model dopowiada prawdopodobnie brzmiącą kwotę. W lepszym, który zaobserwowaliśmy na własnym pliku przy włączonym Work IQ, Copilot odpowiada, że kary umownej w raporcie nie ma, więc nie ma też strony, na której miałaby być, i zamiast tego streszcza, co dokument faktycznie mówi o opóźnieniu. Problem "zapisu, którego nie ma" pojawia się najczęściej wtedy, gdy pytanie samo podsuwa gotową tezę - a model ma pokusę, żeby się do niej dopasować.

Dlaczego Copilot tak robi

Model językowy dąży do udzielenia spójnej, pomocnej odpowiedzi. Gdy pytanie zakłada istnienie jakiegoś faktu, pojawia się pokusa, żeby "domyślić się", o co Ci chodziło, i podstawić coś podobnego. Sprawdziliśmy, jak Copilot radzi sobie z takimi pułapkami: na ośmiu pytaniach o nasze własne pliki, przy włączonym Work IQ, ani razu nie podstawił danych, których nie miał. Zapytany o nieistniejący region "Centrum" wymienił cztery regiony, które faktycznie były w pliku - Północ, Południe, Wschód i Zachód - i odmówił liczenia dla Centrum, pisząc wprost, że zastąpienie go innym regionem byłoby nieuzasadnionym założeniem. To pokazuje mechanikę: w trybie opartym na Twoich danych, z dostępem do plików, Copilot woli nazwać brak, niż wypełnić lukę zgadywaniem. Ryzyko "zapisu, którego nie ma" rośnie, gdy odetniesz go od pliku albo pracujesz na tekście wklejonym wprost do rozmowy.

Jak to rozwiazac krok po kroku

1. Wskazuj konkretny dokument ukośnikiem i pytaj o zapis w odniesieniu do niego, a nie ogólnie. Copilot musi mieć plik, żeby móc go cytować.
2. W pytaniu żądaj konkretu, którego nie da się zmyślić po cichu: oryginalnego zdania oraz strony albo sekcji. Sam wymóg wskazania miejsca utrudnia dopowiadanie.
3. Gdy dostaniesz odpowiedź, poproś o dokładny fragment: "Zacytuj dokładny fragment dokumentu, na którym opierasz to twierdzenie. Podaj oryginalne zdanie oraz nazwę pliku i sekcję."
4. Nie zakładaj w pytaniu faktu, którego nie jesteś pewien. Zamiast "ile wynosi kara umowna" zapytaj "czy w tym dokumencie jest zapis o karze umownej, a jeśli tak, zacytuj go".
5. Jeśli zapisu nie ma, potraktuj odmowę jako informację, ale sprawdź też, czy w ogóle pracujesz na właściwym i kompletnym pliku.
6. Nigdy nie przenoś takiego zapisu do własnego dokumentu bez zajrzenia do oryginału.

Jak sprawdzic, ze zadzialalo

Dobra odpowiedź na pytanie o brakujący zapis ma powtarzalny wzorzec: Copilot nazywa dokument albo pole, którego szukał, mówi, że go nie znalazł, wylicza konkretnie, czego nie może podać, i proponuje, co może zrobić zamiast tego. Odpowiedź merytoryczna wygląda odwrotnie - ma cytat, ma nazwę pliku i sekcję, ma odnośnik "Źródła" pod spodem. Jeśli po prośbie o dokładny fragment Copilot podaje oryginalne zdanie, które faktycznie znajdujesz w dokumencie, zapis jest prawdziwy. Jeśli nie potrafi zacytować, a mimo to wcześniej podał kwotę czy termin, masz dowód, że ten "zapis" nie pochodzi z Twojego pliku i nie wolno go używać.

Wroc do listy: 200 najczestszych problemow z Microsoft 365 Copilot