Jak odróżnić fakty od oszacowań w odpowiedzi Copilota

Microsoft 365 Copilot

Jak odróżnić fakty od oszacowań w odpowiedzi Copilota

W skrócie

W jednej odpowiedzi Copilota potrafią stać obok siebie dane przepisane wprost z pliku i wartości, które model policzył albo oszacował sam - a na oko wyglądają identycznie. Ten problem dotyczy każdego, kto na podstawie takiej odpowiedzi buduje raport albo decyzję i potrzebuje wiedzieć, co jest twardym faktem, a co interpretacją. Pokazujemy, jak rozdzielić te dwie warstwy jednym pytaniem.

Jak to wyglada w praktyce

Copilot podaje spójny akapit: kilka kwot, procent, ranking, wniosek. Wszystko tym samym tonem, więc zakładasz, że całość pochodzi z dokumentu. Tymczasem część "danych" bywa oszacowaniem albo porządkiem nadanym przez model. Na własnym pliku widzieliśmy to wyraźnie: Copilot przedstawił "TOP 3 najniższej marży", ale dokument wcale nie nazywał tej trójki w ten sposób - numery pozycji nadał sam po posortowaniu. Kwoty pochodziły z pliku, ranking już nie. Inny przykład: liczbę 115 potwierdził jako liczbę rekordów sprzedażowych, ale jej interpretację jako liczby unikalnych transakcji oznaczył jako niepotwierdzoną, bo arkusz nie ma identyfikatora transakcji. Dopóki nie zapytasz, obie warstwy wyglądają jak jeden fakt.

Dlaczego Copilot tak robi

Copilot odpowiada jednym płynnym tekstem, w którym naturalnie łączy odczyt z pliku z własnym liczeniem i porządkowaniem. Nie oznacza domyślnie, gdzie kończy się cytat, a zaczyna interpretacja - to Ty musisz o ten podział poprosić. Warto znać kontekst: na ośmiu pytaniach o nasze pliki, przy włączonym Work IQ, wartości liczone na pliku wskazanym ukośnikiem zgadzały się z arkuszem co do grosza. Problem nie polega więc na tym, że liczby są błędne, tylko na tym, że fakt i oszacowanie występują razem. Co ważne, po dopytaniu Copilot sam potrafi je rozdzielić i uczciwie oznaczyć, czego nie da się potwierdzić danymi - jak przy interpretacji liczby 115. Trzeba go tylko o to poprosić.

Jak to rozwiazac krok po kroku

1. Zadaj prompt rozdzielający: "Które liczby w tej odpowiedzi pochodzą wprost z dokumentu, a które oszacowałeś albo wyliczyłeś samodzielnie? Rozpisz to w dwóch osobnych listach: dane pewne ze źródła oraz Twoje oszacowania."
2. Dla wartości z listy "ze źródła" poproś o źródło: "Przy każdej napisz, z którego pliku, arkusza i kolumny pochodzi."
3. Dla wartości z listy "oszacowania" poproś o metodę: "Opisz, jak policzyłeś każdą z tych wartości i na jakich danych."
4. Przy twierdzeniach jakościowych i rankingach każ pokazać oryginał: "Zacytuj dokładny fragment dokumentu, na którym opierasz to twierdzenie" - to demaskuje etykiety typu "TOP" czy "najważniejsze" dodane przez model.
5. Kluczowe wartości z listy oszacowań przelicz sam w tabeli Excela, gdzie Copilot generuje formułę liczącą naprawdę.
6. Do dokumentu, na którym ktoś się oprze, przenoś świadomie: fakty ze źródła jako dane, oszacowania wyraźnie oznaczone jako oszacowania.

Jak sprawdzic, ze zadzialalo

Po prompcie rozdzielającym dostajesz dwie osobne listy zamiast jednej: dane przepisane ze skoroszytu oraz wartości, które Copilot obliczył albo uporządkował sam. To najprostszy sposób sprawdzenia, ile z odpowiedzi jest cytatem, a ile interpretacją. Dobrym znakiem jest to, że Copilot potrafi uczciwie przyznać granicę - jak w przykładzie, w którym potwierdził liczbę rekordów, ale interpretację jako liczby unikalnych transakcji oznaczył jako niepotwierdzoną. Dla wartości ze źródła zweryfikuj wskazany plik i kolumnę, klikając w odnośnik "Źródła". Dla oszacowań sprawdź metodę i, jeśli od nich zależy decyzja, przelicz je formułą w arkuszu. Jeśli Copilot nie potrafi przypisać liczby do żadnej z dwóch list ani wskazać źródła, potraktuj ją jako niepotwierdzoną.

Wroc do listy: 200 najczestszych problemow z Microsoft 365 Copilot