Blog JSystems - uwalniamy wiedzę!

Szukaj

Microsoft 365 CopilotMicrosoft 365 Copilot

Jak odróżnić fakty od oszacowań w odpowiedzi Copilota

W skrócie

  • W jednej odpowiedzi Copilot stawia obok siebie liczby z pliku i wartości, które sam policzył lub uporządkował, a na oko wyglądają identycznie.
  • Copilot odpowiada jednym płynnym tekstem i domyślnie nie zaznacza, gdzie kończy się cytat, a zaczyna interpretacja albo ranking dodany przez model.
  • Zadaj prompt rozdzielający na dwie listy: dane pewne ze źródła i oszacowania; przy faktach poproś o plik i kolumnę, a kluczowe liczby przelicz w Excelu.

W jednej odpowiedzi Copilota potrafią stać obok siebie dane przepisane wprost z pliku i wartości, które model policzył albo oszacował sam - a na oko wyglądają identycznie. Ten problem dotyczy każdego, kto na podstawie takiej odpowiedzi buduje raport albo decyzję i potrzebuje wiedzieć, co jest twardym faktem, a co interpretacją. Pokazujemy, jak rozdzielić te dwie warstwy jednym pytaniem.

Jak to wygląda w praktyce

Copilot podaje spójny akapit: kilka kwot, procent, ranking, wniosek. Wszystko tym samym tonem, więc zakładasz, że całość pochodzi z dokumentu. Tymczasem część "danych" bywa oszacowaniem albo porządkiem nadanym przez model. Na własnym pliku widzieliśmy to wyraźnie: Copilot przedstawił "TOP 3 najniższej marży", ale dokument wcale nie nazywał tej trójki w ten sposób - numery pozycji nadał sam po posortowaniu. Kwoty pochodziły z pliku, ranking już nie. Inny przykład: liczbę 115 potwierdził jako liczbę rekordów sprzedażowych, ale jej interpretację jako liczby unikalnych transakcji oznaczył jako niepotwierdzoną, bo arkusz nie ma identyfikatora transakcji. Dopóki nie zapytasz, obie warstwy wyglądają jak jeden fakt.

Dlaczego Copilot tak robi

Copilot odpowiada jednym płynnym tekstem, w którym naturalnie łączy odczyt z pliku z własnym liczeniem i porządkowaniem. Nie oznacza domyślnie, gdzie kończy się cytat, a zaczyna interpretacja - to Ty musisz o ten podział poprosić. Warto znać kontekst: na ośmiu pytaniach o nasze pliki, przy włączonym Work IQ, wartości liczone na pliku wskazanym ukośnikiem zgadzały się z arkuszem co do grosza. Problem nie polega więc na tym, że liczby są błędne, tylko na tym, że fakt i oszacowanie występują razem. Co ważne, po dopytaniu Copilot sam potrafi je rozdzielić i uczciwie oznaczyć, czego nie da się potwierdzić danymi - jak przy interpretacji liczby 115. Trzeba go tylko o to poprosić.

Jak to rozwiązać krok po kroku

  1. Zadaj prompt rozdzielający: "Które liczby w tej odpowiedzi pochodzą wprost z dokumentu, a które oszacowałeś albo wyliczyłeś samodzielnie? Rozpisz to w dwóch osobnych listach: dane pewne ze źródła oraz Twoje oszacowania."
  2. Dla wartości z listy "ze źródła" poproś o źródło: "Przy każdej napisz, z którego pliku, arkusza i kolumny pochodzi."
  3. Dla wartości z listy "oszacowania" poproś o metodę: "Opisz, jak policzyłeś każdą z tych wartości i na jakich danych."
  4. Przy twierdzeniach jakościowych i rankingach każ pokazać oryginał: "Zacytuj dokładny fragment dokumentu, na którym opierasz to twierdzenie" - to demaskuje etykiety typu "TOP" czy "najważniejsze" dodane przez model.
  5. Kluczowe wartości z listy oszacowań przelicz sam w tabeli Excela, gdzie Copilot generuje formułę liczącą naprawdę.
  6. Do dokumentu, na którym ktoś się oprze, przenoś świadomie: fakty ze źródła jako dane, oszacowania wyraźnie oznaczone jako oszacowania.

Jak sprawdzić, że zadziałało

Po prompcie rozdzielającym dostajesz dwie osobne listy zamiast jednej: dane przepisane ze skoroszytu oraz wartości, które Copilot obliczył albo uporządkował sam. To najprostszy sposób sprawdzenia, ile z odpowiedzi jest cytatem, a ile interpretacją. Dobrym znakiem jest to, że Copilot potrafi uczciwie przyznać granicę - jak w przykładzie, w którym potwierdził liczbę rekordów, ale interpretację jako liczby unikalnych transakcji oznaczył jako niepotwierdzoną. Dla wartości ze źródła zweryfikuj wskazany plik i kolumnę, klikając w odnośnik "Źródła". Dla oszacowań sprawdź metodę i, jeśli od nich zależy decyzja, przelicz je formułą w arkuszu. Jeśli Copilot nie potrafi przypisać liczby do żadnej z dwóch list ani wskazać źródła, potraktuj ją jako niepotwierdzoną.

Wróć do listy: 213 najczęstszych pytań i problemów związanych z Microsoft 365 Copilot

Szkolenie Copilot w Microsoft 365 to dwa dni praktycznych warsztatów z trenerem praktykiem. Uczysz się Microsoft 365 Copilota w każdej aplikacji, w Word, Excel, Outlook, Teams, PowerPoint i OneNote, na realnych przykładach z codziennej pracy: maile, dokumenty, arkusze, prezentacje i spotkania. Wychodzisz z gotową biblioteką promptów dla swojego zespołu. Szkolenie ma terminy gwarantowane, więc odbędzie się niezależnie od liczby zapisanych.

Najczęściej zadawane pytania

Dlaczego w odpowiedzi Copilota nie widać, które liczby pochodzą z pliku, a które model policzył sam?
Copilot odpowiada jednym płynnym tekstem, w którym łączy odczyt z pliku z własnym liczeniem i porządkowaniem, i nie oznacza domyślnie, gdzie kończy się cytat, a zaczyna interpretacja. Dane przepisane wprost i wartości oszacowane wyglądają wtedy jak jeden fakt.
Czy to, że Copilot dodaje własne rankingi i etykiety typu TOP, oznacza, że liczby są błędne?
Problem nie polega na tym, że liczby są błędne, tylko na tym, że fakt i oszacowanie występują razem bez rozróżnienia. Copilot naturalnie nadaje własny porządek, na przykład numeruje pozycje po posortowaniu, choć dokument wcale tak ich nie nazywał, więc ranking bywa jego dodatkiem.
Jak jednym pytaniem kazać Copilotowi oddzielić fakty ze źródła od własnych oszacowań?
Zadaj prompt rozdzielający: poproś o dwie osobne listy, dane pewne ze źródła oraz oszacowania, a przy tych pierwszych o plik, arkusz i kolumnę, przy drugich o metodę obliczenia. Przy rankingach każ zacytować dokładny fragment dokumentu, na którym Copilot opiera twierdzenie.
Jak zweryfikować, która część odpowiedzi Copilota jest cytatem, a która interpretacją?
Po prompcie rozdzielającym dostajesz dwie listy zamiast jednej, co pokazuje, ile odpowiedzi jest cytatem, a ile interpretacją. Dla wartości ze źródła sprawdź plik i kolumnę przez odnośnik Źródła, a dla oszacowań, od których zależy decyzja, przelicz je formułą w arkuszu.

Komentarze (0)

Musisz być zalogowany by móc dodać komentarz. Zaloguj się przez Google

Brak komentarzy...