Rozumowanie i weryfikacja

Widoczny plan pomaga w realizacji zadania, ale nie stanowi pełnego dowodu wewnętrznego procesu modelu.

Czego się dowiesz

  • Wyjaśnij: model proponuje, narzędzie wykonuje
  • Zastosuj pomysł na przykładzie: Rozumowanie i weryfikacja
  • Rozpoznaj ograniczenia i zweryfikuj rezultaty ćwiczeń

Widoczny plan pomaga w realizacji zadania, ale nie stanowi pełnego dowodu wewnętrznego procesu modelu. Zweryfikuj ważne wyniki, korzystając z dowodów lub obliczeń.

Możesz kontynuować ten kurs bez konta i programowania. W przykładach wykorzystano dane syntetyczne, a wyniki sztucznej inteligencji wymagają sprawdzenia.

Jak to działa, krok po kroku

Model proponuje, narzędzie wykonuje

Wywołanie narzędzia generuje żądanie wywołania z nazwą i argumentami. Aplikacja przed wykonaniem sprawdza schemat, uprawnienia i limity. Wynik powraca do kontekstu dla następnego kroku. Na przykład get_product_stock pobiera SKU i zwraca ilość; w jego opisie powinno być wyjaśnione, że nie rezerwuje produktów. Rozróżnij puste wyniki, błędy walidacji, brak dostępu i przekroczenia limitu czasu. Prawidłowy kod JSON nie dowodzi, że argumenty są poprawne lub że akcja jest autoryzowana. W przypadku efektów zewnętrznych należy również rozważyć wykonanie podwójne.

Płynność i prawdziwość sprawdzane są oddzielnie

Halucynacja to nieuzasadniona lub nieprawidłowa treść prezentowana jako odpowiedź. Może wynikać z brakujących informacji, niejednoznaczności lub nieprawidłowo połączonych wzorców. Poproś o dowód i sprawdź oryginalny dokument, datę, jednostki i warunki. Prawdziwy cytat może nadal nie potwierdzać tej tezy. Korzystaj z bieżących źródeł w celu uzyskania aktualnych faktów, kalkulatora do obliczeń arytmetycznych i „nie potrafię określić”, gdy brakuje dowodów. Nie traktuj pewności wyrażonej w prozie jako skalibrowanego prawdopodobieństwa.

Wybierz według zadania i możliwości

Sprawdź język, kontekst, wywoływanie narzędzi, uporządkowane dane wyjściowe i obsługiwane sposoby wprowadzania danych. Porównuj modele w przypadku identycznych żądań, korzystając z tej samej kategorii i realistycznego budżetu. Temperatura zmienia próbkowanie, a nie prawdę. Rozumowanie przydziela wysiłek zgodnym modelom, co może wydłużyć czas i zwiększyć koszty; akceptowane wartości są różne. Modele lokalne oferują kontrolę nad infrastrukturą, ale wymagają zasobów i konserwacji. Ciężary otwarte nie gwarantują nieograniczonej licencji ani pełnego kodu treningowego. Katalogi i ceny ulegają zmianie; przeczytaj aktualną kartę modelu.

Schemat objaśniający

Rozumowanie i weryfikacja Postępuj zgodnie ze strzałkami wskazującymi główny przepływ. Przerywane niebieskie strzałki przedstawiają dane lub kontekst; przerywane różowe strzałki pokazują opinie lub zwracane wyniki. Kolory i kształty wyróżniają modele, sklepy, decyzje i wyniki. Znajomości: Żądanie użytkownika → Agent / LLM; Agent / LLM → Twierdzenia w odpowiedzi; Twierdzenia w odpowiedzi → Weryfikacja przez człowieka; Weryfikacja przez człowieka → Wynik do sprawdzenia; Instrukcje i kontekst → Agent / LLM; Źródła oryginalne → Weryfikacja przez człowieka; Kalkulator lub kontrola pliku wykonywalnego → Weryfikacja przez człowieka; Weryfikacja przez człowieka → Agent / LLM. P06 · Mapa relacji Rozumowanie i weryfikacja Wejście Żądanie użytkownika Dane Instrukcje i kontekst Sklep / indeks Źródła oryginalne Model/agent AI Agent / LLM Dane Twierdzenia w odpowiedzi Narzędzie / usługa Kalkulator lub kontrola pliku wykonywalnego Decyzja / kontrola Weryfikacja przez człowieka Wyjście Wynik do sprawdzenia Główny przepływ Dane i kontekst Informacje zwrotne i zwrot

Postępuj zgodnie ze strzałkami wskazującymi główny przepływ. Przerywane niebieskie strzałki przedstawiają dane lub kontekst; przerywane różowe strzałki pokazują opinie lub zwracane wyniki. Kolory i kształty wyróżniają modele, sklepy, decyzje i wyniki. Na małym ekranie przewijaj w poziomie, aby zobaczyć cały schemat.

Kompletny przykład

Dwa produkty po 120 lei każdy z 15% rabatem, łącznie 204 lei przed wysyłką. Zewnętrzna arytmetyka sprawdza liczbę; Polityka sprawdza kwalifikowalność rabatu.

Spróbuj sam

  1. Oddziel obliczenia numeryczne od sprawdzania warunków handlowych.
  2. Przed rozpoczęciem eksperymentu zapisz dane wejściowe, źródło i oczekiwany wynik. W przykładzie użyj wyłącznie fikcyjnych danych.
  3. Postępuj zgodnie z etapami diagramu. Na każdym etapie zapisuj, jakie informacje zostały otrzymane i wyprodukowane; nie myl produktu pośredniego z efektem końcowym.
  4. Powtórz po usunięciu niezbędnych informacji lub wprowadzeniu niejednoznaczności. Sprawdź, czy system wyjaśnia, zatrzymuje lub wymyśla odpowiedź.
  5. Porównaj z objaśnionym rozwiązaniem. Zachowaj konfigurację, datę, wynik i wyjaśnienie różnic. Zmień jedną rzecz i przetestuj ponownie.

Wyjaśnione rozwiązanie

Wynik wynosi 204 lei tylko wtedy, gdy rabat się kwalifikuje; wysyłka pozostaje odrębna. Pomyślne ćwiczenie pozwala pokazać związek między danymi wejściowymi, etapami i wynikiem. Gdy brakuje informacji, bardziej użyteczna jest ostrożna odpowiedź niż wymyślane szczegóły. Porównaj więcej niż styl: sprawdź także warunki, źródła i operacje.

Kiedy to podejście pomaga i jakie ma ograniczenia

Eleganckie rozumowanie oparte na błędnych przesłankach pozostaje błędne. Wybierz to podejście, jeśli poprawia ono zmierzoną potrzebę. Zachowaj prostą linię bazową i porównaj wyniki, korzystając z identycznych danych wejściowych. Jeden udany przykład nie gwarantuje niezawodności w każdej sytuacji.

Sprawdź swoją wiedzę

Kto realizuje połączenie zaproponowane przez modelkę?

Aplikacja lub usługa hosta po sprawdzeniu poprawności. Model nie uzyskuje automatycznie nieograniczonego dostępu.

Czy link w odpowiedzi wystarczy?

NIE; musi uzasadniać konkretne roszczenie oraz pasować do czasu i okoliczności.

Jaki wynik powinno dać to ćwiczenie?

Wynik wynosi 204 lei tylko wtedy, gdy rabat się kwalifikuje; wysyłka pozostaje odrębna.

Pojęcia do zapamiętania

  • Wywołanie narzędzia: Ustrukturyzowane żądanie użycia możliwości zewnętrznej.
  • Grunt: Oparcie odpowiedzi na weryfikowalnych dowodach.
  • Rozumny wysiłek: Ustawienie zależne od modelu kontrolujące wysiłek rozumowania.

Źródła i następny krok

Aby przygotować: P05 — Wyjście strukturalne i wywoływanie narzędzi