Z okopów

Co to jest fantomowa metryka — i dlaczego Twoje automatyzacje pokazują więcej, niż się wydarzyło

Kiedy automat albo asystent AI melduje Ci wynik — „zrobione", „tyle pozycji w kolejce", „tyle zadań gotowych" — to jeszcze nie jest fakt. To hipoteza. Dopóki nie sprawdzisz źródła, nie wiesz, czy ta liczba jest prawdziwa, czy tylko ładnie wygląda.

Nauczyłem się tego budując własny system asystentów AI. Nie z książki, tylko z momentu, w którym uwierzyłem liczbie i zacząłem na niej pracować, zanim ją sprawdziłem.

Sedno sprawy  Liczba od automatu to obietnica, nie dowód. Zanim na niej zbudujesz decyzję, zejdź do źródła i policz sam.

Czym jest fantomowa metryka?

Fantomowa metryka to liczba lub pozycja, którą automat (skrypt, monitoring, asystent AI) raportuje jako rzeczywistą — a której w rzeczywistości nie ma albo która znaczy coś innego, niż się wydaje.

Nie chodzi o pomyłkę o jeden czy dwa. Chodzi o liczbę, która brzmi konkretnie, ma swoje miejsce w raporcie i wygląda na twardy fakt, a pod spodem nie stoi za nią nic albo stoi coś zupełnie innego.

Skąd się biorą fantomowe metryki?

Budując własny system zauważyłem, że automat skanujący i układający listę zadań potrafił tę listę zawyżać. W jednym przejściu prawie połowa pozycji okazała się fantomami — rzeczami, które na liście były, a w realnym świecie nie istniały.

Najgorsze przyszło później. Dołożyłem drugi automat, którego jedynym zadaniem było sprawdzenie pierwszego. I ten też zawyżał. Wtedy zrozumiałem, że to nie jest usterka jednego skryptu, tylko wzorzec: warstwa kontrolna potrafi mieć ten sam problem, co warstwa kontrolowana. Opisałem ten mechanizm szerzej w tekście nie pytaj AI, czy wykonało pracę — sprawdź ją samodzielnie.

Automat nie robi tego ze złej woli. On po prostu raportuje to, co wygląda na prawdę, nie to, co jest prawdą. Brzmi tak samo pewnie, kiedy ma rację, jak i kiedy się myli.

Cztery typy, które widziałem najczęściej

Z czasem fantomy zaczęły się układać w powtarzalne kategorie. To te same cztery wzorce, raz po raz.

Typ fantomu Co robi automat
Status-fantom Raportuje „gotowe do zrobienia", bo nie doczytał, że rzecz jest dopiero w fazie planu. Nie sprawdził statusu u źródła.
Projekt potraktowany jak błąd Nazywa świadomą decyzję „błędem do naprawy", bo nie rozumie intencji. Nie doczytał kontekstu ani komentarza, który wyjaśnia, dlaczego coś jest właśnie tak.
Scope-fantom Wymyśla problem, którego nie ma („to zaniża wyniki"), choć rzecz działa poprawnie na realnych danych.
Relacja-fantom Zmyśla związek między dwiema rzeczami („zrobienie A odblokuje pilną sprzedaż B") i tworzy fałszywą pilność. Najgroźniejszy z całej czwórki.

Relacja-fantom jest najgroźniejszy, bo nie zawyża liczby — fałszuje priorytety. Zaczynasz robić nie to, co trzeba, w przekonaniu, że gonisz coś pilnego.

Sprawdź się w 10 min — bez rejestracji

Self-Discovery to 25 pytań, które pokażą ile godzin tracisz na ręczną sprzedaż i jak to odwrócić. Zajmuje 10 minut.

Sprawdź się

Jak się przed tym bronić?

U mnie zasada jest twarda i nie ma od niej wyjątków: każdą liczbę, którą podaje automat albo AI, sprawdzam u źródła, zanim na niej cokolwiek zbuduję. Najpierw weryfikacja, potem działanie. Nigdy odwrotnie.

To samo dotyczy Ciebie, jeśli wdrażasz asystenta AI w firmie. Widzisz raport „obsłużyłem tyle zapytań", „zaoszczędziłem tyle godzin", „przygotowałem tyle ofert" — potraktuj to jak hipotezę i zejdź do źródła. Sprawdź, czy maile naprawdę wyszły, czy oferty naprawdę powstały, czy liczba zgadza się z tym, co widać na dysku.

Dobry system AI jest zaprojektowany tak, żeby tę liczbę dało się zweryfikować, a nie tylko w nią uwierzyć. To jest cała różnica między narzędziem, któremu możesz zaufać w firmie, a takim, które tylko ładnie raportuje.

Chcesz asystenta AI, którego liczby możesz sprawdzić?

System 10h+ to gotowy zespół AI skonfigurowany pod Twój biznes. Nie kurs. Nie chatbot. Gotowy od dnia 1.

Przeczytaj case study: wdrożenie u klienta (Stalton)