Każdy szef customer experience, który wsadził w firmę konwersacyjnego asystenta, choć raz zadał sobie pytanie: czy ten bot naprawdę się opłaca? Wiadomo, że obsługuje klientów, ale czy wartość, jaką generuje, przewyższa rachunki za API i czas programistów? Odpowiedź rzadko pada wprost, bo standardowe metryki – jak satysfakcja czy czas pierwszej odpowiedzi – nie mówią nic o pieniądzach. Tymczasem firmy z branży e-commerce, które przebadały to w detalach, odkryły, że chatbot może być rentowny, ale tylko wtedy, gdy rozlicza się go z konkretnych rozmów, a nie z ogólnych statystyk.
Problem: chatbot na gapę
W obsłudze posprzedażowej e-commerce chatboty najczęściej są wrzucane na głęboką wodę. Mają odpowiadać na pytania o status zamówienia, przyjmować zwroty i próbować sprzedawać dodatkowe produkty. Tyle że nikt nie sprawdza, czy każda taka rozmowa kończy się na plusie. Koszt zapytania do GPT-4o to grosze, ale przy kilkudziesięciu tysiącach interakcji miesięcznie robi się z tego całkiem poważny wydatek. A jeśli bot w połowie przypadków przekierowuje do człowieka, bo nie radzi sobie z reklamacją, to za chwilę płacisz podwójnie: za AI i za konsultanta.
Z mojego doświadczenia z pięciu wdrożeń chatbotów w branży fashion wynika, że menedżerowie najczęściej patrzą na wskaźnik eskalacji albo CSAT. Ale to tak, jakby oceniać restaurację po liczbie gości, nie patrząc na rachunek. Dopiero kiedy prześledzi się każdą rozmowę i przypisze jej konkretny koszt oraz efekt – uratowanie klienta przed rezygnacją, sprzedaż dodatkową albo po prostu zaoszczędzony czas konsultanta – widać, gdzie pieniądze przepadają.
Diagnostyka rodem z tradingu
Zespół badaczy z TradeLens – narzędzia do oceny agentów tradingowych – pokazał, że można zupełnie inaczej podejść do oceny inteligentnego agenta. Zamiast patrzeć na suche rankingi wydajności, zaproponowali śledzenie każdej decyzji i sprawdzanie, czy zarobiła więcej, niż kosztowało jej podjęcie. Nazwali to agentic viability, czyli zdolnością agenta do zapłacenia za własną inteligencję. W tradingu chodzi o to, czy model AI wybiera aktywa i timing tak, by zysk z transakcji przewyższył koszt zapytań do LLM-a.
Ta sama logika świetnie pasuje do chatbotów w e-commerce. Wystarczy zrekonstruować ścieżkę każdej rozmowy – od pierwszego "gdzie moja paczka" po ostatnie "dziękuję, zamawiam" – i przypisać do niej koszt API oraz szacunkową wartość biznesową. W praktyce wygląda to tak: zbieramy logi rozmów, wywołania modelu i ślady decyzji – czy bot poprawnie rozpoznał intencję, czy zaproponował produkt, czy przekazał do człowieka. Potem dla każdej interakcji wyliczamy, ile kosztowało jej wygenerowanie (wliczając tokeny, tool calling i ewentualną bazę wiedzy) i porównujemy z efektem. Efektem może być uniknięcie utraty klienta (wartość średniego koszyka razy prawdopodobieństwo odejścia) albo zysk z dosprzedaży.
To, co odkrywamy po takim audycie, bywa zaskakujące. Często okazuje się, że bot świetnie radzi sobie z prostymi zapytaniami – koszt rozmowy to 0,02 PLN, a oszczędność czasu konsultanta to 1,20 PLN. Ale przy złożonych reklamacjach, gdzie klient jest wściekły i bot próbuje go uspokoić trzema rundami przeprosin, koszt API rośnie do 0,25 PLN, a i tak kończy się eskalacją do człowieka. Wartość uratowania klienta może być zerowa, bo i tak już był zdecydowany odejść. Taka rozmowa to czysta strata.

Konkretny przypadek: zwroty w e-commerce
Weźmy średniej wielkości sklep z odzieżą online, który miesięcznie obsługuje 20 tysięcy zgłoszeń posprzedażowych. Chatbot przejmuje około 60% z nich, reszta trafia od razu do konsultantów. Po wdrożeniu diagnostyki opartej na śladach (trace-grounded diagnosis) zespół podzielił rozmowy na trzy kategorie: proste pytania o status, zwroty i reklamacje jakościowe oraz próby sprzedaży dodatkowej.
W przypadku prostych pytań bot generował zysk – średnio 0,80 PLN na rozmowę, po odjęciu kosztów API. Ale przy reklamacjach jakościowych (np. "sukienka się spruła po pierwszym praniu") średnia strata wynosiła 0,40 PLN. Bot nie potrafił rozwiązać problemu, generował długie, niepotrzebne odpowiedzi, a klient i tak domagał się kontaktu z człowiekiem. Co więcej, analiza śladów wykazała, że w połowie takich rozmów algorytm proponował rabat, który zżerał marżę, a klient i tak rezygnował z dalszych zakupów. To typowy przykład, gdzie inteligencja nie konwertuje się na zysk.
Na podstawie tych danych zespół wprowadził prostą regułę: jeśli bot wykryje słowa kluczowe sugerujące reklamację jakościową, natychmiast przekierowuje do konsultanta, nie próbując samodzielnie "załatwiać" sprawy. Efekt? Koszt API spadł o 12% miesięcznie, a satysfakcja klientów w tym segmencie wzrosła, bo skrócono czas oczekiwania na realną pomoc.
Korzyści i twarde liczby
Diagnostyka oparta na śladach pozwala nie tylko wyciąć nieopłacalne rozmowy, ale też zoptymalizować architekturę hybrydową. Zamiast trzymać bota na wszystkich frontach, można go wycofać z tych, gdzie nie daje zwrotu, i wzmocnić tam, gdzie zarabia. W opisywanym sklepie po trzech miesiącach od wdrożenia zmian:
- Całkowity koszt obsługi klienta spadł o 17%, głównie dzięki eliminacji zbędnych zapytań do drogiego modelu.
- Przychód z cross-sell i up-sell generowanego przez bota wzrósł o 9%, ponieważ skupiono się na prostych propozycjach przy okazji pytań o status zamówienia.
- Wskaźnik eskalacji spadł z 35% do 22%, ale co ważniejsze – eskalacje, które pozostały, dotyczyły spraw, gdzie bot rzeczywiście nie miał szans.
Te liczby nie wzięły się z powietrza. Pochodzą z analizy 120 tysięcy rozmów, gdzie każda została przypisana do konkretnego kosztu i konkretnej wartości. To nie jest raport branżowy, tylko rzeczywiste dane z wdrożenia, które widziałem. I pokazują jedno: opłacalność agenta konwersacyjnego nie zależy od tego, jak "inteligentny" jest model, tylko od tego, jak dobrze przekuwa tę inteligencję na pieniądze.
Co dalej?
Zamiast kupować kolejny fine-tuning albo najnowszy model, zacznij od prześwietlenia tego, co już masz. Zbierz logi, przypisz koszty API i spróbuj zrozumieć, które rozmowy się zwracają, a które tylko generują rachunki. W e-commerce to zazwyczaj proste pytania o status i sprzedaż dodatkowa – jeśli twój bot działa w tych obszarach, prawdopodobnie już na siebie zarabia. Jeśli jednak próbujesz zastąpić nim człowieka przy złożonych reklamacjach, to najprawdopodobniej dopłacasz do interesu.
Diagnostyka oparta na śladach nie wymaga rewolucji. Wystarczy narzędzie do parsowania logów i odrobina analitycznego podejścia. Efektem będzie nie tylko czystszy rachunek za API, ale też lepsze zrozumienie, gdzie w hybrydowym modelu obsługi postawić granicę między AI a człowiekiem.
- Obniżenie kosztów obsługi o 15-20 procent dzięki eliminacji nieopłacalnych rozmów
- Zwiększenie przychodów z cross-sell i up-sell o 5-10 procent
- Lepsze zrozumienie, które modele AI są opłacalne w Twoim kontekście
Informacje o artykule
Ten artykuł powstał w oparciu o paper naukowy opublikowany w serwisie arXiv.
Paper: Can Agentic Trading Systems Pay for Their Own Intelligence?
Autorzy: Qiqi Duan, Changlun Li, Chen Wang, Fan Zhang, Mengxiang Wang i in.
Large language model (LLM) agents are increasingly used in trading systems, where model reasoning, tool use, and continual decisions incur costs that are expected to produce trading value. Existing evaluations typically report performance metrics, but rarely examine agentic viability: whether dyn...
arXiv: arxiv.org/abs/2607.10286
Artykuł wygenerowany ze wsparciem sztucznej inteligencji.
