Trwa faza przed otwarciem. Zostało 49 z 50 miejsc dla Partnerów-założycieli. Zajmij miejsce
Używamy plików cookie, aby zapewnić działanie platformy oraz (opcjonalnie) analizować ruch. Wybierz swoje preferencje:
Agent AI pisze do Twojej firmy jak klient (formularz, mail, czat) i mierzy czas oraz jakość odpowiedzi. Scenariusze, miary i granice takiego testu.
Agent AI może co tydzień wysłać do Twojej firmy kilka zapytań jak prawdziwy klient, przez formularz, mail i czat, a potem zmierzyć, czy ktoś odpowiedział, po jakim czasie i czy odpowiedź albo oferta faktycznie odpowiada na pytanie. Test dotyczy wyłącznie własnej firmy. Wynikiem jest lista poprawek, zanim zauważy je klient.
Tajemniczy klient to stara metoda handlu: osoba udaje kupującego, odwiedza sklep i ocenia obsługę według listy pytań. Wersja z agentem AI robi to samo w kanałach pisanych i robi to regularnie, bez zamawiania badania raz na kwartał.
Taki tester składa się z czterech części:
Technicznie to przepływ w n8n albo Make uruchamiany według harmonogramu. Model językowy pisze treść zapytania na podstawie scenariusza, za każdym razem innymi słowami, żeby zespół nie rozpoznawał szablonu. Wysyłka maila to zwykły moduł poczty. Formularz da się wysłać tak samo jak przeglądarka albo przez narzędzie do automatyzacji przeglądarki, które przy okazji sprawdza, czy strona z formularzem w ogóle działa. Drugi przepływ pilnuje skrzynki testowej, łączy odpowiedź z wysłanym zapytaniem i zapisuje znaczniki czasu. Ocenę treści odpowiedzi robi ten sam model językowy, porównując ją z listą ze scenariusza.
Najprostsze miary są najbardziej wiarygodne. Czas i sam fakt odpowiedzi agent mierzy bezbłędnie, bo to różnica dwóch znaczników czasu. Ocena tonu jest najmniej pewna i warto ją traktować jako sygnał do przeczytania wiadomości przez człowieka, nie jako wynik.
| Miara | Jak ją liczy agent | Co pokazuje |
|---|---|---|
| Odpowiedź w ogóle | Czy w ciągu ustalonego progu, na przykład 2 dni roboczych, przyszła jakakolwiek wiadomość | Zapytania, które giną: zły adres, filtr antyspamowy, formularz bez powiadomienia |
| Czas pierwszej odpowiedzi | Różnica między wysyłką a odpowiedzią, osobno w godzinach pracy i poza nimi | Czy klient z piątku po południu czeka do wtorku |
| Kompletność | Ile elementów z listy scenariusza zawiera odpowiedź, na przykład 3 z 4 | Czego zespół regularnie zapomina: terminu, ceny dostawy, kolejnego kroku |
| Trafność oferty | Czy oferta dotyczy tego, o co pytano, czy jest ogólnym cennikiem | Odpowiedzi „z szablonu” na pytania nietypowe |
| Ścieżka na stronie | Liczba kroków do formularza, czy formularz się wysłał, czy przyszło potwierdzenie | Zepsute formularze i strony, które nie prowadzą do kontaktu |
| Ton | Ocena modelu według Twoich wytycznych komunikacji | Wiadomości do przeczytania przez kierownika |
Próg „brak odpowiedzi” ustal sam, zanim zobaczysz pierwsze wyniki. Inaczej łatwo dopasować go tak, żeby raport wyglądał dobrze.
Weź dziesięć ostatnich prawdziwych zapytań od klientów i zrób z nich wzorce, zamiast wymyślać pytania od zera. Przykład dla sklepu internetowego z meblami biurowymi, który sprzedaje i klientom indywidualnym, i firmom:
Do każdego scenariusza dopisz listę elementów, które odpowiedź musi zawierać. Bez tej listy model ocenia odpowiedź według własnego uznania, a wyniki z kolejnych tygodni przestają być porównywalne.
Dwie zasady oszczędzą czas zespołu. Pierwsza: agent nie prowadzi długiej negocjacji. Po pierwszej odpowiedzi dziękuje i kończy, chyba że scenariusz sprawdza właśnie reakcję na pytanie dodatkowe. Druga: żadnych fikcyjnych reklamacji z numerami prawdziwych zamówień i żadnych dużych zapytań ofertowych, nad którymi handlowiec spędzi pół dnia. Test ma mierzyć obsługę, a nie zabierać jej czas.
Oznacz też zapytania testowe tak, żeby dało się je odfiltrować. Wystarczy osobna domena albo stały wzorzec adresu nadawcy, który wyłączysz z raportów sprzedaży i z CRM. Inaczej testowe „leady” zawyżą liczbę zapytań w statystykach.
Test dotyczy własnej firmy albo firmy, która wyraźnie go zamówiła, na przykład sieci franczyzowej sprawdzającej swoje punkty. Nie testuj w ten sposób konkurencji. Zaśmiecasz cudze skrzynki, zabierasz czas cudzym pracownikom i możesz łamać regulaminy formularzy, które są przeznaczone dla klientów. Jeśli chcesz wiedzieć, jak konkurencja odpowiada na zapytania, zostaje Ci jedno zapytanie wysłane jako Ty, kiedy faktycznie czegoś potrzebujesz.
Druga granica dotyczy własnego zespołu. Agent, który pisze do ludzi, wchodzi w zakres art. 50 AI Act: od 2 sierpnia 2026 osoba rozmawiająca z systemem AI powinna o tym wiedzieć, chyba że wynika to jasno z kontekstu. To informacja, a nie porada prawna, ale wniosek praktyczny jest prosty. Powiedz zespołowi, że w danym kwartale działa tester AI i że część zapytań może pochodzić od niego, bez podawania dni i godzin. Wariant bez żadnej informacji dla zespołu omów najpierw z zarządem i prawnikiem. Szczegóły obowiązków opisuje wpis o chatbotach i AI Act.
Trzecia granica to sposób użycia wyników. Raport pokazuje proces, a nie winnego. Jeśli odpowiedź z piątku przyszła we wtorek, pytanie brzmi, kto ma dyżur na skrzynce w piątek po południu, a nie kto zawalił. Zespół, który wie, że test służy do łapania osób, nauczy się rozpoznawać testowe zapytania i wynik przestanie cokolwiek mówić. Z tego samego powodu w raporcie nie zapisuj imion pracowników, wystarczy kanał i scenariusz.
Po czterech do sześciu tygodniach zobaczysz powtarzające się wzorce. Najczęściej są trzy rodzaje poprawek, w tej kolejności kosztu:
Tester zostaje potrzebny także po wdrożeniu automatycznych odpowiedzi. Sprawdza wtedy, czy szkice AI nie zaczęły odpowiadać ogólnikami i czy pytania nietypowe nadal trafiają do człowieka. Ten sam schemat cotygodniowego agenta z raportem w poniedziałek działa przy obserwacji rynku, co opisuje wpis o agencie, który sprawdza ceny konkurencji na podstawie publicznych cenników.
Sam tester jest mniejszym projektem niż automatyzacja odpowiedzi: kilka scenariuszy, dwa przepływy i arkusz. Zakres ustalisz z wykonawcą w zależności od liczby kanałów i tego, czy formularz na stronie wymaga automatyzacji przeglądarki. Wykonawców znających n8n znajdziesz w katalogu ekspertów n8n.
Chcesz takiego testera albo od razu automatycznych odpowiedzi na zapytania? Opisz to Concierge'owi: napisz, którymi kanałami przychodzą zapytania i ile ich jest w tygodniu.