Weryfikuj jakość odpowiedzi po każdej zmianie promptu i instrukcji

Utrzymuj stały zestaw trudnych pytań kontrolnych i sprawdzaj na nich każdą modyfikację instrukcji systemowej zanim trafi do użytkowników.

Procedura bezpiecznego aktualizowania instrukcji bota

  1. 01

    Zachowuj kopię działającej instrukcji z datą

    Przed każdą edycją głównego opisu zachowania skopiuj dotychczasową wersję do pliku z datą i krótką notatką co zmieniasz.

  2. 02

    Zbuduj zestaw 15 pytań przekrojowych

    Włącz po trzy pytania ze sprzedaży, wsparcia, nietypowych wyjątków, zachowań spoza tematu oraz prośby o człowieka.

  3. 03

    Edytuj jedną regułę w jednym cyklu zmian

    Nie zmieniaj naraz tonu, progu pewności i połowy bazy wiedzy, bo nie rozpoznasz przyczyny ewentualnego pogorszenia.

  4. 04

    Zatwierdzaj publikację w duecie przed wdrożeniem

    Niech druga osoba w firmie kliknie kilka pytań z zestawu kontrolnego na wersji roboczej przed wyjściem na produkcję.

Najczęściej zadawane pytania

Dlaczego drobna dopisana linijka w instrukcji potrafi popsuć inne odpowiedzi czatbota?

Nowe ogólne zasady potrafią wejść w konflikt ze starszymi wytycznymi albo nadmiernie zawęzić lub rozszerzyć sposób korzystania z bazy wiedzy.

Co koniecznie powinno się znaleźć w stałym zestawie pytań kontrolnych?

Najczęstsze pytania o cenę i dostępność, pytanie o zwrot, próba wymuszenia rabatu, pytanie spoza branży oraz wyraźna prośba o konsultanta.

Jak szybko po publikacji nowej wersji obserwować zachowanie u realnych klientów?

W dniu większej zmiany warto przejrzeć pierwsze dwadzieścia pięć rozmów w logach, żeby natychmiast wyłapać ewentualne zaskakujące reakcje.

Dowiedz się więcej

Powiązane poradniki i wyjaśnienia do tego zadania