Asystent firmowych dokumentów: przygotowanie i kontrola odpowiedzi

Asystent, który odpowiada na pytania na podstawie firmowych dokumentów, może ułatwić odnajdywanie informacji. Nie naprawi jednak sam rozproszonych, sprzecznych ani nieaktualnych materiałów. Zanim zespół zacznie z niego korzystać, trzeba zdecydować, które źródła są wiarygodne, kto może je zobaczyć i jak sprawdzić odpowiedź.

Warto myśleć o takim rozwiązaniu jak o nowym sposobie korzystania z dokumentacji, a nie o nieomylnym pracowniku. Odpowiedź może być niepełna, źle powiązana z pytaniem lub oparta na materiale, którego firma nie chce już używać. Przygotowanie ogranicza te ryzyka i pozwala ocenić, czy narzędzie pomaga.

Wybierz jedno zadanie i jedną grupę użytkowników

Zacznij od pytań, które zespół rzeczywiście zadaje: gdzie jest aktualny formularz, jak przygotować ofertę, jakie są zasady przekazania sprawy albo gdzie znaleźć właściwą instrukcję. Wybierz grupę użytkowników i temat, zamiast od razu udostępniać wszystkie dokumenty całej organizacji.

Zapisz, czego asystent ma pomóc szukać, a czego ma nie robić. Może wskazywać dokument i fragment dotyczący pytania, ale nie zatwierdzać umowy ani podejmować decyzji kadrowej. Ta granica pomaga zaplanować uprawnienia i testy.

Przygotuj wiarygodne źródła

Zrób spis dokumentów kandydujących do bazy. Dla każdego zapisz właściciela, datę ostatniej kontroli, grupę odbiorców, status oraz miejsce przechowywania wersji obowiązującej. Usuń kopie robocze, archiwalne i materiały, których firma nie chce już używać. Jeśli dwa dokumenty mówią różne rzeczy, wyjaśnij, który jest nadrzędny i kto może rozstrzygnąć spór.

Nie musisz dodawać wszystkiego. Najpierw włącz mały, reprezentatywny zbiór. Wyłącz z bazy asystenta kopie robocze, archiwalne i materiały, których firma nie chce już używać; nie oznacza to usuwania firmowego archiwum. Ustal, jak będą oznaczane nowe wersje, kto aktualizuje materiały i jak zmiana dotrze do źródła wykorzystywanego przez asystenta. Jeśli dokument nie ma właściciela, warto rozwiązać ten problem przed udostępnieniem go jako podstawy odpowiedzi.

Zadbaj o czytelne nagłówki, jednoznaczne nazwy i rozdzielenie tematów. Jeżeli instrukcja ma wyjątki, umieść je blisko reguły. Taki porządek pomaga człowiekowi znaleźć informację i ułatwia sprawdzenie odpowiedzi. Nie oznacza jednak, że samo sformatowanie plików zapewni poprawne działanie.

Ustal, kto ma dostęp do jakiej wiedzy

Dokumenty firmowe często zawierają informacje dla różnych osób. Przed próbą określ, które grupy mogą korzystać z poszczególnych materiałów i czy asystent respektuje istniejące uprawnienia, czy ma własny mechanizm dostępu. Sprawdź nie tylko ekran odpowiedzi, ale też podłączone źródła, kopie, zapisy działania systemu, eksporty, konta administracyjne i sposób usuwania danych.

Zapisz, dokąd trafiają pytania i dokumenty. Czy są przetwarzane w firmowej usłudze, przez zewnętrzne połączenie z modelem, w prywatnej chmurze czy na infrastrukturze należącej do firmy? To różne warianty. Określenie „prywatny asystent” samo nie wyjaśnia przepływu danych ani warunków dostawcy.

Przykładowo, warunki przechowywania danych w usługach OpenAI API zależą od używanych funkcji i ustawień organizacji. Dlatego przed wdrożeniem sprawdź warunki konkretnego rozwiązania i miejsca, w których będą przetwarzane dane. OpenAI API: kontrole danych. Dokumentacja ChatGPT Company Knowledge opisuje respektowanie uprawnień w połączonych aplikacjach oraz możliwość sprawdzania linków źródłowych w odpowiedzi, gdy są dostępne. To opis tego produktu i obsługiwanej konfiguracji, nie gwarancja dla każdego asystenta. OpenAI Help: wiedza firmowa w ChatGPT.

Przygotuj pytania kontrolne

Zanim zaprosisz zespół, przygotuj przykładowe pytania z rzeczywistych sytuacji, ale usuń dane osobowe i poufne, jeśli nie są potrzebne. Dla każdego pytania zapisz, jaka odpowiedź byłaby użyteczna i z którego dokumentu powinna wynikać.

Uwzględnij kilka rodzajów prób:

odpowiedź znajduje się jasno w jednym aktualnym dokumencie;
informacja jest rozproszona w kilku materiałach;
źródła są niezgodne albo jedno jest przestarzałe;
pytanie nie ma odpowiedzi w udostępnionych dokumentach;
użytkownik pyta o materiał, do którego nie powinien mieć dostępu;
pytanie jest niejasne i wymaga doprecyzowania.

Sprawdź, czy odpowiedź wskazuje źródło, z którego można zweryfikować treść. Nie oceniaj tylko płynności wypowiedzi. Czytelna, pewna odpowiedź może nadal być niepoprawna. Zapisuj błędy razem z pytaniem, odpowiedzią, oczekiwanym wynikiem, wykorzystanym dokumentem i decyzją osoby sprawdzającej.

Ustal, co robić przy braku pewności

Asystent powinien mieć bezpieczną drogę, gdy nie znajduje odpowiedzi: powiedzieć, że źródła nie wystarczają, poprosić o doprecyzowanie albo wskazać osobę lub miejsce, gdzie zespół może sprawdzić informację. Ustal, które odpowiedzi wymagają zatwierdzenia przed użyciem, zwłaszcza gdy dotyczą klientów, zobowiązań, finansów, bezpieczeństwa lub procedur mających konsekwencje dla pracowników.

NIST wskazuje, że użycie generatywnej sztucznej inteligencji może wymagać dodatkowego przeglądu przez ludzi, śledzenia i nadzoru zarządczego. To dobrowolna rama zarządzania ryzykiem, a nie certyfikat ani gwarancja działania. NIST AI 600-1.

Lista gotowości przed próbą

Jest jeden opisany cel i grupa użytkowników.
Każdy dokument ma właściciela i wiadomo, czy jest aktualny.
Sprzeczne i archiwalne materiały są usunięte albo wyraźnie oznaczone.
Uprawnienia do źródeł sprawdzono na różnych rolach.
Wiadomo, gdzie przetwarzane są dane, co jest przechowywane i kto może to sprawdzić.
Zespół ma pytania kontrolne, w tym takie bez odpowiedzi w dokumentach.
Ustalono, kiedy człowiek weryfikuje odpowiedź i jak zgłasza błąd.

Jeśli asystent pomija źródła, odpowiada poza zakresem lub ujawnia materiał niewłaściwej osobie, nie rozszerzaj dostępu. Ogranicz zestaw dokumentów albo popraw konfigurację i powtórz próbę. Udostępnienie szerszej grupie powinno wynikać z zapisanych testów, zasad dostępu i ustalonej opieki nad dokumentami.

Przygotowanie dokumentów i próby odpowiedzi to część większego wdrożenia. Zobacz, jak pracujemy nad asystentami wiedzy dla firm, a jeśli rozważasz szersze szkolenie zespołu, przeczytaj, czego powinno uczyć.