Przejdź do treści

AI i OCR

Navigator rozpoznaje tekst z załączników (OCR), uzupełnia z nich pola dokumentu, podpowiada wartości pól i sam tworzy dokumenty ze skanów. Korzysta przy tym z serwera usług AI, który działa w infrastrukturze firmy. Z tego artykułu dowiesz się, jak to włączyć i jak działa rozpoznawanie dokumentów.

Zanim zaczniesz

  • Adres i dane logowania serwera AI wpisz w ustawieniach systemu, w sekcji AI (patrz Ustawienia systemu). Login i hasło ustala się przy wdrożeniu. Ich zmiana odetnie Navigator od usług AI.
  • Bez serwera AI działa tylko podstawowy OCR i rekomendacje z danych historycznych.

Usługi serwera AI

Usługa Do czego
OCR Zamienia skan albo zdjęcie (JPG, PNG, TIF, PDF) w przeszukiwalny PDF/A. Zdjęcia ze smartfona poprawia filtrami, np. kontrastu i usuwania cieni.
Data capture Odczytuje dane z dokumentu, np. z faktury: numer, NIP-y, daty, rachunek, stawki i kwoty VAT oraz pozycje. Model ogólny działa od razu, a model szczegółowy uczy się dokumentów konkretnego kontrahenta.
Text classification Rozpoznaje klasę dokumentu na podstawie jego tekstu, np. typ, kategorię, firmę albo właściciela. Na tym działają rekomendacje pól.
File splitter Rozdziela plik z wieloma zeskanowanymi dokumentami na osobne pliki.

Navigator wywołuje te usługi sam. API serwera AI przydaje się tylko przy zadaniach wdrożeniowych, np. usuwaniu modeli.

Silnik OCR typu dokumentu

Silnik ustawisz w typie dokumentu, na zakładce Ustawienia, w sekcji OCR (patrz Ustawienia typu dokumentu):

Silnik Co robi
BN Pełny proces z usługami serwera AI: OCR, data capture, klasyfikacja, kontrahent z GUS, model szczegółowy i dokument wzorcowy.
Google Rozpoznawanie tekstu bez serwera AI. Pola uzupełnia z rozpoznanego tekstu i z podobnych dokumentów.

Uruchom automatycznie po wgraniu załącznika uruchamia OCR od razu po dodaniu załącznika. Typ uwzględniany w procesie uczenia modelu AI decyduje, czy dokumenty tego typu uczą modele rekomendacji.

Rekomendacje na polach

Rekomendacje podpowiadają wartość pola na podstawie treści załącznika. Ustawisz je w ustawieniach pola na formularzu, w sekcji Ustawienia rekomendacji:

Ustawienia rekomendacji pola Kontrahent

Ustawienia rekomendacji pola Kontrahent
Ustawienie Opis
Pokaż rekomendacje Włącza rekomendacje pola.
Typ Model AI: klasyfikacja tekstu na serwerze AI. Dane historyczne: podpowiedzi z wcześniejszych dokumentów. Dla pól Kontrahent, Firma, Kategoria i Typ jest zawsze Model AI.
Liczba rekomendacji Ile pozycji podpowiadać.
Pokazuj prawdopodobieństwo każdej pozycji Procent prawdopodobieństwa przy podpowiedzi.
Wstawiaj pozycję najbardziej prawdopodobną Najlepsza podpowiedź wpisuje się do pola.
Próg pozycji najbardziej prawdopodobnej Najmniejsze prawdopodobieństwo (%), przy którym pozycja się wpisuje.
Sprawdź model Pokazuje, czy model jest wyuczony, a jeśli nie, to dlaczego, np. za mało przykładów. Model potrzebuje co najmniej 2 różnych wartości i po 2 dokumenty na każdą.
Resetuj model Usuwa model i uczy go od nowa.

Rekomendacje są dostępne dla pól Kontrahent, Kontrahent (edycja), Właściciel, Firma, Kategoria, Typ, atrybutów z autouzupełnianiem i słowników w dekretacji.

Po zapisie pola model uczy się w tle, zwykle przez kilkadziesiąt sekund, przy dużym zbiorze dłużej. Model AI uczy się na dokumentach, których załączniki przeszły OCR:

  • z ostatnich dni ustawionych w Długości okresu nauki w dniach (domyślnie 180),
  • najwyżej tylu dokumentów każdej klasy, ile ustawia Maksymalna liczba załączników dla jednego typu podczas uczenia modelu AI (domyślnie 50).

Dobre wyniki daje co najmniej 20 poprawnie wprowadzonych dokumentów na każdą wartość, np. 20 faktur każdego właściciela, i podobna liczba dokumentów dla każdej wartości. Gdy w ustawieniach systemu jest włączone Automatyczne odświeżanie modeli, modele uczą się na nowo codziennie.

Wyłączenie Pokaż rekomendacje przestaje korzystać z modelu, ale nie usuwa go z serwera AI. Modele mają na serwerze nazwy <Kod firmy>_<FlSy, Fl albo Di>_<ID pola>, np. FIRMA_FlSy_5. Usuwa się je przez API serwera AI.

Jak silnik BN rozpoznaje dokument

  1. OCR: załącznik bez warstwy tekstowej trafia do usługi OCR. Navigator zapisuje przeszukiwalny PDF.
  2. Data capture: model ogólny odczytuje dane i tekst dokumentu.
  3. Klasyfikacja: tekst trafia do wszystkich modeli rekomendacji z formularzy dokumentów.
  4. Firma, typ i kategoria: gdy są znane, np. z kategorii wybranej przy dodawaniu dokumentu, Navigator ich nie zmienia. W przeciwnym razie bierze najlepszą rekomendację.
  5. Kontrahent: z dwóch odczytanych NIP-ów wybiera ten, który nie należy do firmy z kartoteki Firmy. Kontrahenta szuka w kartotece, a gdy go nie ma, pobiera dane z GUS.
  6. Pola wyboru: puste pola uzupełnia rekomendacjami.
  7. Pozostałe pola: puste pola uzupełnia danymi z data capture.
  8. Model szczegółowy: gdy istnieje dla kontrahenta i typu, uzupełnia nim pola, które są nadal puste.
  9. Dokument wzorcowy: resztę pól uzupełnia z dokumentu wzorcowego kontrahenta dla typu, gdy taki jest.

Firma, typ i kategoria z rekomendacji

Navigator wpisze firmę, typ albo kategorię z rekomendacji tylko wtedy, gdy to pole ma włączone Pokaż rekomendacje i Wstawiaj pozycję najbardziej prawdopodobną na co najmniej jednym formularzu. Po rozpoznaniu typu pozostałe pola wypełnia według formularza tego typu. Dokument bez typu albo kategorii nie powstanie: Navigator pokaże „Nieznany typ dokumentu.” albo „Nieznana kategoria dokumentu.”.

OCR na formularzu nowego dokumentu tylko uzupełnia pola. Nic nie zapisuje.

Dodawanie dokumentów ze skanów

Dodaj wiele z OCR w menu listy dokumentów otwiera okno AI Hot Folder. Użytkownik wrzuca do niego skany, a Navigator dla każdego pliku:

  1. rozpoznaje tekst,
  2. ustala firmę, typ i kategorię: z kategorii zaznaczonej na liście dokumentów, a gdy żadna nie jest zaznaczona, z rekomendacji AI,
  3. tworzy i zapisuje dokument z załącznikiem.

Kilka dokumentów zeskanowanych do jednego PDF-a Navigator rozdzieli po stronach z kodem QR (patrz Rozdzielanie pliku PDF).

Model szczegółowy

Model szczegółowy uczy się, skąd na dokumentach konkretnego kontrahenta brać dane, których nie odczyta model ogólny, np. numer zamówienia z faktury.

  1. Dodaj do menu dokumentu przycisk Aktualizuj model szczegółowy (patrz Menu formularza i listy). Przycisk jest też dostępny dla kontrahentów.
  2. Wprowadź poprawnie co najmniej 3 dokumenty kontrahenta z załącznikami po OCR.
  3. Na każdym z nich kliknij Aktualizuj model szczegółowy. Uczenie może trwać kilka minut.
  4. Sprawdź model, uruchamiając OCR na kolejnym dokumencie tego kontrahenta.

Model uczy się na polach dokumentu: numer obcy, data dokumentu i płatności, rachunek i NIP kontrahenta, waluta, opis, kwoty netto, VAT i brutto oraz atrybuty tekstowe, liczbowe i daty.

Przechwytywanie danych z załącznika

Pole, którego model nie zna, możesz wskazać na załączniku. Na podglądzie załącznika z warstwą tekstową wybierz pole formularza, zaznacz obszar z wartością i kliknij Przechwyć. Navigator zapamięta, z którego miejsca dokumentów tego kontrahenta brać to pole. Potem kliknij Aktualizuj model szczegółowy.

Co dalej