Document AI: Memerlukan Interaksi Manusia

1. Pengantar

Document AI API adalah solusi pemahaman dokumen yang mengambil data tidak terstruktur, seperti dokumen, email, dan sebagainya, lalu membuat datanya lebih mudah dipahami, dianalisis, dan digunakan.

Dengan peninjauan manual, Anda dapat mencapai akurasi pemrosesan dokumen yang lebih tinggi dengan jaminan peninjauan manual. Peninjauan manual dapat meningkatkan akurasi dan membantu bisnis mengevaluasi prediksi menggunakan alat yang dibuat khusus untuk mendukung peninjauan tersebut. Di lab ini, Anda akan mengonfigurasi dan menguji pemroses biaya menggunakan peninjauan manual untuk memvalidasi hasil dari pemroses menggunakan alat konfigurasi dan pengelolaan human-in-the-loop.

CATATAN: UI Konsol dapat berubah seiring waktu, sehingga lingkungan Anda mungkin akan terlihat sedikit berbeda. Jika Anda menemukan masalah dengan lab ini, harap laporkan.

Prasyarat

Codelab ini dibangun berdasarkan konten yang disajikan dalam Codelab Document AI lainnya.

Sebaiknya Anda menyelesaikan Codelab berikut sebelum melanjutkan.

• Pengenalan Karakter Optik (OCR) dengan Document AI (Python)
• Penguraian Formulir dengan Document AI (Python)
• Prosesor Terspesialisasi dengan Document AI (Python)

Yang akan Anda pelajari

• Mengonfigurasi peninjauan manual untuk prosesor.
• Buat kumpulan resource pengguna peninjauan oleh manusia.
• Buat tugas peninjauan manual uji coba.
• Menetapkan tugas peninjauan manual kepada pengguna.
• Menyelesaikan peninjauan manual dokumen.

Yang Anda butuhkan

• Project Google Cloud
• Browser, seperti Chrome atau Firefox
• Pengetahuan tentang Python 3

2. Mempersiapkan

Codelab ini akan menganggap Anda telah menyelesaikan langkah-langkah Penyiapan Document AI yang tercantum di Codelab Pengantar.

Harap selesaikan langkah-langkah berikut sebelum melanjutkan:

• Mulai Cloud Shell
• Mengaktifkan Document AI & Cloud Storage API
• Instal Library Klien Python

Anda juga perlu mengaktifkan Vertex AI API.

1. Dengan menggunakan Kotak Penelusuran di bagian atas konsol, cari "Vertex AI API", lalu klik Enable untuk menggunakan API di project Google Cloud Anda
2. Atau, API dapat diaktifkan menggunakan perintah gcloud berikut.

gcloud services enable aiplatform.googleapis.com

3. Membuat Prosesor

Anda harus membuat instance Expense Processor terlebih dahulu untuk digunakan di lab ini.

1. Di konsol, buka Document AI Platform Overview
2. Klik Create Processor, scroll ke bawah ke Specialized, lalu pilih Expense Parser.
3. Beri nama codelab-expense-parser (Atau hal lain yang akan Anda ingat) dan pilih region terdekat di daftar.
4. Klik Create untuk membuat pemroses
5. Salin ID prosesor. Anda harus menggunakan ini dalam kode nanti.
6. Di Cloud Shell, buat bucket penyimpanan menggunakan PROJECT_ID-hitl-results sebagai nama:

export PROJECT_ID=$(gcloud config get-value core/project)
gsutil mb gs://$PROJECT_ID-hitl-results

7. Ikat akun pengguna Anda ke peran Vertex AI Admin IAM di project lab Anda

export USER_ACCOUNT=$(gcloud config get-value core/account)
gcloud projects add-iam-policy-binding $PROJECT_ID --member=user:$USER_ACCOUNT --role=roles/aiplatform.admin

4. Mengonfigurasi Human-in-the-loop

Dalam tugas ini, Anda akan mengonfigurasi peninjauan manual untuk pemroses biaya yang Anda buat sebelumnya.

1. Di konsol, buka Navigation menu, lalu pilih Document AI.
2. Klik AI yang memerlukan interaksi manusia.
3. Klik codelab-expense-parser untuk membuka halaman Peninjauan Manual untuk pemroses.
4. Klik Configure Human-in-the-Loop.

5. Pilih Filter Tingkat Dokumen.
6. Setel penggeser Nilai minimum keyakinan % ke 50%.
7. Biarkan opsi Spesialis disetel ke Gunakan spesialis saya sendiri.

8. Klik kotak drop-down Specialist pool, lalu klik NEW SPECIALIST POOL.
9. Untuk Nama pool, masukkan Codelab HITL Pool dalam dialog Pool pakar baru.
10. Masukkan alamat email pribadi Anda untuk Pengelola Kumpulan dan Spesialis
11. Klik Create pool.

Prosesnya perlu waktu beberapa menit sampai selesai. Anda akan menerima email dari Vertex AI [e-mail].

CATATAN: Klik coba lagi jika Anda mengalami masalah izin. Anda harus memiliki izin Cloud IAM aiplatform.specialistPools.create yang memerlukan peranroles/aiplatform.admin yang ditetapkan ke akun pengguna Anda di tingkat project.

roles/project.owner saja tidak cukup.

12. Biarkan Kotak Centang Penetapan otomatis tidak dicentang.
13. Centang kotak di bagian Konfirmasi biaya.
14. Klik Lokasi petunjuk dan salin lokasi penyimpanan ini: - JANGAN sertakan awalan gs:// dalam jalur

cloud-samples-data/documentai/codelabs/hitl/hitl-instructions.pdf

CATATAN: Dokumen ini adalah salinan pedoman untuk membuat set petunjuk peninjau, bukan contoh yang berfungsi.

15. Di Lokasi hasil, klik Telusuri, lalu pilih bucket Cloud Storage yang Anda buat sebelumnya.
16. Klik Pilih.
17. Klik Simpan Konfigurasi.

Sekarang Konsol akan menampilkan Mengonfigurasi human-in-the-loop dan akan memerlukan waktu beberapa menit untuk diselesaikan.

18. Setelah konfigurasi selesai, konsol akan meminta Anda untuk Mengaktifkan Human-in-the-loop.

• Klik Tombol Ganti untuk mengaktifkan.
• Kemudian, klik AKTIFKAN di dialog pop-up.

Mengupload Formulir Biaya Contoh

1. Kami memiliki formulir contoh yang dapat digunakan untuk disimpan di Google Cloud Storage. Anda dapat mendownloadnya dengan tombol atau perintah di bawah:

Download expense-claim.pdf

gsutil cp gs://cloud-samples-data/documentai/codelabs/hitl/expense-claim.pdf .

2. Setelah mengaktifkan Human-in-the-loop, klik tombol Upload Dokumen dan cari dokumen contoh yang baru saja Anda download.
3. Klik Upload dan tunggu hingga prosesnya selesai.

5. Menugaskan item untuk peninjauan manual

1. Di halaman ini, Anda akan melihat link untuk Konsol Pengelola Kumpulan dan Konsol Spesialis. Link ini juga akan muncul dalam email dari Vertex AI [e-mail].
   • Tampilannya akan terlihat seperti https://datacompute.google.com/cm/cloudml_data_specialists_us_central1_xxxxxxx/tasks
   • Klik link untuk konsol Pengelola.

2. Setelah berada di Konsol Pelabelan Data, klik judul tab Tasks untuk membuka halaman penugasan tugas.
3. Klik kotak centang Tidak ditetapkan. Anda akan melihat bahwa entri baru tercantum dalam antrean tugas codelab-expense-parser-P1.

4. Pilih codelab-expense-parser-P1.
5. Klik Kelola Tugas.
6. Masukkan email pribadi Anda di kotak teks Include specialists by email, lalu pilih email tersebut dari daftar dropdown.
7. Klik Terapkan.

Layar kini menunjukkan bahwa tugas tersebut ditetapkan kepada Anda. Anda mungkin mendapati bahwa proses ini memerlukan waktu beberapa menit untuk diterapkan dan terlihat.

8. Pilih pengguna baru, lalu klik ikon menu.
9. Klik Tetapkan ke semua tugas dari menu pop-up yang muncul.

10. Klik Commit changes.
11. Klik Commit.

6. Melakukan Tugas Peninjauan Manual

1. Kembali ke halaman konfigurasi Human-in-the-Loop di Konsol Cloud.

Klik link untuk membuka konsol Spesialis (Pekerja). Tampilannya akan seperti https://datacompute.google.com/w/cloudml_data_specialists_us_central1_xxxxxxxxxxx.

Konsol pekerja akan terbuka dan mencantumkan tugas baru Anda.

2. Arahkan kursor ke item baris yang berisi Meeting with 4m, lalu klik ikon edit (pensil).
3. Edit nilai untuk mengubah teks menjadi Rapat dengan Adam. Anda mungkin harus men-scroll ke bawah di kotak teks untuk melihat teks.
4. Klik Terapkan.
5. Klik ikon Konfirmasi (centang hijau) untuk item di bawah.
6. Klik ikon Konfirmasi untuk entitas lain yang ditandai.
7. Klik Kirim. Tugas peninjauan kini telah dihapus dari antrean pelabel Anda.

7. Melihat Tugas yang Sudah Selesai

1. Kembali ke konsol Pengelola.
2. Klik Tugas, lalu pilih Sedang Berlangsung
3. Klik Spesialis.
4. Pilih alamat email Anda.
5. Klik Kelola Tugas.
6. Pilih expense-processor-P1 dari dropdown Select specialists working on specific tasks dan Select tasks. Klik Terapkan untuk setiap pilihan. Di menu konteks untuk expense-processor-P1 yang telah ditetapkan kepada Anda, pilih Lihat Pakar

Setelah tugas pemberian label dikirimkan oleh pemberi label, jumlah tugas yang dijawab dan total waktu yang diperlukan akan diperbarui, tetapi data dalam tampilan ini mungkin memerlukan waktu beberapa menit untuk muncul.

7. Tutup pop-up spesialis dan lihat tab Spesialis.
8. Klik menu konteks untuk nama pengguna Anda, lalu pilih Lihat tugas.

Tampilan ini menunjukkan daftar tugas untuk pengguna, jumlah penyelesaiannya, dan jumlah waktu yang diperlukan seperti yang ditunjukkan di bawah:

8. Selamat

Selamat, Anda telah berhasil menggunakan Human-in-the-Loop Document AI untuk mengonfigurasi peninjauan manual untuk dokumen yang diproses menggunakan pemroses biaya Document AI.

Pembersihan

Agar tidak menimbulkan tagihan ke akun Google Cloud Anda untuk resource yang digunakan dalam tutorial ini:

• Di Cloud Console, buka halaman Mengelola resource.
• Dalam daftar project, pilih project Anda lalu klik Hapus.
• Pada dialog, ketik project ID, lalu klik Matikan untuk menghapus project.

Pelajari Lebih Lanjut

Lanjutkan belajar tentang Document AI dengan Codelab berikut ini.

• Mengelola prosesor Document AI dengan Python

Referensi

• Masa Depan Dokumen - Playlist YouTube
• Dokumentasi Document AI
• Library Klien Python Document AI
• Sampel Document AI

Lisensi

Karya ini dilisensikan berdasarkan Lisensi Umum Creative Commons Attribution 2.0.