Document AI: Memerlukan Interaksi Manusia

1. Pengantar

Document AI API adalah solusi pemahaman dokumen yang mengambil data tidak terstruktur seperti dokumen, email, dan lainnya, kemudian membuat data tersebut lebih mudah dipahami, dianalisis, serta digunakan.

Dengan peninjauan manual, Anda dapat mencapai akurasi pemrosesan dokumen yang lebih tinggi dengan jaminan peninjauan manual. Peninjauan manual dapat meningkatkan akurasi dan membantu bisnis mengevaluasi prediksi menggunakan alat yang dibuat khusus untuk mendukung peninjauan tersebut. Di lab ini, Anda akan mengonfigurasi dan menguji pemroses biaya menggunakan peninjauan manual untuk memvalidasi hasil dari prosesor menggunakan alat konfigurasi dan pengelolaan yang memerlukan interaksi manusia.

CATATAN: UI Konsol dapat berubah seiring waktu, sehingga lingkungan Anda mungkin akan terlihat sedikit berbeda. Jika Anda menemukan masalah dengan lab ini, harap laporkan.

Prasyarat

Codelab ini dibangun berdasarkan konten yang disajikan dalam Codelab Document AI lainnya.

Sebaiknya Anda menyelesaikan Codelab berikut sebelum melanjutkan.

• Pengenalan Karakter Optik (OCR) dengan Document AI (Python)
• Penguraian Formulir dengan Document AI (Python)
• Prosesor Terspesialisasi dengan Document AI (Python)

Yang akan Anda pelajari

• Mengonfigurasi peninjauan manual untuk prosesor.
• Buat kumpulan resource pengguna peninjauan manual.
• Buat tugas peninjauan manual.
• Memberikan tugas peninjauan manual kepada pengguna.
• Selesaikan peninjauan manual pada dokumen.

Yang Anda butuhkan

• Project Google Cloud
• Browser, seperti Chrome atau Firefox
• Pengetahuan tentang Python 3

2. Mempersiapkan

Codelab ini akan menganggap Anda telah menyelesaikan langkah-langkah Penyiapan Document AI yang tercantum di Codelab Pengantar.

Harap selesaikan langkah-langkah berikut sebelum melanjutkan:

• Mulai Cloud Shell
• Aktifkan Document AI & Cloud Storage API
• Menginstal Library Klien Python

Anda juga harus mengaktifkan Vertex AI API.

1. Dengan menggunakan Kotak Penelusuran di bagian atas konsol, cari "Vertex AI API", lalu klik Aktifkan untuk menggunakan API di project Google Cloud Anda
2. Atau, API dapat diaktifkan menggunakan perintah gcloud berikut.

gcloud services enable aiplatform.googleapis.com

3. Membuat Prosesor

Anda harus membuat instance Pemroses Pengeluaran terlebih dahulu untuk digunakan di lab ini.

1. Di konsol, buka Document AI Platform Overview
2. Klik Create Processor, scroll ke bawah ke Specialized, lalu pilih Expense Parser.
3. Beri nama codelab-expense-parser (Atau hal lain yang akan Anda ingat) dan pilih region terdekat di daftar.
4. Klik Create untuk membuat prosesor
5. Salin ID prosesor. Anda harus menggunakan ini dalam kode nanti.
6. Di Cloud Shell, buat bucket penyimpanan menggunakan PROJECT_ID-hitl-results sebagai namanya:

export PROJECT_ID=$(gcloud config get-value core/project)
gsutil mb gs://$PROJECT_ID-hitl-results

7. Mengikat akun pengguna Anda ke peran Vertex AI Admin IAM pada project lab Anda

export USER_ACCOUNT=$(gcloud config get-value core/account)
gcloud projects add-iam-policy-binding $PROJECT_ID --member=user:$USER_ACCOUNT --role=roles/aiplatform.admin

4. Mengonfigurasi Manusia yang memerlukan interaksi

Dalam tugas ini, Anda akan mengonfigurasi peninjauan manual untuk prosesor biaya yang Anda buat sebelumnya.

1. Di konsol, buka Navigation menu dan pilih Document AI.
2. Klik AI yang memerlukan interaksi manusia.
3. Klik codelab-expense-parser untuk membuka halaman Human Review untuk pemroses.
4. Klik Configure Human-in-the-Loop.

5. Pilih Filter Tingkat Dokumen.
6. Setel penggeser %nilai minimum keyakinan ke 50%.
7. Biarkan opsi Spesialis ditetapkan ke Gunakan spesialis saya sendiri.

8. Klik di kotak drop-down Kumpulan spesialis dan klik POOL SPESIALIST BARU.
9. Untuk Pool name, masukkan Codelab HITL Pool dalam dialog New specialist pool.
10. Masukkan alamat email pribadi Anda untuk Pengelola Kumpulan dan Spesialis
11. Klik Buat kumpulan.

Prosesnya perlu waktu beberapa menit sampai selesai. Anda akan menerima email dari Vertex AI [e-mail].

CATATAN: Klik coba lagi jika Anda mengalami masalah izin. Anda harus memiliki izin aiplatform.specialistPools.create Cloud IAM yang memerlukan peran roles/aiplatform.admin yang ditetapkan ke akun pengguna Anda di level project.

roles/project.owner tidak cukup jika berdiri sendiri.

12. Biarkan kotak Penetapan otomatis tidak dicentang.
13. Centang kotak di bagian Konfirmasi tagihan.
14. Klik Lokasi petunjuk dan salin di lokasi penyimpanan ini: - JANGAN sertakan awalan gs:// di jalur

cloud-samples-data/documentai/codelabs/hitl/hitl-instructions.pdf

CATATAN: Dokumen ini adalah salinan panduan untuk membuat kumpulan petunjuk peninjau, bukan contoh yang berfungsi.

15. Di Results location, klik Browse, lalu pilih bucket Cloud Storage yang Anda buat sebelumnya.
16. Klik Pilih.
17. Klik Save Configuration.

Konsol sekarang akan menampilkan Mengonfigurasi manusia yang memerlukan interaksi dan prosesnya akan selesai dalam beberapa menit.

18. Setelah konfigurasi selesai, konsol akan meminta Anda untuk Mengaktifkan Human-in-the-loop.

• Klik Tombol Alihkan untuk mengaktifkan.
• Kemudian, klik ENABLE di dialog pop-up.

Upload Contoh Formulir Pengeluaran

1. Kami memiliki contoh formulir untuk digunakan dan disimpan di Google Cloud Storage. Anda dapat mendownloadnya dengan tombol atau perintah di bawah ini:

Download klaim-biaya-biaya.pdf

gsutil cp gs://cloud-samples-data/documentai/codelabs/hitl/expense-claim.pdf .

2. Setelah mengaktifkan Human-in-the-loop, klik tombol Upload Document dan cari contoh dokumen yang baru saja Anda download.
3. Klik Upload dan tunggu sampai selesai.

5. Menetapkan item untuk peninjauan manual

1. Di halaman ini, Anda akan melihat link untuk Konsol Spesialis dan Pengelola Pemusatan. Link ini juga akan muncul dalam email dari Vertex AI [e-mail].
   • Ikon seharusnya seperti https://datacompute.google.com/cm/cloudml_data_specialists_us_central1_xxxxxxx/tasks
   • Klik link untuk konsol Manager.

2. Setelah berada di Data Labeling Console, klik judul tab Tasks untuk membuka halaman penetapan tugas.
3. Centang kotak Belum ditetapkan. Anda akan melihat bahwa entri baru tercantum di task queue codelab-expense-parser-P1.

4. Pilih codelab-expense-parser-P1.
5. Klik Kelola Tugas.
6. Masukkan email pribadi Anda di kotak teks Sertakan pakar melalui email, lalu pilih dari daftar dropdown.
7. Klik Terapkan.

Layar sekarang menunjukkan bahwa tugas telah ditetapkan kepada Anda. Mungkin perlu waktu beberapa menit untuk menyebar dan menjadi terlihat.

8. Pilih pengguna baru dan klik ikon menu.
9. Klik Berikan ke semua tugas dari menu pop-up yang muncul.

10. Klik Lakukan perubahan.
11. Klik Commit.

6. Melakukan Tugas Peninjauan Manual

1. Kembali ke halaman konfigurasi Human-in-the-Loop di Konsol Cloud.

Klik tautan untuk mengunjungi konsol Spesialis (Pekerja). Tampilannya akan terlihat seperti https://datacompute.google.com/w/cloudml_data_specialists_us_central1_xxxxxxxxxxx.

Konsol pekerja akan terbuka dan mencantumkan tugas baru Anda.

2. Arahkan kursor ke item baris yang berisi Rapat dengan 4 mnt dan klik ikon edit (pensil).
3. Edit nilai untuk mengubah teks menjadi Rapat dengan Adam. Anda mungkin harus men-scroll ke bawah di kotak teks untuk melihat teks tersebut.
4. Klik Terapkan.
5. Klik ikon Konfirmasi (centang hijau) untuk item di bawah.
6. Klik ikon Konfirmasi untuk entitas lain yang ditandai.
7. Klik Kirim. Tugas peninjauan sekarang telah dihapus dari antrean pemberi label Anda.

7. Lihat Tugas yang Sudah Selesai

1. Kembali ke konsol Manager.
2. Klik Tasks, lalu pilih Ongoing
3. Klik Spesialis.
4. Pilih alamat email Anda.
5. Klik Kelola Tugas.
6. Pilih expense-processor-P1 dari dropdown Select specialists working on specific tasks dan Select tasks. Klik Terapkan untuk setiap pilihan. Di menu konteks untuk expense-processor-P1 yang telah ditetapkan kepada Anda, pilih Lihat Spesialis

Setelah tugas pelabelan dikirimkan oleh pemberi label, jumlah tugas yang dijawab dan total waktu yang dibutuhkan akan diperbarui tetapi data dalam tampilan ini dapat memerlukan waktu beberapa menit untuk muncul.

7. Tutup pop-up pakar dan lihat tab Spesialis.
8. Klik menu konteks untuk nama pengguna Anda dan pilih Lihat tugas.

Tampilan ini menampilkan daftar tugas untuk pengguna, jumlah penyelesaiannya, dan jumlah waktu yang dibutuhkan seperti yang ditunjukkan di bawah ini:

8. Selamat

Selamat, Anda telah berhasil menggunakan Human-in-the-Loop Document AI untuk mengonfigurasi peninjauan manual untuk dokumen yang diproses menggunakan pemroses biaya Document AI.

Pembersihan

Agar tidak menimbulkan tagihan ke akun Google Cloud Anda untuk resource yang digunakan dalam tutorial ini:

• Di Cloud Console, buka halaman Mengelola resource.
• Dalam daftar project, pilih project Anda lalu klik Hapus.
• Pada dialog, ketik project ID, lalu klik Matikan untuk menghapus project.

Pelajari Lebih Lanjut

Lanjutkan belajar tentang Document AI dengan Codelab berikut ini.

• Mengelola prosesor Document AI dengan Python

Referensi

• Masa Depan Dokumen - Playlist YouTube
• Dokumentasi Document AI
• Library Klien Python Document AI
• Sampel Document AI

Lisensi

Karya ini dilisensikan berdasarkan Lisensi Umum Creative Commons Attribution 2.0.