Trí tuệ nhân tạo (AI) ghi lại tài liệu: Con người lặp lại

1. Giới thiệu

Document AI API là một giải pháp hiểu tài liệu, lấy dữ liệu không có cấu trúc (chẳng hạn như tài liệu, email, v.v.) và giúp dữ liệu dễ hiểu, dễ phân tích và dễ sử dụng hơn.

Với tính năng đánh giá thủ công, bạn có thể đạt được độ chính xác cao hơn trong quá trình xử lý tài liệu, đồng thời đảm bảo rằng tài liệu được đánh giá thủ công. Quy trình đánh giá thủ công có thể tăng độ chính xác và giúp doanh nghiệp đánh giá các dự đoán bằng cách sử dụng các công cụ chuyên dụng để thực hiện quy trình đánh giá đó. Trong phòng thí nghiệm này, bạn sẽ định cấu hình và kiểm thử một trình xử lý chi phí bằng cách sử dụng quy trình đánh giá thủ công để xác thực kết quả từ trình xử lý bằng các công cụ quản lý và định cấu hình có sự tham gia của con người.

LƯU Ý: Giao diện người dùng của Bảng điều khiển có thể thay đổi theo thời gian, vì vậy, môi trường của bạn có thể hơi khác. Nếu bạn phát hiện bất kỳ vấn đề nào với lớp học này, vui lòng báo cáo vấn đề đó.

Điều kiện tiên quyết

Lớp học lập trình này dựa trên nội dung được trình bày trong các Lớp học lập trình khác về Document AI.

Bạn nên hoàn thành các lớp học lập trình sau đây trước khi tiếp tục.

• Nhận dạng ký tự quang học (OCR) bằng Document AI (Python)
• Phân tích cú pháp biểu mẫu bằng Document AI (Python)
• Bộ xử lý chuyên dụng có Document AI (Python)

Kiến thức bạn sẽ học được

• Định cấu hình quy trình đánh giá thủ công cho bộ xử lý.
• Tạo một nhóm tài nguyên người dùng đánh giá thủ công.
• Tạo một công việc đánh giá thủ công thử nghiệm.
• Giao việc đánh giá thủ công cho một người dùng.
• Hoàn tất quy trình đánh giá thủ công một tài liệu.

Bạn cần có

• Một dự án trên Google Cloud
• Một trình duyệt, chẳng hạn như Chrome hoặc Firefox
• Kiến thức về Python 3

2. Thiết lập

Lớp học lập trình này giả định rằng bạn đã hoàn thành các bước Thiết lập Document AI được liệt kê trong Lớp học lập trình giới thiệu.

Vui lòng hoàn tất các bước sau trước khi tiếp tục:

• Khởi động Cloud Shell
• Bật API Document AI và Cloud Storage
• Cài đặt Thư viện ứng dụng Python

Bạn cũng cần bật Vertex AI API.

1. Sử dụng Thanh tìm kiếm ở đầu bảng điều khiển, tìm "Vertex AI API", sau đó nhấp vào Bật để sử dụng API này trong dự án trên đám mây của bạn trên Google Cloud
2. Ngoài ra, bạn có thể bật API bằng lệnh gcloud sau.

gcloud services enable aiplatform.googleapis.com

3. Tạo một Bộ xử lý

Trước tiên, bạn phải tạo một phiên bản của Trình xử lý chi phí để sử dụng cho lớp học này.

1. Trong bảng điều khiển, hãy chuyển đến phần Tổng quan về Document AI
2. Nhấp vào Tạo trình xử lý, di chuyển xuống phần Chuyên biệt rồi chọn Trình phân tích cú pháp chi phí.
3. Đặt tên cho codelab-expense-parser (Hoặc một tên khác mà bạn sẽ nhớ) rồi chọn khu vực gần nhất trong danh sách.
4. Nhấp vào Tạo để tạo bộ xử lý
5. Sao chép mã nhận dạng bộ xử lý. Sau này, bạn phải sử dụng chỉ mục này trong mã của mình.
6. Trong Cloud Shell, hãy tạo một bộ chứa lưu trữ bằng cách dùng PROJECT_ID-hitl-results làm tên:

export PROJECT_ID=$(gcloud config get-value core/project)
gsutil mb gs://$PROJECT_ID-hitl-results

7. Liên kết tài khoản người dùng của bạn với vai trò Quản trị viên Vertex AI IAM trong dự án phòng thí nghiệm

export USER_ACCOUNT=$(gcloud config get-value core/account)
gcloud projects add-iam-policy-binding $PROJECT_ID --member=user:$USER_ACCOUNT --role=roles/aiplatform.admin

4. Định cấu hình quy trình có sự tham gia của con người

Trong nhiệm vụ này, bạn sẽ định cấu hình quy trình đánh giá thủ công cho trình xử lý chi phí mà bạn đã tạo trước đó.

1. Trong bảng điều khiển, hãy mở Trình đơn điều hướng rồi chọn Document AI.
2. Nhấp vào AI có sự tham gia của con người.
3. Nhấp vào biểu tượng codelab-expense-parser để mở trang Đánh giá thủ công cho bộ xử lý.
4. Nhấp vào Định cấu hình sự tham gia của con người vào quy trình.

5. Chọn Bộ lọc cấp tài liệu.
6. Đặt thanh trượt Ngưỡng tự tin (%) thành 50%.
7. Để lựa chọn Chuyên gia ở chế độ Sử dụng chuyên gia của riêng tôi.

8. Nhấp vào hộp thả xuống Nhóm chuyên gia rồi nhấp vào NHÓM CHUYÊN GIA MỚI.
9. Đối với Tên nhóm, hãy nhập Codelab HITL Pool trong hộp thoại Nhóm chuyên gia mới.
10. Nhập địa chỉ email cá nhân của bạn cho Người quản lý nhóm và Chuyên gia
11. Nhấp vào Tạo nhóm.

Quá trình này sẽ mất vài phút để hoàn tất. Bạn sẽ nhận được email từ Vertex AI [e-mail].

LƯU Ý: Nhấp vào thử lại nếu bạn gặp phải vấn đề về quyền. Bạn phải có quyền aiplatform.specialistPools.create Cloud IAM. Quyền này yêu cầu bạn phải có vai trò roles/aiplatform.admin được chỉ định cho tài khoản người dùng của bạn ở cấp dự án.

roles/project.owner là không đủ.

12. Bỏ đánh dấu hộp Tự động chỉ định.
13. Nhấp vào hộp đánh dấu trong phần Xác nhận các khoản phí.
14. Nhấp vào Vị trí hướng dẫn rồi sao chép vị trí lưu trữ này: – KHÔNG thêm tiền tố gs:// vào đường dẫn

cloud-samples-data/documentai/codelabs/hitl/hitl-instructions.pdf

LƯU Ý: Tài liệu này là bản sao của các nguyên tắc tạo bộ hướng dẫn cho người đánh giá, chứ không phải ví dụ thực tế.

15. Trong mục Vị trí kết quả, hãy nhấp vào Duyệt qua rồi chọn nhóm Cloud Storage mà bạn đã tạo trước đó.
16. Nhấp vào Chọn.
17. Nhấp vào Lưu cấu hình.

Giờ đây, Console sẽ hiển thị thông báo Đang định cấu hình quy trình có sự tham gia của con người và quá trình này sẽ mất vài phút để hoàn tất.

18. Khi quá trình định cấu hình hoàn tất, bảng điều khiển sẽ nhắc bạn Bật tính năng Có sự tham gia của con người.

• Nhấp vào Nút chuyển để bật.
• Sau đó, nhấp vào BẬT trong hộp thoại bật lên.

Tải biểu mẫu chi phí mẫu lên

1. Chúng tôi có một biểu mẫu mẫu để sử dụng được lưu trữ trong Google Cloud Storage. Bạn có thể tải tệp này xuống bằng nút hoặc lệnh bên dưới:

Tải tệp expense-claim.pdf xuống

gsutil cp gs://cloud-samples-data/documentai/codelabs/hitl/expense-claim.pdf .

2. Sau khi bật tính năng Có sự tham gia của con người, hãy nhấp vào nút Tải tài liệu lên rồi duyệt tìm tài liệu mẫu mà bạn vừa tải xuống.
3. Nhấp vào Tải lên rồi đợi quá trình hoàn tất.

5. Chỉ định một mục để nhân viên đánh giá

1. Trên trang này, bạn sẽ thấy các đường liên kết đến Bảng điều khiển của Chuyên gia và Bảng điều khiển của Người quản lý nhóm. Những đường liên kết này cũng sẽ xuất hiện trong email của Vertex AI [e-mail].
   • Các biểu tượng này sẽ có dạng như https://datacompute.google.com/cm/cloudml_data_specialists_us_central1_xxxxxxx/tasks
   • Nhấp vào đường liên kết đến bảng điều khiển Người quản lý.

2. Sau khi truy cập vào Bảng điều khiển gắn nhãn dữ liệu, hãy nhấp vào tiêu đề thẻ Nhiệm vụ để mở trang giao nhiệm vụ.
3. Nhấp vào hộp đánh dấu Chưa được chỉ định. Bạn sẽ thấy một mục mới được liệt kê trong hàng đợi tác vụ codelab-expense-parser-P1.

4. Chọn codelab-expense-parser-P1.
5. Nhấp vào Quản lý bài tập.
6. Nhập email cá nhân của bạn vào hộp văn bản Thêm chuyên gia qua email, rồi chọn email đó trong danh sách thả xuống.
7. Nhấp vào Áp dụng.

Giờ đây, màn hình sẽ cho biết rằng bạn được giao việc cần làm. Bạn có thể thấy rằng quá trình này có thể mất vài phút để lan truyền và hiển thị.

8. Chọn người dùng mới rồi nhấp vào biểu tượng trình đơn.
9. Nhấp vào Chỉ định cho tất cả các việc cần làm trong trình đơn bật lên xuất hiện.

10. Nhấp vào Commit changes (Cam kết thay đổi).
11. Nhấp vào Cam kết.

6. Thực hiện công việc đánh giá thủ công

1. Quay lại trang cấu hình Human-in-the-Loop trong Cloud Console.

Nhấp vào đường liên kết để truy cập vào bảng điều khiển Chuyên viên (Nhân viên). Thẻ này sẽ có dạng như https://datacompute.google.com/w/cloudml_data_specialists_us_central1_xxxxxxxxxxx.

Bảng điều khiển worker sẽ mở ra và liệt kê nhiệm vụ mới của bạn.

2. Di chuột qua mục hàng có chứa Cuộc họp với 4m rồi nhấp vào biểu tượng chỉnh sửa (bút chì).
3. Chỉnh sửa giá trị để thay đổi văn bản thành Cuộc họp với Adam. Bạn có thể phải di chuyển xuống trong hộp văn bản để xem văn bản.
4. Nhấp vào Áp dụng.
5. Nhấp vào biểu tượng Xác nhận (dấu kiểm màu xanh lục) cho mục bên dưới.
6. Nhấp vào biểu tượng Xác nhận cho các thực thể được làm nổi bật khác.
7. Nhấp vào Gửi. Giờ đây, nhiệm vụ xem xét đã bị xoá khỏi hàng đợi của người gắn nhãn.

7. Xem các việc cần làm đã hoàn thành

1. Quay lại Bảng điều khiển dành cho người quản lý.
2. Nhấp vào Việc cần làm rồi chọn Đang diễn ra
3. Nhấp vào Chuyên gia.
4. Chọn địa chỉ email của bạn.
5. Nhấp vào Quản lý bài tập.
6. Chọn expense-processor-P1 trong trình đơn thả xuống Select specialists working on specific tasks và Select tasks. Nhấp vào Áp dụng cho từng lựa chọn. Trong trình đơn theo bối cảnh cho expense-processor-P1 được chỉ định cho bạn, hãy chọn Xem chuyên gia

Sau khi người gắn nhãn gửi nhiệm vụ gắn nhãn, số lượng nhiệm vụ đã trả lời và tổng thời gian thực hiện sẽ được cập nhật, nhưng dữ liệu trong chế độ xem này có thể mất vài phút mới xuất hiện.

7. Đóng cửa sổ bật lên về chuyên gia và xem thẻ Chuyên gia.
8. Nhấp vào trình đơn theo bối cảnh cho tên người dùng của bạn rồi chọn Xem việc cần làm.

Chế độ xem này cho thấy danh sách các việc cần làm của người dùng, số lượng việc đã hoàn thành và thời gian đã thực hiện như minh hoạ dưới đây:

8. Xin chúc mừng

Xin chúc mừng! Bạn đã sử dụng thành công Document AI Human-in-the-Loop để thiết lập quy trình đánh giá thủ công cho các tài liệu được xử lý bằng bộ xử lý chi phí của Document AI.

Dọn dẹp

Để tránh phát sinh phí cho tài khoản Google Cloud của bạn đối với các tài nguyên được dùng trong hướng dẫn này, hãy làm như sau:

• Trong Cloud Console, hãy chuyển đến trang Quản lý tài nguyên.
• Trong danh sách dự án, hãy chọn dự án của bạn rồi nhấp vào Xoá.
• Trong hộp thoại, hãy nhập mã dự án rồi nhấp vào Tắt để xoá dự án.

Tìm hiểu thêm

Tiếp tục tìm hiểu về Document AI thông qua các lớp học lập trình tiếp theo này.

• Quản lý các bộ xử lý Document AI bằng Python

Tài nguyên

• The Future of Documents – YouTube Playlist
• Tài liệu về Document AI
• Thư viện ứng dụng Document AI Python
• Mẫu Document AI

Giấy phép

Tác phẩm này được cấp phép theo giấy phép Ghi công theo Creative Commons 2.0 Chung.