פריסה אוטומטית של בינה מלאכותית גנרטיבית ב-Go באמצעות אפליקציית האינטרנט של Genkit ממערכת בקרת הגרסאות ל-Cloud Run

1. סקירה כללית

פריסת אפליקציית אינטרנט בפעם הראשונה יכולה להיות משימה מאיימת. גם אחרי הפריסה הראשונה, אם התהליך מסובך מדי, יכול להיות שתמנעו מפריסה של גרסאות חדשות של האפליקציה. בעזרת פריסה רציפה, אתם יכולים לפרוס שינויים באפליקציה שלכם בקלות ובאופן אוטומטי.

במעבדה הזו תכתבו אפליקציית אינטרנט ותגדירו את Cloud Run כך שהאפליקציה תיפרס אוטומטית כשמתבצע שינוי בקוד המקור שלה. לאחר מכן משנים את הבקשה ומפרסמים אותה מחדש.

מה תלמדו

  • כתיבת אפליקציית אינטרנט באמצעות Cloud Shell Editor
  • שמירת קוד האפליקציה ב-GitHub
  • פריסה אוטומטית של האפליקציה ב-Cloud Run
  • הוספת AI גנרטיבי לאפליקציה באמצעות Genkit
  • ניהול הנחיות ל-LLM באמצעות ספריית dotprompt

2. דרישות מוקדמות

  1. אם אין לכם חשבון Google, אתם צריכים ליצור חשבון Google.
    • משתמשים בחשבון לשימוש אישי במקום בחשבון לצורכי עבודה או בחשבון בית ספרי. יכול להיות שבחשבונות לצורכי עבודה או בחשבונות בית ספריים יש הגבלות שימנעו מכם להפעיל את ממשקי ה-API שנדרשים למעבדה הזו.
  2. אם אין לכם חשבון ב-GitHub, אתם צריכים ליצור חשבון ב-GitHub
    • אם יש לכם חשבון GitHub קיים, אתם יכולים להשתמש בו. יש סיכוי גבוה יותר ש-GitHub יחסום חשבון חדש כספאם.
    • כדי להקטין את הסיכוי שהחשבון שלכם יסומן כספאם, מומלץ להגדיר אימות דו-שלבי בחשבון GitHub.

3. הגדרת הפרויקט

  1. נכנסים ל-מסוף Google Cloud.
  2. מפעילים את החיוב במסוף Cloud.
    • העלות של השלמת ה-Lab הזה במשאבי Cloud צריכה להיות פחות מ-1$.
    • כדי למחוק משאבים ולמנוע חיובים נוספים, אפשר לבצע את השלבים בסוף ה-Lab הזה.
    • משתמשים חדשים זכאים לתקופת ניסיון בחינם בשווי 300$.
    • מגיעים לאירוע של Gen AI for Devs? יכול להיות שתוכלו לקבל קרדיט בסך 1$.
  3. יוצרים פרויקט חדש או בוחרים להשתמש מחדש בפרויקט קיים.
  4. מוודאים שהחיוב מופעל בדף My projects (הפרויקטים שלי) בחיוב ב-Cloud
    • אם הפרויקט החדש מופיע עם הערך Billing is disabled בעמודה Billing account:
      1. לוחצים על סמל האפשרויות הנוספות (3 נקודות) בעמודה Actions.
      2. לוחצים על שינוי פרטי החיוב.
      3. בוחרים את החשבון לחיוב שבו רוצים להשתמש.
    • אם אתם משתתפים באירוע Gen AI for Devs, סביר להניח שהשם של החשבון יהיה Google Cloud Platform Trial Billing Account

4. פתיחת Cloud Shell Editor

  1. עוברים אל Cloud Shell Editor.
  2. אם הטרמינל לא מופיע בתחתית המסך, פותחים אותו:
    • לוחצים על סמל האפשרויות הנוספות (3 קווים) סמל של תפריט האפשרויות הנוספות (3 קווים).
    • לוחצים על Terminal (מסוף).
    • לוחצים על New Terminal (טרמינל חדש)פתיחת טרמינל חדש ב-Cloud Shell Editor.
  3. בטרמינל, מגדירים את הפרויקט באמצעות הפקודה הבאה:
    • פורמט:
      gcloud config set project [PROJECT_ID]
    • דוגמה:
      gcloud config set project lab-project-id-example
    • אם אתם לא זוכרים את מזהה הפרויקט:
      • כדי לראות את כל מזהי הפרויקטים, מריצים את הפקודה:
        gcloud projects list | awk '/PROJECT_ID/{print $2}'
      הגדרת מזהה הפרויקט בטרמינל של Cloud Shell Editor
  4. אם מתבקשים לאשר, לוחצים על אישור כדי להמשיך. לוחצים כדי לתת הרשאה ל-Cloud Shell
  5. תוצג ההודעה הבאה:
    Updated property [core/project].
    אם מופיע WARNING ומוצגת השאלה Do you want to continue (Y/N)?, כנראה שהזנתם את מזהה הפרויקט בצורה שגויה. לוחצים על N, לוחצים על Enter ומנסים להריץ שוב את הפקודה gcloud config set project.

5. הפעלת ממשקי ה-API

בטרמינל, מפעילים את ממשקי ה-API:

gcloud services enable \
  run.googleapis.com \
  cloudbuild.googleapis.com \
  aiplatform.googleapis.com

השלמת הפקודה עשויה להימשך כמה דקות, אבל בסופו של דבר אמורה להתקבל הודעה על הצלחה שדומה להודעה הבאה:

Operation "operations/acf.p2-73d90d00-47ee-447a-b600" finished successfully.

6. הגדרת Git

  1. מגדירים את כתובת האימייל הגלובלית של המשתמש ב-Git:
    git config --global user.email "you@example.com"
  2. מגדירים את שם המשתמש הגלובלי ב-Git:
    git config --global user.name "Your Name"
  3. מגדירים את ענף ברירת המחדל הגלובלי של git ל-main:
    git config --global init.defaultBranch main

7. כתיבת הקוד

כדי לכתוב אפליקציה ב-Go:

  1. מנווטים לספריית הבית:
    cd ~
  2. יוצרים את הספרייה codelab-genai:
    mkdir codelab-genai
  3. מנווטים לספרייה codelab-genai:
    cd codelab-genai
  4. מאתחלים קובץ go.mod כדי להצהיר על המודול:
    go mod init codelab-genai
  5. יוצרים קובץ main.go:
    touch main.go
  6. פותחים את הקובץ main.go ב-Cloud Shell Editor:
    cloudshell edit main.go
    קובץ ריק אמור להופיע בחלק העליון של המסך. כאן אפשר לערוך את הקובץ main.go. הצגת הקוד בחלק העליון של המסך
  7. עורכים את main.go ומדביקים בו את הקוד הבא:
    ‫
    package main

import (
    "fmt"
    "log"
    "net/http"
    "os"
)

func main() {
    http.HandleFunc("/", func(w http.ResponseWriter, r *http.Request) {
        fmt.Fprintln(w, "Hello, world!")
    })

    port := os.Getenv("PORT")

    if port == "" {
        port = "8080"
    }
    if err := http.ListenAndServe(":"+port, nil); err != nil {
        log.Fatal(err)
    }
}
    אחרי כמה שניות, Cloud Shell Editor ישמור את הקוד באופן אוטומטי. הקוד הזה מגיב לבקשות HTTP עם הודעת הפתיחה 'Hello world!‎'.

הקוד הראשוני של האפליקציה מוכן לאחסון בניהול גרסאות.

8. יצירת מאגר

  1. חוזרים לטרמינל של Cloud Shell בתחתית המסך.
  2. מוודאים שאתם עדיין בספרייה הנכונה:
    cd ~/codelab-genai
  3. אתחול מאגר Git
    git init -b main
  4. התחברות אל GitHub CLI
    gh auth login
    מקישים על Enter כדי לאשר את אפשרויות ברירת המחדל ופועלים לפי ההוראות בכלי GitHub CLI, כולל:
    1. לאיזה חשבון ברצונך להיכנס? GitHub.com
    2. מה הפרוטוקול המועדף שלך לפעולות Git במארח הזה? HTTPS
    3. האם לאמת את Git באמצעות פרטי הכניסה ל-GitHub? Y (מדלגים אם האפשרות הזו לא מופיעה).
    4. איך היית רוצה לאמת את GitHub CLI? Login with a web browser
    5. העתקת הקוד החד-פעמי
    6. פותחים את https://github.com/login/device.
    7. הדבקת הקוד החד-פעמי
    8. לוחצים על Authorize github (אישור גישה ל-GitHub).
    9. השלמת הכניסה
  5. מוודאים שאתם מחוברים לחשבון:
    ‫
    gh api user -q ".login"
    אם הכניסה הצליחה, הפקודה הזו אמורה להחזיר את שם המשתמש שלכם ב-GitHub.
  6. יצירת משתנה GITHUB_USERNAME
    GITHUB_USERNAME=$(gh api user -q ".login")
  7. מוודאים שיצרתם את משתנה הסביבה:
    echo ${GITHUB_USERNAME}
    אם יצרתם את המשתנה בהצלחה, שם המשתמש שלכם ב-GitHub אמור להיות מוצג.
  8. יוצרים מאגר ריק ב-GitHub בשם codelab-genai:
    gh repo create codelab-genai --private
    אם מופיעה השגיאה:
    ‫
    GraphQL: Name already exists on this account (createRepository)
    אז כבר יש לך מאגר בשם codelab-genai. יש שתי אפשרויות להמשך המדריך הזה:
  9. מוסיפים את מאגר codelab-genai כמאגר מרוחק origin:
    git remote add origin https://github.com/${GITHUB_USERNAME}/codelab-genai

9. שיתוף הקוד

  1. מוודאים שאתם נמצאים בספרייה הנכונה:
    cd ~/codelab-genai
  2. כדי להוסיף את כל הקבצים בספרייה הנוכחית לקומיט:
    git add .
  3. יוצרים את הקומיט הראשון:
    git commit -m "add http server"
  4. מעבירים את השמירה לענף main במאגר origin:
    git push -u origin main

אתם יכולים להריץ את הפקודה הזו ולעבור לכתובת ה-URL שמתקבלת כדי לראות את קוד האפליקציה שלכם ב-GitHub:

echo -e "\n\nTo see your code, visit this URL:\n \
    https://github.com/${GITHUB_USERNAME}/codelab-genai/blob/main/main.go \n\n"

10. הגדרת פריסות אוטומטיות

  1. משאירים את הכרטיסייה של Cloud Shell Editor פתוחה. נחזור לכרטיסייה הזו בהמשך.
  2. בכרטיסייה חדשה, נכנסים אל הדף Cloud Run.
  3. בוחרים את הפרויקט הנכון ב-Google Cloud במסוף התפריט הנפתח של הפרויקט במסוף Google Cloud
  4. לוחצים על CONNECT REPO (קישור מאגר)
  5. לוחצים על SET UP WITH CLOUD BUILD
      .
    1. בוחרים באפשרות GitHub בתור ספק המאגר
      • אם לא נכנסתם לחשבון GitHub בדפדפן, נכנסים באמצעות פרטי הכניסה.
    2. לוחצים על אימות ואז על המשך.
    3. אחרי שמתחברים, מוצגת הודעה בדף Cloud Run: The GitHub App is not installed on any of your repositories (אפליקציית GitHub לא מותקנת באף אחד מהמאגרים שלך).
    4. לוחצים על הלחצן INSTALL GOOGLE CLOUD BUILD (התקנת Google Cloud Build).
      • בדף Installation Setup (הגדרת ההתקנה), בוחרים באפשרות Only select repositories (בחירת מאגרים בלבד) ובוחרים במאגר codelab-genai שיצרתם באמצעות CLI.
      • לוחצים על התקנה.
      • הערה: אם יש לכם הרבה מאגרי GitHub, יכול להיות שיעברו כמה דקות עד שהם ייטענו.
    5. בוחרים באפשרות your-user-name/codelab-genai בתור מאגר
      • אם המאגר לא מופיע, לוחצים על הקישור ניהול מאגרי מידע מקושרים.
    6. עזיבת Branch בתור ^main$
    7. לוחצים על Go, ‏ Node.js, ‏ Python, ‏ Java,‏ ‎.NET Core, ‏ Ruby או PHP באמצעות buildpacks של Google Cloud
      • משאירים את השדות האחרים (Build context directory,‏ Entrypoint ו-Function target) כמו שהם.
    8. לוחצים על שמירה.
  6. גוללים למטה אל אימות.
  7. לוחצים על אפשר הפעלות לא מאומתות.
  8. לוחצים על יצירה.

אחרי שהבנייה מסתיימת (תהליך שנמשך כמה דקות), מריצים את הפקודה הזו ונכנסים לכתובת ה-URL שמתקבלת כדי לראות את האפליקציה הפועלת:

echo -e "\n\nOnce the build finishes, visit your live application:\n \
    "$( \
        gcloud run services list | \
        grep codelab-genai | \
        awk '/URL/{print $2}' | \
        head -1 \
    )" \n\n"

11. שינוי הקוד

  1. חוזרים לטרמינל של Cloud Shell בתחתית המסך.
  2. מוודאים שאתם עדיין בספרייה הנכונה:
    cd ~/codelab-genai
  3. מתקינים את Genkit SDK ל-Go:
    go get github.com/firebase/genkit/go/ai
  4. מתקינים את הפלאגין Vertex AI ל-Genkit:
    go get github.com/firebase/genkit/go/plugins/vertexai
  5. כדי לנהל את ההנחיות ל-LLM, מתקינים את הפלאגין dotprompt:
    go get github.com/firebase/genkit/go/plugins/dotprompt
  6. כדי לקבל את מזהה הפרויקט הנוכחי, מתקינים את ספריית המטא-נתונים של Go:
    go get cloud.google.com/go/compute/metadata
  7. פתיחה מחדש של main.go ב-Cloud Shell Editor
    cloudshell edit main.go
  8. מחליפים את הקוד בקובץ main.go בקוד הבא:
    package main

import (
    "context"
    "fmt"
    "log"
    "net/http"
    "os"

    "cloud.google.com/go/compute/metadata"
    "github.com/firebase/genkit/go/plugins/dotprompt"
    "github.com/firebase/genkit/go/plugins/vertexai"
)

func main() {
    ctx := context.Background()
    var projectId string
    var err error
    projectId = os.Getenv("GOOGLE_CLOUD_PROJECT")
    if projectId == "" {
        projectId, err = metadata.ProjectIDWithContext(ctx)
        os.Setenv("GOOGLE_CLOUD_PROJECT", projectId)
        if err != nil {
            return
        }
    }

    if err := vertexai.Init(ctx, nil); err != nil {
        log.Fatal(err)
        return
    }

    dotprompt.SetDirectory("./")
    prompt, err := dotprompt.Open("animal-facts")
    if err != nil {
        log.Fatal(err)
        return
    }
    type AnimalPromptInput struct {
        Animal string `json:"animal"`
    }

    http.HandleFunc("/", func(w http.ResponseWriter, r *http.Request) {

        animal := r.URL.Query().Get("animal")
        if animal == "" {
            animal = "dog"
        }

        response, err := prompt.Generate(
            ctx,
            &dotprompt.PromptRequest{
                Variables: AnimalPromptInput{
                    Animal: animal,
                },
            },
            nil,
        )

        if err != nil {
            w.WriteHeader(http.StatusServiceUnavailable)
            fmt.Fprint(w, err)
            return
        }

        w.Header().Set("Content-Type", "text/html; charset=utf-8")
        fmt.Fprint(w, response.Text())

    })

    port := os.Getenv("PORT")

    if port == "" {
        port = "8080"
    }
    if err := http.ListenAndServe(":"+port, nil); err != nil {
        log.Fatal(err)
    }
}
  9. יוצרים קובץ animal-facts.prompt:
    touch animal-facts.prompt
  10. פותחים את הקובץ animal-facts.prompt ב-Cloud Shell Editor:
    cloudshell edit animal-facts.prompt
  11. עורכים את animal-facts.prompt ומדביקים בו את הקוד הבא:
    ---
model: vertexai/gemini-1.5-flash
config:
temperature: 0.9
input:
schema:
    animal: string
default:
    animal: dog
---

Give me 10 fun facts about {{animal}}. Return the results as HTML without markdown backticks.

12. פריסה מחדש

  1. מוודאים שאתם עדיין בספרייה הנכונה ב-Cloud Shell:
    cd ~/codelab-genai
  2. מריצים את הפקודות הבאות כדי לבצע קומיט של גרסה חדשה של האפליקציה למאגר ה-Git המקומי:
    git add .
git commit -m "add latest changes"
  3. מעבירים את השינויים ל-GitHub:
    git push
  4. אחרי שה-build מסתיים, מריצים את הפקודה הזו ועוברים לאפליקציה שפרסתם:
    echo -e "\n\nOnce the build finishes, visit your live application:\n \
    "$( \
        gcloud run services list | \
        grep codelab-genai | \
        awk '/URL/{print $2}' | \
        head -1 \
    )" \n\n"

יכול להיות שיחלפו כמה דקות עד שה-build יסתיים והשינויים יופיעו.

אפשר לראות את ההיסטוריה של כל השינויים כאן: https://console.cloud.google.com/run/detail/us-central1/codelab-genai/revisions

13. (אופציונלי) בדיקת השימוש ב-Vertex AI

בדומה לשירותים אחרים של Google Cloud, אפשר לבצע ביקורת על פעולות ב-Vertex AI. יומני הביקורת עוזרים לענות על השאלות 'מי עשה מה, איפה ומתי?'. יומני ביקורת אדמיניסטרטיביים של Vertex AI מופעלים כברירת מחדל. כדי לבדוק בקשות ליצירת תוכן, צריך להפעיל יומני ביקורת של גישה לנתונים:

  1. במסוף Google Cloud, עוברים לדף Audit Logs:

    אם משתמשים בסרגל החיפוש כדי למצוא את הדף הזה, בוחרים בתוצאה שכותרת המשנה שלה היא IAM & Admin.
  2. מוודאים שהפרויקט הקיים ב-Google Cloud הוא הפרויקט שבו אתם יוצרים את האפליקציה של Cloud Run.
  3. בטבלה Data Access audit logs configuration, מוצאים את האפשרות Vertex AI API בעמודה Service.
  4. בכרטיסייה Log Types (סוגי יומנים), בוחרים את סוגי יומני הביקורת Data Access‏ Admin read ו-Data read.
  5. לוחצים על שמירה.

אחרי ההפעלה, תוכלו לראות יומני ביקורת לכל הפעלה של האפליקציה. כדי לראות את יומני הביקורת עם פרטי ההפעלה:

  1. חוזרים לאפליקציה שפרסתם ומרעננים את הדף כדי להפעיל את היומן.
  2. במסוף Google Cloud, נכנסים לדף Log Explorer:

  3. בחלון השאילתה מקלידים:
    LOG_ID("cloudaudit.googleapis.com%2Fdata_access")
protoPayload.serviceName="aiplatform.googleapis.com"
  4. לוחצים על Run query.

ביומני ביקורת מתועד השימוש ב-Vertex AI API, אבל אי אפשר לראות בהם נתונים שקשורים לעומסי עבודה, כמו הנחיות או פרטי תשובות.

14. (אופציונלי) ניקוי

ב-Cloud Run לא מחויבים כשלא משתמשים בשירות, אבל יכול להיות שתחויבו על אחסון קובץ האימג' של הקונטיינר ב-Artifact Registry. כדי להימנע מחיובים, אפשר למחוק את הפרויקט בענן. כשמוחקים פרויקט בענן, החיוב על כל המשאבים שנעשה בהם שימוש באותו פרויקט נפסק.

אם רוצים, אפשר למחוק את הפרויקט:

gcloud projects delete $GOOGLE_CLOUD_PROJECT

אפשר גם למחוק משאבים מיותרים מהדיסק של Cloud Shell. אתם יכולים:

  1. מוחקים את ספריית הפרויקט של ה-codelab: 
    rm -rf ~/codelab-genai
  2. מנקים חבילות Go שאולי כבר לא צריך: 
    cd ~
go clean -modcache
  3. אזהרה! אי אפשר לבטל את הפעולה הזו. אם רוצים למחוק את כל מה שיש ב-Cloud Shell כדי לפנות מקום, אפשר למחוק את כל ספריית הבית. חשוב לוודא שכל מה שרוצים לשמור נשמר במקום אחר. 
    sudo rm -rf $HOME

15. מזל טוב

במעבדה הזו כתבתם אפליקציית אינטרנט והגדרתם את Cloud Run כך שהאפליקציה תיפרס אוטומטית כשמתבצע שינוי בקוד המקור שלה. לאחר מכן שיניתם את הבקשה ופרסתם אותה שוב.

אם נהניתם מהמעבדה הזו, אתם יכולים לנסות אותה שוב בשפת תכנות או במסגרת אחרת:

אם אתם רוצים להשתתף במחקר על חוויית המשתמש (UX) כדי לעזור לנו לשפר את המוצרים שעבדתם איתם היום, אתם יכולים להירשם כאן.

ריכזנו כאן כמה אפשרויות להמשך הלמידה: