ל-Sensitive Data Protection יש הרבה יכולות מתקדמות, אבל בהתאם לכמות המידע שאתם מבקשים לסרוק, העלויות יכולות להיות גבוהות מאוד. במאמר הזה מתוארות כמה שיטות שיעזרו לכם להוזיל את העלויות, וגם לוודא שאתם משתמשים ב-Sensitive Data Protection כדי לסרוק בדיוק את הנתונים שאתם רוצים.
בדיקה
כדי לעזור לכם לשלוט בעלויות הבדיקה, Google ממליצה על השיטות הבאות.
שימוש בדגימה כדי להגביל את מספר הבייטים שנבדקים
אם אתם סורקים טבלאות ב-BigQuery או קטגוריות של Cloud Storage, Sensitive Data Protection יכול לסרוק קבוצת משנה קטנה של מערך הנתונים. כך אפשר לקבל דגימה של תוצאות הסריקה בלי לשלם את העלויות הפוטנציאליות של סריקת מערך נתונים שלם.
אחרי שמוצאים דגימה עם מידע אישי רגיש, אפשר לתזמן סריקה שנייה ומקיפה יותר של קבוצת הנתונים הזו כדי לגלות את כל הממצאים.
מידע נוסף זמין במאמר בדיקת מאגרי נתונים ואחסון לאיתור מידע אישי רגיש, בקטע הגבלת כמות התוכן שנבדק.
לסרוק רק נתונים שהשתנו
אתם יכולים להורות ל-Sensitive Data Protection להימנע מסריקת נתונים שלא השתנו מאז הבדיקה האחרונה. הגדרת טווח זמן מאפשרת לכם לקבוע אילו נתונים לסרוק על סמך מועד השינוי האחרון של הנתונים.
אם אתם משתמשים בטריגרים של משימות, אתם יכולים להגדיר את הדגל enable_auto_population_of_timespan_config ב-TimespanConfig כדי לדלג באופן אוטומטי על תוכן שנסרק במהלך המשימה המתוזמנת האחרונה.
מידע נוסף זמין בקטע הגבלת הסריקות לתוכן חדש בלבד במאמר יצירה ותזמון של משימות בדיקה של Sensitive Data Protection.
הגבלת הסריקות של קבצים ב-Cloud Storage לקבצים רלוונטיים בלבד
אם תציינו את ההודעה CloudStorageRegexFileSet, תוכלו להשתמש במסננים של ביטויים רגולריים כדי לשלוט בצורה מדויקת יותר בקבצים או בתיקיות בקטגוריות שצריך לכלול או להחריג.
האפשרות הזו שימושית במצבים שבהם רוצים לדלג על סריקת קבצים שידוע שאין בהם מידע אישי רגיש, כמו גיבויים, קובצי TMP, תוכן סטטי מהאינטרנט וכו'.
גילוי
כדי לשלוט בעלויות של יצירת פרופיל הנתונים, מומלץ להשתמש בשיטות הבאות.
הרצת הערכה
לפני שמתחילים פעולה של יצירת פרופיל נתונים, כדאי להריץ קודם הערכה. הרצת הערכה מאפשרת לכם להבין את הגודל והצורה של הנתונים ב-BigQuery שצריך ליצור להם פרופיל. כל הערכה כוללת את מספר הטבלאות המשוער, גודל הנתונים ועלות יצירת הפרופיל. בנוסף, מוצגת תחזית של הגידול החודשי בנתונים ב-BigQuery.
למידע נוסף על הרצת הערכה, קראו את המאמרים הבאים:
- הערכת העלות של יצירת פרופיל נתונים לארגון או לתיקייה
- הערכת העלות של יצירת פרופיל נתונים לפרויקט יחיד
הוספת לוחות זמנים בהגדרות הסריקה
כדי לשלוט בעלות של יצירת פרופיל הנתונים, כדאי ליצור לוח זמנים שבו מגדירים מסננים ותנאים. הנה כמה דוגמאות לפעולות שאפשר לבצע:
- אם אתם לא צריכים ליצור פרופיל לטבלאות מסוימות, אתם יכולים לציין שאף פעם לא ייווצר פרופיל לטבלאות שתואמות למסננים שלכם.
- אם אתם רוצים ליצור פרופיל רק לטבלאות מסוימות, אתם יכולים להשבית את יצירת הפרופילים לכל הטבלאות, חוץ מאלה שתואמות למסנן שלכם.
- אם אתם רוצים ליצור פרופיל לטבלאות מסוימות רק פעם אחת, אתם יכולים לציין שאף פעם לא ייווצר פרופיל מחדש לטבלאות האלה.
- אם אתם לא צריכים ליצור פרופיל לטבלאות ישנות, אתם יכולים להגדיר תנאי ליצירת פרופיל רק לטבלאות שנוצרו אחרי תאריך מסוים.
- אם אתם לא צריכים ליצור פרופיל לטבלאות חדשות, אתם יכולים להגדיר תנאי ליצירת פרופיל לטבלאות רק כשהן מגיעות לגיל מסוים או למספר מינימלי של שורות.
הצגת העלויות באמצעות לוח בקרה ושליחת שאילתות ליומני הביקורת
כדי לבצע שינויים בשימוש ב-Sensitive Data Protection, אתם יכולים ליצור לוח בקרה שבו תוכלו לראות את נתוני החיוב. כדאי גם להעביר בסטרימינג את יומני הביקורת ל-Sensitive Data Protection כדי לנתח את דפוסי השימוש.
אתם יכולים לייצא את נתוני החיוב ל-BigQuery ולהציג אותם באופן חזותי בכלי כמו Data Studio. במדריך הצגה חזותית של החיוב ב- Google Cloud באמצעות BigQuery ו-Data Studio מוסבר איך יוצרים מרכז בקרה לחיוב.
אתם יכולים גם להעביר בסטרימינג את יומני הביקורת ל-BigQuery ולנתח את היומנים כדי לזהות דפוסי שימוש, כמו עלויות של שאילתות לפי משתמש.
הגדרה של התראות לגבי תקציב
הגדרת התראות לגבי התקציב כדי לעקוב אחרי ההוצאות ולראות אם הן מתקרבות לסכום מסוים. הגדרת התקציב לא מגבילה את השימוש ב-API, אלא רק מתריעה כשההוצאה מתקרבת לסכום שצוין.