איך נראית תמונה בעיני מחשב
כל תמונה דיגיטלית בנויה מנקודות זעירות שנקראות פיקסלים. אם תגדילו מאוד תמונה בטלפון, תראו ריבועים קטנים של צבע. כל פיקסל נשמר במחשב כמספרים שמתארים את הצבע שלו — כמה אדום, כמה ירוק וכמה כחול יש בו. תמונה רגילה מכילה מיליוני פיקסלים, כלומר מיליוני מספרים.
לכן כשמחשב ״מסתכל״ על תמונה של חתול, הוא לא רואה חתול. הוא רואה טבלה ענקית של מספרים. המשימה של זיהוי תמונות היא למצוא בתוך המספרים האלה דפוסים שמתאימים לחתול — ולא לכלב, לכרית או לענן.
מקווים לצורות: איך הזיהוי נבנה
תוכנות זיהוי תמונות לומדות בשלבים. בשלב הראשון הן מוצאות דברים פשוטים: קווים, פינות ומקומות שבהם הצבע משתנה בבת אחת. בשלב הבא הן מחברות אותם לצורות — עיגול, משולש, פס. בשלבים הבאים הצורות מתחברות לחלקים, כמו אוזן, עין או גלגל, ובסוף לחפץ שלם.
את כל זה התוכנה לא מקבלת כהוראות. היא לומדת אותו מאלפי ואפילו מיליוני תמונות שבני אדם סימנו, כמו ״חתול״, ״כלב״ או ״אופניים״. בכל פעם שהיא טועה, המספרים הפנימיים שלה משתנים מעט, עד שהיא מצליחה לזהות טוב גם תמונות שלא ראתה. לשיטה הזאת, שמבוססת על רשתות של יחידות חישוב קטנות, קוראים ״רשת עצבית״ — שם שנבחר בהשראת תאי העצב במוח, אף שהיא עובדת אחרת לגמרי.
איפה זה עוזר לנו
זיהוי פנים בטלפון משווה את הפנים שמול המצלמה לפנים של הבעלים כדי לפתוח את המכשיר. אפליקציות גלריה יכולות לקבץ תמונות לפי אנשים, חיות או מקומות, כך שקל למצוא ״כל התמונות של הכלב שלנו״. יש אפליקציות שמצלמות טקסט בשלט או בספר והופכות אותו לטקסט שאפשר להעתיק או לתרגם.
גם מחוץ לטלפון זה שימושי: מצלמות בכניסה לחניון קוראות לוחיות רישוי, מערכות ברכב יכולות לזהות שלטים והולכי רגל, ובבתי חולים יש תוכנות שעוזרות לרופאים לשים לב לדברים בצילומים רפואיים. ההחלטה הסופית במקרים חשובים כאלה נשארת אצל בני אדם.
למה הזיהוי טועה
מחשבים מזהים תמונות טוב מאוד, אבל הם טועים בדרכים שאדם לא היה טועה בהן. תאורה חלשה, זווית מוזרה, חפץ שמסתיר חלק מהתמונה או משהו שלא הופיע מספיק בדוגמאות יכולים לבלבל אותם. מדענים הראו שלפעמים שינוי קטן מאוד בתמונה, שאדם בכלל לא שם לב אליו, גורם לתוכנה לזהות משהו אחר לגמרי.
בעיה חשובה נוספת היא דוגמאות לא מאוזנות. אם תוכנה לזיהוי פנים אומנה בעיקר על תמונות של קבוצה אחת של אנשים, היא עלולה לטעות יותר עם אנשים שנראים אחרת. לכן בודקים מערכות כאלה בקפידה על מגוון רחב של אנשים ומצבים.
תמונות ופרטיות
מכיוון שתוכנות יכולות לזהות פנים, תמונה שמעלים לרשת יכולה לגלות יותר ממה שנדמה: מי אתם, איך אתם נראים ולפעמים גם איפה צולמתם. לכן לפני שמעלים תמונה כדאי לחשוב, לא לשתף תמונות שמראות את הבית, את שם בית הספר או מדים עם סמל, ולא להעלות תמונות של חברים בלי לשאול אותם. אם מישהו ברשת מבקש מכם תמונה — מספרים למבוגר.
כדאי גם לדעת שבתוך קובץ תמונה נשמר לפעמים מידע נסתר, כמו תאריך הצילום ולפעמים גם המיקום שבו צולמה. בקשו מהורה לעזור לכם לבדוק בהגדרות המצלמה אם המיקום נשמר, ולכבות את זה אם אין בו צורך.