צילום ולמידת מכונה
מצלמה בעלת יכולת למידה היא מכשיר מוקשח שמיועד לתנאי שטח, תצרוכת החשמל שלה מעטה והעלויות שלה נמוכות. המצלמה מסוגלת לבצע ראיית מחשב מקומית (on device), והמשתמש יכול לשלב בה מודלים של למידת מכונה ולהכשיר את המודלים לאיתור וזיהוי של אובייקטים מסוימים.
הגידול בתוכנות למידת מכונה ידידותיות למשתמש שזמינות בקוד פתוח בשילוב עם אפשרויות מחשוב זולות הודות למחשבים מסוג ראספברי פאי (סדרת מחשבי לוח יחיד בגודל כרטיס אשראי שפותחו בקרן ראספברי פאי בבריטניה, מתוך כוונה לקדם את לימוד ענף מדעי המחשב ונושאים קשורים אליהם בקרב תלמידים בבתי ספר, וכן בארצות שאינן מפותחות דיין מבחינה טכנולוגית וכלכלית - מתוך ויקיפדיה), והיכולת להטמיע מודלים של למידת מכונה על גבי מחשבים קטנים, צפויים להרחיב מאוד את הפריסה של מצלמות לומדות מסוג זה ולשנות מהותית את המרחב הציבורי.
המצלמה הלומדת מסוגלת לזהות אובייקטים, כלומר לזהות איזה סוג של אובייקט נתפס בעדשת המצלמה, והיא משתמשת במנגנון המובנה שלה, כלומר אין צורך בחיבור אינטרנטי. כאשר המצלמה מזהה אובייקטים ספציפיים, היא שולחת התרעה למפעיל. MobileNet הוא מודל למידת עומק על בסיס ארכיטקטורת רשת עצבית שפותח במיוחד לטלפונים ניידים ולמחשבים קטנים, והוא גם משמש את המודלים של למידת המכונה הכלולים במצלמה הלומדת.
האמצעים המוכרים כיום לזיהוי אובייקטים אינם נותנים מענה שלם למקרה שעלינו לזהות גורם מזיק לפני שהוא גורם נזק. ניקח לדוגמה מכרסם קטן וחובב ירקות, שנוהג לפקוד את ערוגת הסלרי בחצר הפרטית של הבית. אם נרצה למנוע ממנו לזלול את הירקות, יעמדו לרשותנו שלוש אפשרויות בלתי מספקות: גלאי תנועה, מצלמות אבטחה רגילה ומצלמה חכמה NEST.
גלאי תנועה נוטים לשלוח התרעות שווא רבות, שכן כל תנועה מעוררת אצלם תגובה, ולא רק התנועה של האובייקט הספציפי שעלול לגרום נזק. מצלמות אבטחה רגילות מצריכות מעקב רציף מול המוניטור, דבר שאינו סביר מבחינת הזמן, שלא לדבר על הקושי לעקוב אחר הנעשה בלילות. אפילו מצלמה חכמה מסוג NEST של גוגל תהיה מוגבלת באפשרויות שלה שכן היא זקוקה לחיבור וויי פיי כדי לשלוח את החומר המצולם לענן לשם עיבוד, ועל כן מוכרחים להתקינה בטווח הפעולה של הרשת. לעומת זה מצלמה לומדת מבוססת על פרוטוקול אלחוטי LoRa שמאפשר פעולה במקומות מרוחקים וללא חיבור לאינטרנט. חברת הטכנולוגיה IQT מציעה באתר שלה קבצי פיתוח חומרה בקוד פתוח, למי שמעוניין להכשיר מצלמה לומדת לפי צרכיו.