כמה תחומי רפואה מרכזיים, כמו ראייה, רדיולוגיה, פתולוגיה ודרמטולוגיה יהנו בקרוב משיפור משמעותי ברמת הדיוק של האיבחונים, בעקבות שילוב של בינה מלאכותית ומציאות רבודה במיקרוסקופים.
הטכנולוגיה החדשה של גוגל, משתמשת בשתי אלה, המורכבות על מיקרוסקופ אור, ויכולות לזהות ולסמן תאים סרטניים באופן מיידי, מבלי שהרופא יצטרך לאבחן אותם "ידנית".
גוגל הציגה את הפיתוחים החדשים בתחום במפגש השנתי של האיגוד האמריקני למחקרי הסרטן AACR, ופירסמה מאמר מדעי בנושא "השימוש במיקרוסקופ של מציאות רבודה לזיהוי אוטומטי בזמן אמת של סרטן". לדברי גוגל, השימוש בטכנולוגיה זו יאיץ את האימוץ של כלי למידה עמוקה אצל פתולוגים בעולם.
הפלטפורמה כוללת מיקרוסקופ עם תוספת ייחודית המאפשרת ניתוח תמונה בזמן אמת והצגת התוצאה של החישוב הממוכן ישירות לשדה הראייה של המאבחן. היתרון בטכנולוגיה הוא בכך שניתן ליישם אותה גם על מיקרוסקופים קיימים עם תאורה רגילה, הנמצאים היום בבתי חולים ובמרפאות.
לדברי מנהל צוות "מוח גוגל", קרייג מרמל (המוביל את תחום הבינה המלאכותית בחברה), והמנהל הטכני בחברה, מרטין סטומפ, תוצאות מחקרים שפורסו באחרונה מראים כי רשת נוירונים ממוחשבת מסוגלת לזהות גידולים סרטניים בשד ובבלוטות הלימפה ברמת דיוק השווה לזו של פתולוג מיומן. עם זאת, מכיוון שצפייה ברקמה אנושית באמצעות תאורה מיקרוסוקופית היא עדיין כלי האיבחון המרכזי לזיהוי מחלות, עדיין יש מחסום המונע את יישום הלמידה העמוקה בפתולוגיה.
לדברי גוגל, מעבדים ורכיבים של למידה עמוקה, כמו אלה שנבנו על TensorFlow , המסדת הראשית של החברה לבינה מלאכותית, יאפשרו להרכיב מגוון רחב של מודלים מוכנים של מצבים רפואיים, כך שניתן יהיה להשוות את הממצאים לבסיס הנתונים כדי למצוא מצבים חריגים המצריכים טיפול.
תוצאות הבדיקה מוצגות על גבי הצילום האנלוגי של הרקמה הנבדקת ומאפשרות לרופא הבודק לראות את החריגה בזמן אמת, כשהמערכת משדרת את הממצאים במהירות של 10 תמונות בשנייה, כך שאפשר לראות את התוצאות כבר במהלך הבדיקה עצמה.