מהיר קדימה: Thad Starner מדבר זכוכית זכוכית, עוזר לכלבים לדבר

הייתי באוסטין, טקסס, בחודש שעבר ב- SXSW אינטראקטיב, שם הייתה לי הזדמנות לשבת עם מספר מנהלים בתחום הטכנולוגיה לסדרת הווידיאו שלי Fast Forward, כולל כריס בכרר, סמנכ"ל מוצר בפנדורה.

במהדורה זו של Fast Forward אנו מדברים עם ת'ד סטנרנר, פרופסור למחשוב בג'ורג'יה טק. ת'אד היה המוביל הטכני בפרויקט שהוביל את העולם בסופו של דבר לגוגל גלאס, אותה לבש במהלך הצ'אט שלנו. אבל הוא היה במרחב הלביש הרבה יותר מזה, ועבודתו מתמקדת בעצם הממשק האנושי-מכונה. עבודתו האחרונה כוללת בניית לבישת קריאת מחשבות לכלבים. עיין בצ'אט שלנו בסרטון והתמליל למטה.

דן קוסטה: זה SXSW עסוק. יש הרבה דיבורים על מציאות מוגברת. יש הרבה דיבורים על מציאות מדומה. לבישים הם עדיין נושא חם מאוד. כאשר רוב האנשים חושבים על לביש, הם חושבים על גוגל גלאס או על Fitbit שאתה לובש על פרק כף היד כדי לעקוב אחר צעדיך. כשאתה חושב על לבישות, מה אתה חושב?

ת'אד סטנרנר: ובכן, מבחינתי זה כל מחשב, כל מכשיר שחוק בגוף שעוזר לך בזמן שאתה מבצע משימה ראשונית אחרת. זה כל מחשב שחוק גוף שנועד להיות משני. זה עוזר לך למשימה ראשונית אחרת, כמו לענות על שאלות במהלך ראיון.

ההערות שלי מופיעות על ה- iPad mini שלי. אני צריך להמשיך להביט למטה כדי לקבל את התווים העדכניים ביותר וכדי לתאר את הכותרת שלך. יש לך את זה נכון בפני עצמו.

כן. כל שעלי לעשות הוא להביט למעלה, לתפוס כמה מילים ולחזור לשיחה. המערכות הישנות שלי, אני לא יודע אם התבוננת בכמה מהתמונות הישנות שלי, אבל למערכות הישנות שלי היה התצוגה כאן. לאמיתו של דבר, היה אחד משנת 1997 בו הוא אפילו היה בעדשה. זה נעשה על ידי חברה בשם Micro Optical באותה תקופה. זה למעשה מאפשר לך להיות די נוח עם בעל עוזר אינטליגנטי שיכול לעזור לך משנייה לשניה. זה באמת משנה את הביטחון העצמי שלך ומשנה את היכולת שלך לעשות דברים תוך כדי תנועה שאתה בדרך כלל יכול להיתקל בהם.

היית אחד מהצוות המקורי. נראה כאילו אתם כמעט התחרו לראות מי יכול לבנות את המערכת הלבישה הכי מגניבה, הכי מתוחכמת והפונקציונלית ביותר.

התחלתי לייצר את המערכת שלי בשנת 1990, אך נכשלתי שוב ושוב. רק בשנת 93 'הייתה לי סוף סוף מערכת שיכולתי ללבוש בחיי היומיום. באותה תקופה עבדתי בחברה בשם BBN. הם עזרו לייצר את הנתבים הראשונים לאינטרנט. אחרי שהנחתי את המכשיר הבנתי תוך חודש שזה לא רק מחקר טוב. זה היה אורח חיים טוב.

על זה עוסקים המכשירים האלה. זה יוצר לך אורח חיים רוצח. כמובן, אז היה לי חיבור לטלפון הסלולרי שנמדד ברגליים ולא בקצב סיביות. במילים אחרות, כמה רגליים יכולתי ללכת לפני ששיחת הטלפון הסלולרי האנלוגי נאלצתי לחייג שוב לחיבור?

בסופו של דבר חזרתי למעבדת המדיה של MIT והתחלתי לגייס יותר ויותר סטודנטים שהתעניינו בכך. הייתה לנו שיירה קטנה של אנשים שהפכו את המכשירים לצרכים הספציפיים שלהם והבנו איך לחיות כקהילה של סייבורגים. זה שינה את מה שחשבנו על הטכנולוגיה. אני אתן לך דוגמא: נניח שאתה נכנס כ- VIP לביקור במעבדה. נביא אדם אחד לדבר איתך על תחומי העניין שלך. בזמן שזה קורה, יהיו הודעות העוברות הלוך ושוב בין גלגלי העיניים של שאר חברי הקבוצה שמנסים לתכנן את היום שלך. "אה, הוא מאוד מתעניין בחושים מוגברים. אז אתה לוקח אותו לארוחת צהריים. אני צריך ללכת לפגישה עם הרופא בשלוש, אז אני אביא אותו בשתיים." אז יש לכם האנשים האלה שמקלדים על המקלדות שלהם ושולחים הודעות זה לזה בזמן שהשיחה מתנהלת בניסיון לתזמן יום בהתבסס על תחומי העניין שלכם. זה די מגיע לשלב הטלפתיה.

הרבה פעמים זה נשמע מאוד כמו Slack, שם יש לנו תקשורת בזמן אמת וקטעים שונים קורמים עור וגידים. אבל במקום להפוך אותו למסוף מבוסס ולחבר אותו למחשב, איפה שאתה צריך להיות מול המחשב הנייד או הטלפון שלך, זה בכל מקום שאתה נמצא. אתה יכול לעשות שני דברים בבת אחת. אתה יכול לנהל את השיחה הזו ולקבוע ארוחת צהריים.

ובכן, לא, אתה לא רוצה לעשות את זה. מנת המשכל שלך יורדת ב -40 נקודות כשאתה מנסה לעשות זאת. מה שאתה רוצה לעשות זה לגרום למחשב לתמוך בשיחה. לדוגמא, יש לנו מערכת שנקראת סוכן זיכרון שיש לה מעט מיקרופון מבטל רעש, מאזינה לצד שלי בשיחה וכל מה שאני אומר מתועתק ומכניס למאגר טקסטים. ואז המחשב מחפש ברציפות מיילים קודמים, מסמכים קודמים, שיחות קודמות שעשויים להתייחס לדברים שאנחנו מדברים עליהם. זה מביא תזכורות קטנות בתצוגה שלי לפרטים שאולי הייתי רוצה לכלול בשיחה זו. אז זה תומך בשיחה, מספק לי מידע.

היה לי סטודנט שדיבר איתי על זיהוי דיבור - איך אתה רוצה להשתמש בזיהוי דיבור עם לביש. ואמרתי, ובכן, אם אתה באמת רוצה לעשות את זה, אתה צריך - ואני הוצאתי את הפתקים שלי בזמן שאנחנו מנהלים את השיחה - אני אומר לו, אתה באמת צריך להסתכל על שיחתו של סטיב וויטקר בפילוחט משנת 1995. אני מאמין היו לו כמה פרטים נהדרים על כך עד 93 אחוז מהיום של האנשים מבלים בתקשורת אופורטוניסטית. סיפקתי לו את כל הפרטים האלה. התלמיד שלי פשוט הסתכל עליי כמו "איך אתה יודע את כל זה?" זה בסדר כאן. ידעתי מספיק כדי לחפש את סטיב וויטקר ואז המחשב סיפק לי את כל הפרטים. לקבל תמיכה כזו בזמן אמת זה ממש מדהים.

עשינו את זה בעבר במקום בו העברתי עדות באקדמיה הלאומית למדעים בוושינגטון הבירה על הגדלת בני אדם. הראיתי להם מה אני עושה. היו לי את הסטודנטים שלי, סטודנטים לתארים אקדמיים שלי בג'ורג'יה טק - אז הייתי בבירה, התלמידים שלי בג'ורג'יה טק האזינו וגם הראיתי לכולם שיש לי פידבק חי לג'ורג'יה טק. ערמתי גם את תווי המצגת וגם את הערות התלמידים שלי שהם הציעו בזמן אמת.

אז בזמן שהעידתי, הם אמרו, "אה, אתה צריך לדבר על זה", והם היו זורקים אותי כתובת אתר, "או שאתה צריך לדבר על זה" וזרוק דברים, לספק מידע אחר. הפאנל שראיין אותי, הם התחילו לשאול שאלות של התלמידים, ולא ממני.

הייתי פשוט איש הפנים של כל הידע הזה על קונסורציום האנשים הזה במעבדה שיכול היה לענות במהירות על שאלות מכיוון שהם מומחים בתחום. אבל הם יכלו לחפש מידע הרבה יותר מהר ממה שיכולתי. הם פשוט השתמשו בי כדי לדבר. הקולקטיבים האינטלקטואליים האלה, היכולת הזו להגיע למומחים, היכולת לעזור לכם בהתראה של רגע, הם דבר די חזק. מצד שני, אם אתה מנסה לומר "קרא דוא"ל" תוך כדי שיחה, אתה נשמע כמו אידיוט. בני אדם אינם יכולים לבצע ריבוי משימות טוב במיוחד.

זה לא ריבוי משימות. זה ממש הגדלה.

ימין.

זה נראה כמו האופי של להיות חכם, אופי הידע, אופי האינטליגנציה השתנה. היית צריך לשנן את כל הדברים האלה כדי לנהל איתם שיחה מבלי להתייחס לרשימות שלך, וזו כבר לא הפרדיגמה. אתה רק צריך לדעת אילו שאלות לשאול ולהיות מחובר למערכת שיכולה לספק לך את התשובות האלה.

יש כמות מסוימת של מידע שאתה צריך להפנים כדי שתוכל לחפש אותו במהירות ולהיות מסוגל לחשוב באזורים אלה, אבל עבור הרבה דברים אחרים, אתה פשוט רוצה את הידע העולמי בהישג ידך ותביא אותו למסור אותו כשאתה צריך את זה. רעיון זה של אחזור מידע בדיוק בזמן הוא חזק מאוד. זה מה שלדעתי יקרה בחמש או עשר השנים הבאות. עומדים לרשותנו העוזרים החכמים האלה שיכולים לעזור לנו על בסיס שנייה אחר שנייה.

זה אחד הדברים הגדולים במחשבים לבישים. מה שלדעתי מגדיר מחשבים לבישים זה שזה משהו שהמחשב הופך לחלק מאיתנו. בטח השתמשת במשקפת לפני כן? זה משהו שאתה מרים. אתה מסתכל על משהו מרחוק. אתה מתאים את המיקוד. הם די מפציצים, נכון? אתה צריך להחזיק אותם בדיוק כמו שצריך ולהתאים את המיקוד בכל פעם שאתה משנה מנושא לנושא. אתה מניח אותם, למעלה ולמטה. אתה לא חושב על המשקפת שלך כחלק ממך. אבל את המשקפיים שלך, אתה שם אותם, ואתה משתמש בהם כל היום. אתה רואה דרכם. אתה לא חושב עליהם. אתה פשוט משתמש בהם. אז מה שיש לנו כרגע עם רוב המכשירים האלה, רוב המחשבים האלה, הסמארטפונים שלנו, הטאבלטים שלנו; הם לא חלק מאיתנו. הם אחרים.

ברגע שמקרבים את המכשירים לגוף, פתאום הטכנולוגיה יוצאת מהדרך. זה הפרדוקס של מחשבים לבישים. בכך שהיא מקרבת את הטכנולוגיה לגוף היא מוציאה אותה מהדרך. אני חושב שכאן נלך בעתיד. אנו הולכים לראות יותר ויותר דרכים לטכנולוגיה לסייע לנו, להפוך אותנו לחזקים יותר, עצמאיים יותר, בטוחים יותר ומודעים יותר על בסיס שבריר שנייה אחר שבריר שנייה. אני רוצה לראות את העוזרים החכמים האלה עוברים ממשהו שאתה מדבר איתו; למשהו שהוא חלק ממך. משהו שמסייע לך מרגע לרגע לרגע מאוד.

אני חושב שהמושג של התנסות בעולם באמצעות הטכנולוגיה לעומת שימוש פשוט בטכנולוגיה הוא הבדל מכריע.

זו החוויה שעבדתי בה. הרבה מזה הוא פשוט מהירות הגישה. לארי פייג 'אמר לי, "הכל קיצור הזמן שבין כוונה לפעולה." הייתי המומה. ניסיתי לנסח את החשיבות של מהירות הגישה של מכשיר. הנה הוא עשה את זה בביטוי אחד. הזמן שבין כוונה לפעולה הוא קריטי.

אחת ההדגמות שאני עושה זה שכולם יסיימו שתי משימות. יש לי אותם להרים את היד אחרי שהם יסיימו כל משימה. אז אני אגיד משהו כמו "אוקיי, מה השעה?" אני ארים את ידי כי הזמן שלי נמצא בקדמת המסך כרגע, והקהל שלי גם מסיים את המשימה מהר מאוד. לאחר מכן, המשימה השנייה שעלי לעשות עליהם היא לענות על שאלה כמו "איפה הר פינאטובו?" אני יכול להרים את ידי מכיוון ששאלת השאלה השיגה לי את התשובה על המסך ברגע זה. זה בפיליפינים, וכאמור, יש לי מפה קטנה של המיקום שלה כרגע על המסך שלי.

כל כך קשה לקהל שלי להגיע למידע הזה במהירות שהם אפילו לא טורחים לעשות את זה. אני מדבר על קהלים טכניים כמו פארק זירוקס או ג'ורג'יה טק או סטנפורד. אז הנה אני, בקהל מלא חנונים, עושה איתם ניסוי ורובם אפילו לא טורחים לנסות להגיע למידע הזה מכיוון שהם יודעים שזה ייקח יותר מדי זמן.

מה אם נוכל לשנות את זה ממשהו שלוקח יותר מדי זמן למשהו קל כמו לבדוק את הזמן. פתאום אתה הופך אנשים להרבה יותר חזקים. אם אתה יכול להפחית את זמן הכוונה לפעולה תוך שתי שניות או פחות, פתאום אנשים יעשו את זה בלי לחשוב על זה. זה חלק מהם. ברגע שזה מעבר לשתי שניות, ה- להשתמש יורד באופן אקספוננציאלי ואנשים חושבים עליו כ"אחר ".

לפני שהתחלנו להקליט דיברנו על קדושים לפטרונים. וניסינו להבין ממה סטניסלוס הקדוש הוא קדוש הפטרון. יש לי טאבלט מחובר לאינטרנט ביד. רציתי את המידע. אבל לא טרחתי לפתוח את גוגל, להקליד אותה ולחפש אותה כי לא היה לי כל כך אכפת. אבל פשוט על ידי שיחה זו, זה צץ על המסך שלך.

כלומר יש לי את זה כאן. אני רק שאלתי. זה מפורש יותר. אמרתי בפשטות, "סנט סטניסלוס היה הקדוש של הפטרון?" - התשובה היא פולין - ואז צצה כמה שניות אחר כך. זה די חזק. זה מצמצם את סוגיית הרתיעה לנסות למצוא מידע עליו בעולם. זה נהדר עבורי כפרופסור כי זה גורם לי להראות יותר אינטליגנטית ממני.

זה משהו שקרה כשהייתי סטודנט ב- MIT. לקחתי שיעור מג'סטין קסל, וזה היה בערך מחווה . במהלך סקירה לפני הבחינה הסופית היא שאלה "מה הייתה החשיבות של דיקסיס?" היו לי את כל תווי הכיתה במחשב שלי, ויכולתי לגשת אליו במהירות רבה באמצעות המקלדת הזו. זה היה לפני שההכרה בדיבור השתפרה מאוד. מה שהייתי עושה זה לבנות את המשפטים שלי כך שאוכל למצוא את התשובה בזמן לסיים משפט.

אז הרמתי את ידי כדי לענות על השאלה. היא קראה לי. אמרתי, "בתחילת השיעור, אמרנו שהחשיבות של דהיקסיס היא אה, אה, אה, אממ, " כי טעיתי. הנחתי את המקלדת. נכנסתי למצב הלא נכון של E-Mac. אמרתי, "אני אצטרך לחזור אליך. הגעתי למצב הלא נכון."

כל הכיתה נפרדה מצחוק. הם בילו איתי את כל הזמן הזה ולא הבינו שאני עושה זאת על בסיס יומי. פרופסור שלקח אתי את הכיתה התכופף ואמר, "עכשיו אני רוצה אחד. אתה עושה את זה כל הזמן, לא? אתה יכול להביא מידע כל כך מהר. זה נראה כמו החלק שלך בך." כן, זו בדיוק הסיבה שאני עושה את זה.

זה היה מדהים שהפרופסורים והסטודנטים האלה שעבדתי איתם במשך שנים פשוט מעולם לא הבינו כמה עזרה זה נותן לי המכשיר. בפעם הראשונה שהרציתי שיחה מקצועית, עלה אחד התלמידים הבכירים ואמר לי, "זה היה השיחה הכי טובה ששמעתי שאי פעם נשא, אבל למה לבשת את המחשב שלך?"

לא היה לה מושג שלמרות שלרוב האנשים יש כרטיסי אינדקס 3 על 5, יש לי את זה כאן. השימוש בסוג כזה הפך אותי לדובר טוב יותר. באותה תקופה זה היה פשוט מפריע לאנשים שאתה יכול להשתמש במכונה שלך בדרך זו.

אז בואו נעשה ציר קטן. דיברנו הרבה על לבישים אנושיים. אתה עובד עם כלבים עכשיו. הסבירו את העבודה שאתם עושים.

הפרויקט נקרא FIDO, הקלה על אינטראקציות לכלבים עם עיסוקים. כן, זה ראשי תיבות, אבל זה חמוד. הרעיון הוא שיש כל כלבי העבודה האלה בחוץ. כלבים שהם כלבי התראה אלרגית או כלבי התרעה רפואיים, חיפוש והצלה, איתור פצצות, בדיקת TSA למניעת הריון או לחקלאות. הכלבים האלה עושים הרבה עבודות, אבל הם מתקשים מאוד לתקשר מה הם חשים ומה הם חושבים למטפלים שלהם.

היה לנו אחד המאמנים שלנו לפני שנתיים לערוך הפגנה. היא סוכרתית ואחד האנשים האלה שיכול פשוט להתעלף מחוסר ברמת הסוכר בדם. יש לה כלב שמאומן להגיב למצב עירני זה. הכלב הולך ומוצא את האדם הקרוב, תופס אותם ומנסה להביא אותם אליה כי היא עומדת להתעלף בקרוב.

לפני שהיא עומדת להתעלף, זה הולך ומקבל עזרה?

כן. זה באמת יכול לחוש כי שינוי בכימיה של הגוף מ ריח ולקבל עזרה. זה קרה בשער האבטחה בשדה התעופה באטלנטה, והכלב עשה את מה שאומן לעשות - עלה על קצין ביטחון של ה- TSA. קצין הביטחון פשוט חשב שהכלב ידידותי, אבל המאמן שלנו אמר, "אני הולך להתעלף בעוד שנייה. אני חייב לשבת." אתה יכול לדמיין שזה יהיה הרבה יותר טוב אם הכלב היה מסוגל לדבר.

אז, הכנו אפוד שהכלב הולך ומעביר התראות על ידי משיכת האפוד. כאשר החיישן מופעל ואומר "בבקשה עקוב אחריי. בעלי זקוק לעזרתך." כמובן, בפעם הראשונה שאתה בוחן את זה, אנשים חושבים שמנקים אותם, או שהם פשוט לא מאמינים בזה. האם הכלב הזה פשוט דיבר איתי?

זה הקלטת שמע של קול אנושי שאומר למעשה את המשפט הזה?

כן. עלינו לאמן את הכלב לעשות זאת פעמיים כי הפעם הראשונה בה בני האדם לא מאמינים בזה.

האם בפעם השנייה, הכלב אומר, "לא, באמת! אני מתכוון לזה הפעם?"

לא, פשוט נצטרך לחזור על אותו הדבר ונראה שזה עובד. אנחנו עדיין בודקים את זה. אנחנו צריכים לבדוק את זה על כמה אנשים בלתי מעורערים בג'ורג'יה טק ולראות מה הם אומרים. אם זה קורה לך, אתה יודע שזה חלק מהבדיקה שלנו. נלך לאחד מהכלבים העוזרים שלנו באילוף לכאן כדי לבצע את ההפגנה הזו.

הכלב הזה צריך ללמוד טריקים חדשים אחר הצהריים אחר הצהריים?

למען האמת, בתחילה חשבנו שאנחנו עומדים בבעיות בהבאת הכלב ל- SXSW ולכן אנו הולכים לעשות אימונים רבים היום בכדי שנוכל להשוויץ מה אנו רוצים.

הרעיון שלכלבים אלה יש את כל התפיסות האלה שהם יכולים לבטא לנו הוא סוג חדש. הייתה לנו לחיצה מסוימת על אפוד ה- FIDO שלנו, וקיבלנו טלפון ממשטרת ג'ורג'יה טק ושאלה אם ניתן להשתמש באפודים לכלבים שעושים רחרוח פצצות. הופתענו לגלות שיש להם כלבים מרחרחים פצצות, הסברנו שהכלבים משמשים לסריקת מקומות הספורט לפני שאנשים נכנסים. "אנחנו כמו, " אה. ספר לנו על רחרוח פצצה. "אנו מעוניינים ללמוד 'יותר .

מסתבר שהכלבים מאומנים לדברים כמו אבקת אקדח ו- C4 אבל גם דברים כמו פצצות חמצן, ש… ריח שונה מאוד. גם פצצות חמצן אינן יציבות מאוד. אם אתה מקבל אחד כזה, אתה לא רוצה את הכלב או המטפל בשום מקום בקרבתו. אבק שריפה או C4 יציבים מאוד וזה לא בעיה. מה שמשטרת הטכנולוגיה בג'ורג'יה רצתה לעשות זה שהכלבים יהיו עם האפוד שלהם עם שני צעצועי משיכה קטנים. אם הכלב מריח אבקת שריפה , הם מושכים את אבקת האקדח אחד וזה מיקומים גיאוגרפיים אותם וזה מראה את מיקום הכלב בתצוגת הקצין היכן הכלב. ואז הם יודעים שיש כאן פצצה אבל זו פצצה יציבה והם יכולים פשוט לפקוד על הכלב להישאר שם ופשוט לנבוח בפצצה עד שיוכלו למצוא אותה במהירות.

אם הכלב מושך בצד השני של האפוד, זו פצצת חמצן. אנו יודעים שזה לא יציב ואז אתה ממש זוכר את הכלב להוציא אותו מהדרך ואז אתה שולח סוג אחר של יחידת סילוק פצצות.

אותו דבר עם חיפוש והצלה… וכלבי החקלאות של TSA בגלל מה שהם מריחים בכבודה של אנשים. אתה יכול ואפילו לעשות זאת לבדיקת שדות החקלאים. יש כמה דברים כמו ריקבון בטטה שאי אפשר לדעת מבחוץ שיש בעיה. זה דבר חדש בצפון קרוליינה שרק פוגע בגידולים שלהם. הכלבים יכולים להריח את זה. אתה יכול לשלוח את הכלבים ולקבל אותם כדי שיוכלו לחפש בשדות עד שהם ימצאו אותם. אם הם מוצאים את זה, הם מתריעים. אתה רואה איפה הם. אתה תלך לשם. אתה יכול לראות איפה הם נמצאים, לחפור את השורשים, לאשר שזה בעצם נרקב ואז אתה נפטר מהחלק הזה של השדה ומתחיל שוב.

מסתבר שברגע שאנחנו מתחילים להשתמש בכלבים האלה לביצוע הדברים האלה, יותר אנשים יוצאים מעץ העץ, מתגלים יישומים חדשים. כלבים שמרחרחים כמהין למשל.

זה מה שחשבתי.

זה אחד האהובים עלי. יש לנו חובב שרוצה לשחק איתנו עכשיו על אותו אחד.

האם אוכל לשאול את הכלב לסוף השבוע?

בדיוק.

העניין שאני אוהב בזה הוא שאתה נותן לבני אדם גישה לתפיסות של הכלב, אשר במובנים רבים עדיפים על בני אדם, ופשוט משתמשת בטכנולוגיה כדי לאפשר להם לתקשר את התפיסות האלה.

חוש הריח שלהם טוב פי מאה מכל מה שאנחנו עושים אלקטרונית. יש להם חוש שמיעה טוב מאוד. הראייה שלהם לא טובה כמו שלנו, אבל הם תופסים אחרת. אם אנו רק מאפשרים להם לתקשר טוב יותר בפועל, אנו יכולים ללמוד הרבה יותר על מה הם מסוגלים לעשות וכיצד הם עשויים לבצע את עבודתם טוב יותר. כמובן שהכלבים חושבים שזה כיף גדול. כל זה משחק עבורם.

בואו נעבור למשוב haptic ולמידה haptic וכמה מערכות שעשיתם שם. האם זה נכון שאתה יכול ללמד מישהו לנגן בפסנתר מבלי לנגן בפועל פסנתר ?

זה די מטורף. אנו קוראים לדבר זה למידה משוב פאסיבי פסיבי. זו אחת מעצמות העל שמחשבים לבישים יכולים להעניק לך. הרעיון שהוא יכול ללמד אותך משימה מכנית מורכבת או משימה ידנית מורכבת ללא תשומת לבך. זה די מפתיע. עשינו זאת עם פסנתר מספר פעמים.

נניח שאתה רוצה ללמוד את "אודה לשמחה" של בטהובן. זה אחד מהפשוטים שבהם אנו משתמשים להפגנות שלנו. לבשנו כפפה, ולכפפה יש מעט מנועי רטט על כל אצבע. הנחת אוזניות בלוטות 'וזה פשוט מנגן את השיר שוב ושוב בזמן שאתה ואני מדברים או שאתה קורא דוא"ל, או שאתה נוהג, מה שלא יהיה. אתה מתעלם מזה והוא פשוט מנגן את השיר שוב ושוב. כאשר כל תו מושמע, הוא מקיש על האצבע השייכת לאותה תו. אחרי 20 דקות יש לך את הסטנזה הראשונה של "אודה לשמחה".

20 הדקות הבאות, יש לך את השנייה. תוך כשעה ושלושים דקות של פשוט ההקשה הזו, נאלצנו לפרק את זה בחלקים הנכונים, אבל אחרי כשעה ושלושים דקות יש לך את כל השיר. אם מניחים את האצבעות, ואז מניחים את היד על הפסנתר, אנו מסמנים היכן התו הראשון נובע אחרת לא הייתם יודעים, והיד שלכם הופכת לאחוזה והיא פשוט מנגנת את השיר אותה. זה אחד הדברים האלה שאם אתה מתמקד בזה יותר מדי אתה לא יכול לעשות את זה אבל אם אני מסיח את דעתך אתה יכול.

אתה מנגן את השיר, ואני מתאר לעצמי שאתה מנגן את הצלילים בראש שלך כדי לנסות ולהכות באותם תווים.

עשינו זאת עם צ'אד מאיירס ב- CNN פעם אחת. אין לו כישרון מוזיקלי. הנחנו אותו על ידו בזמן שהוא עקב אחר הוריקן במפרץ, ואז הוציא אותו בשידור חי ב- CNN. אפשר היה לראות אותו מפחד שלב זה. הבחור הזה נמצא לפני 20 מיליון איש בכל יום, ובכל זאת הוא מפחיד במה כשהוא מניח את ידו על הפסנתר. אפשר היה לראות שהוא אפילו לא ידע מה השיר. הוא פשוט מתחיל להקיש על זה. הוא לא יודע מה זה היה הולך להיות, אבל כשהוא ממשיך הוא מזהה את המנגינה. פתאום הקצב שלו משתפר ואז הוא חוזר עליו. הוא משתפר ומשתפר בזה ככל שהוא הולך. אתה יכול לראות את התגלות "הו המילה שלי" על פניו. לאחר שעשיתי את זה לעצמי כמה פעמים, אני אגיד שזה דבר מאוד מוזר.

הדבר שאנחנו מנסים לעשות עכשיו הוא דמות ברור כמה רחוק נוכל ללכת עם זה. התחלנו עם תו בודד, מלודיות ביד אחת. ואז, התלמיד שלי, קייטלין, הבין איך לעשות אקורדים. עכשיו היצירה הסטנדרטית שלנו היא המצעד הטורקי של מוצרט. עבור אנשים שהם מוזיקאים אתה יודע ששתי ידיים שונות מאוד, ומקצבים שונים מאוד עליהן. זה קטע מורכב מספיק שלימודו הוא לא טריוויאלי. אנחנו לוקחים טירונים שלמים, זורקים את הכפפות על הידיים ואחרי כמה פגישות הם מנגנים את היצירה המורכבת הזו. אני לא אומר שהם מוזיקאים נהדרים אבל אני אומר שהם יודעים את רצף התווים. התענייננו לאחר מכן במה עוד נוכל ללמד.

אחד הדברים שהתחלנו להסתכל עליהם היה הקלדה. מכיוון שגילינו כיצד לעשות אקורדים, ניסינו לעשות ברייל. ברייל כרוך בשש האצבעות האלה, כך שזו הנקודות, או שמונה אצבעות אלה אם אתה עושה את הצורה המורחבת שלה. רוב האנשים לא טורחים ללמוד ברייל ככל שהם מתבגרים ככל שהם מאבדים את החזון שלהם. זה גם משבר אמיתי עם סטודנטים. בערך 40 אחוז מהם לעולם לא לומדים ברייל לפחות לא מספיק מספיק כדי לתקשר עם השימוש בו. לימוד ברייל עבור סטודנט שעיוור הוא אחד האינדיקטורים הגדולים להתקדמות חינוכית עתידית כמו גם להצלחה כלכלית. מורים ברייל אלה המלמדים ברייל הם נודדים, מרגשים. הם פשוט עוברים מבית ספר לבית ספר כי אין מספיק דרישה להחזיק מורה קבוע בבית ספר מסוים.

התחלנו להסתכל על הכפפות שיכולות ללמד אנשים ברייל באופן פסיבי. התשובה הייתה כן. בעוד ארבע שעות אני יכול לתת לך אוזניות ואת הכפפות האלה. בזמן שאתה עושה ואתה יכול לעשות כל מה שתרצה, וזה פשוט חוזר אליך "השועל החום המהיר קופץ מעל הכלב העצלן." זה עושה כל אות בכל פעם ואתה מרגיש את המכתב על האצבעות שלך. אחרי כארבע שעות של זה אני אומר "מה האות G", ואתה יודע שזה זה. מה האות א ', אתה יודע שזה זה. לא רק אתה יכול להקליד אותו, אלא שאתה יכול להרגיש אותו. אתה מעביר את האצבע שלך מעל פיפס ולדעת להקליד את המכתב. אתה הולך, "אוקיי, עכשיו איך הייתי מקליד את זה? אוקיי, אז זה הג '." להפתעתנו, זה פשוט עובד.

מה אתה חושב שקורה במוח כדי לאפשר חיבור מסוג זה? כי זה לא מודע וזה גם לא סתם אינטלקטואלי? זה משהו אחר בין הנפש לגוף.

יש הרבה שאני באמת לא יודע. אבל יש ספקולציות של עמית שלי שמאמינים שמה שקורה הוא שתחושת המישוש היא תחושה אנושית אבולוציונית הרבה יותר קדומה שאנשים קיבלו מבחינה אבולוציונית. כמעט לכל בעלי החיים יש תחושת מגע. נראה שזה מתאים לרעיון שמגע הוא חלק מחלק מאוד מתפקד של המוח שלנו, דברים מסוג מאוד לטאה במוח לטאה. אולי החשיפה שבאמת מתנה אותנו להכיר בדפוסים האלה. בעוד שאתה מנסה ללמוד משהו כמו שפה כשאתה ישן, זה לא עובד ממש טוב כי שמע הוא דבר מוחי גבוה בהרבה. זו הסיבה שלא ציפינו שהניסוי בנושא הזנת טקסט יעבוד. מוסיקה היא חומר מוחי נמוך מאוד, ואילו מערכות שפה נחשבות לתפקוד מוחי גבוה יותר.

זה לא קשור לשפה.

ימין. העובדה שלמידת הזנת טקסט עבדה הייתה לנו הפתעה. אנחנו לא ממש בטוחים עד כמה רחוק נוכל להגיע. האם נוכל ללמד שפת סימנים? האם נוכל ללמד ריקוד? האם אנו יכולים לעזור למומחים להתייעל? אחד הדברים שאנחנו רוצים לעשות זה להשיג כמה כדורי בייסבול ולהקליט את תנועות הזרוע שלהם ולראות אם אנחנו יכולים לשחק את זה בחזרה בזמן ההשבתה שלהם ולהגדיל את העקביות שלהם.

אין לי מושג אם אחד הדברים האלה יעבוד. אולם דבר אחד שניסינו היה קוד מורס. ברייל הוא רק רצף מפתח. קוד מורס הוא קצב.

גילינו שאנחנו יכולים להשתמש במתמר הגיוס על זכוכית. כדי להקיש על הצד של הראש. עכשיו זה בדרך כלל עובד על ידי רטט הגולגולת ושליחת הצליל ישירות לשבלול שלך, תוך עקיפת עור התוף. זו הסיבה שאני יכול ללבוש את זה ולקבל התראות קטנות ולא שיהיה לי שום דבר שחוסם את אוזני, אבל אם הלהיט שלך עם 15 הרץ זה מרגיש כמו ברז.

התחלנו באימוני סגנון "שועל חום מהיר קופץ מעל הכלב העצלן", אבל עכשיו אנחנו פשוט מקישים על הראש שלך בקוד מורס ומאמינים או לא בעוד 4 שעות - זה נראה כמו זמן הקסם של האלף-בית -רוב המשתתפים שלנו ירדו לשגיאה 0… כשאנחנו מבקשים מהם להקליד ש. אנחנו יכולים להראות להם מקפים ונקודות על נייר והם יכולים לרשום את האותיות עבורו. אנו יכולים להקיש שוב על צד הראש והם יכולים לדעת איזו הודעה אנו שולחים.

אז ארבע שעות ואנחנו נותנים להם לעשות זאת במהלך משחק וידאו. אז אנו דואגים להסיח את דעתם בעזרת משחק וידאו. משחקי וידאו מתגלים כעל הסחת הדעת היעילה ביותר.

ידענו זאת הרבה מאוד זמן.

זה נכון. אנו מנסים בחינות כניסה לתארים מתקדמים. תן להם בעיות הבנת הנקרא או בעיות במתמטיקה. מסתבר שהיחיד שמסיח את דעתו הוא משחקי וידאו.

זה דבר מעניין. דיברנו עם פרגי כרום מוקדם יותר היום על אודיו ושילוב חושים. יש הרבה AR בתכנית הזו; יש הרבה מציאות מדומה. כמה מהדברים המעניינים ביותר קורים לא רק במובן אחד, אלא באוסף חושים. אז, בשיחה הזו דיברנו על המרחב הויזואלי, דיברנו על מרחב האודיו וגם על הפיזי. התחושה המישושית. כשמרכיבים את כל הדברים האלה זה נראה כאילו דברים מעניינים באמת מתחילים לקרות.

זה כל העניין. זה לא רק הסינתזה או החושים. זו גם העובדה שזה משהו שאתה יכול ללבוש איתך לאורך כל היום שלך. ברגע שיש לך סוג כזה של קרבה לגוף, אתה יכול לעשות כל מיני דברים עם הגוף שלא חשבנו עליו קודם.

לימוד הקשה על מישוש פסיבי הוא דבר אחד, ודבר נוסף שעלו היה שיקום הקשה על מישוש פסיבי. זו גם הייתה הפתעה לא קטנה עבורנו. היה לנו בית פתוח שהדגים את דבר הנגינה שלנו בפסנתר ואחת הקולגות שלנו במרכז הרועה - שעושה הרבה עבודה על פגיעה בחוט השדרה - היא הגיעה ואמרה, "היי, אני רוצה את זה למטופלים שלי." לא יכולתי להבין מדוע היא תרצה שאנשים עם טטראפליגיה יתאמנו בפסנתר. היא אמרה, "לא אתה לא מבין, טטרפוליה פירושה רק שכל ארבעת הגפיים מושפעות. המטופלים שלי עם פגיעה בעמוד השדרה עדיין יש תחושות וקצת מיומנות. אני בטוח אם נשים עליהם את הכפפות שלך ואימנו אותם לנגן בפסנתר, שהם באמת יחזרו על תחושה מסוימת; שפרו את התחושה והמיומנות שלהם."

היא צדקה. לימדנו כשמונה שירים שונים במשך שמונה שבועות. למשתתפים הכפפות היו שעתיים ביום, חמישה ימים בשבוע ואז היו שיעורי פסנתר שלוש פעמים בשבוע. בסוף שמונת השבועות המשתתפים שהיו להם כפפות עשו הרבה יותר טוב. היו להם שיפורים משמעותיים בתחושת היד והמיומנות שלהם בהשוואה לאנשים שרק עברו שיעורי פסנתר רגילים.

אז הרעיון הזה שאנחנו יכולים לעשות שיקום, שנוכל להערים על המוח שלך להקדיש יותר ויותר משאבים כדי להסביר את האותות האלה שיוצאים מכף ידך הוא פשוט מדהים. אני לא יודע אם אי פעם הייתה לך רגל שבורה או האם הורה שעבר ניתוח בירך, אבל השיקום לוקח הרבה זמן. זה מאוד משעמם, וקשה לעשות את זה כיף. קשה להשיג תאימות. אם אני יכול פשוט לשים כפפה ולגרום לשיקום, ואגב, אנו הולכים לתת לך את הכוח העל הזה שתלמד לנגן בפסנתר בסוף זה, זה סוג של מוטיבציה הרבה אנשים.

זה מה שאנחנו עושים כרגע. אנחנו עושים את זה ברגע זה. אנו מנסים לבדוק אם זה עשוי לעזור בהחלמה של תחושת היד לאחר שבץ. אם יתברר שזה עובד, יש מיליון אנשים בשנה שאנחנו עשויים לעזור להם. זה מאוד ספקולטיבי. אין לנו מושג אם זה יעבוד או לא, אבל נראה.

בסדר. בואו נגיע לכמה שאלות שאני שואל את כל האורחים שלי. אילו מגמות טכנולוגיות אתה רואה כרגע שהכי מעסיק אותך? מה מעלה אותך בלילה?

מעט מאוד מעלה אותי בלילה. אני ישן די טוב.

יש לך שלוש עבודות.

יש לי שלוש עבודות. אין לי זמן לישון. הרבה דאגות של אנשים מהטכנולוגיה זה מה שאתה רואה בעיתונות. המציאות היא הרבה יותר משעממת ממה שהרבה פרשנים יובילו אותך להאמין או שהסרטים יעשו זאת. אני מניח שהדבר שאני הכי דואג לו הוא תא ההד שמדיה המדיה החברתית יכולה לגרום. אנשים יכולים להאמין לפסאודו-מדע. ניתן להוביל אנשים להאמין לדברים שפשוט אינם נכונים. אנשים מפרשים על העבודה שלי, ואני כאילו, זה לא בסדר.

אני עושה הרבה עבודה עם הקהילה החירשת. מסתבר שלימוד שפת הסימנים של ילדכם יעזור להם לרכוש מיומנויות שפה מהר יותר. במשך הזמן הארוך ביותר אנשים האמינו שאם תלמדו את ילדיכם שפת סימנים, זה יעכב את תחילת הדיבור הרגיל. זה בדיוק לא נכון. נראה כי לימוד שפת הסימנים מלידה עוזר בשיפור מיומנויות השפה של כולם.

רוב הילדים לא יכולים באמת ליצור את המילים בצורה קוהרנטית עד שהם יהיו בני 12 חודשים. הם יכולים להתחיל ליצור את הסימנים, אתה יודע דברים כמו חלב או אוכל. הם יכולים לעשות זאת בששה חודשים. הבאת ילדים להיות מסוגלים לבטא את עצמם זה מה שנותן להם טווח קצר זיכרון. אתה לומד זיכרון לטווח קצר מהלימוד כיצד לתקשר. כך שהילדים יוכלו לחתום חצי שנה מוקדם יותר מכפי שהם יכולים לדבר זה עשוי להעניק להם יתרון בזיכרון ובשפה בכלל. המחקר המקורי היה בן 20 אבל הם די בטוחים כעת. אז רק לפני זמן רב אפילו הקהילה הרפואית אמרה, "אה, אתה צריך ללמד לא רק ילדים חירשים אלא כל הילדים שפת סימנים." זה די חזק.

יש לנו משחק בשם Pop Sign המאפשר לשמוע הורים לילדים חירשים ללמוד שפת סימנים, או כל הורים ללמוד שפת סימנים, על ידי משחק באתר המשחק הממכר הזה או בטלפונים הניידים שלהם.

לכן, כשחזרתי לשאלתך המקורית אני רואה את הסיטואציות האחרות בהן אנשים נכנסים לתאי הד, במיוחד עם ידע נדיר. קל לגרום לאנשים ללכת בדרך הלא נכונה.

מהצד האופטימי, למה אתה מעודד והכי מקווה?

ובכן, אני אוהב את הדברים שאלון מאסק עושה בניסיון להמיר אותנו לכוח סולארי. אני מסוג האנשים שממתינים לאריחי הגג האלה כדי שיהיה אפשר להמיר את הבית שלי.

במרחב שלי, המחשוב הלביש, העוזר האינטליגנטי ממריא. לראות את חייהם של אנשים משתנים בגלל הזמינות של מכשיר זה איננו רק משום שהוא משפר את חייהם האישיים או את חייהם המקצועיים, אלא ממש מציל חיים על שולחן חדר הניתוחים, רק בגלל המידע שאנו יכולים לספק בדיוק בזמן למנתח.

אז הרעיון הזה שאנו עומדים לרשותם העוזרים החכמים הללו שיכולים לעזור לנו על בסיס שנייה אחר שנייה. לבסוף, אנו מגיעים לשלב בו הדברים האלה הופכים מועילים.

איזה גאדג'ט, שירות או מכשיר בו אתה משתמש כל יום, שינה את חייך? מה אתה הכי אוהב? אינך יכול לבחור את Google Glass.

האם אוכל לבחור את אב הטיפוס הקודם שלי מערכת צילום ?

אני מניח שאאפשר זאת.

המערכת שהייתה לי לפני זכוכית הייתה תצוגת מיקרו-אופטית SVB6 ומקלדת הטווידלר ומחשב חבילת כתפיים. החומרה לא הייתה מחליף המשחק, זו הייתה היכולת לרשום הערות במהלך שיחות ולהתייחס לתווים האלה ש יש ל שינה את חיי. אם אני יושב מעבר לשולחן מזוכה בפרס נובל בארוחת הצהריים, אני רוצה להיות מסוגל לזכור את השיחה הזו. אני רוצה לדעת רק את חמש המילים שיעודדו את הזיכרון הטבעי שלי.

מסתבר שהמקלדת הזו כדי שאוכל להקליד מתחת לשולחן ולרשום הערות על אותה שיחה, הפכה אותי לאדם אפקטיבי בהרבה וגם לחינני יותר מבחינה חברתית. אחד הדברים שהתלמידים שלי היו המומים לראות הוא שלפני שאני רואה מישהו, אני מושך עליהם את הרולודקס שלי. זו הייתה הפעם האחרונה שדיברנו יחד ועל מה דיברנו. זה באמת עוזר לי לטעון מחדש את המוח שלי על השיחות שלנו.

נניח שאני מבקר אצל חבר ותיק. יש לי הערות כמו "היי כן, הילד של בתו הלך לקולג '. היא למדה גיאולוגיה; רציתי ליצור אותה במגע עם אשתי. עלי לשאול אותו אם זה קרה." זה באמת מאפשר לך, לא רק בקריירה המקצועית שלך, אלא גם להיות חברתי יותר.

כן, דיברנו הרבה על המכשירים האלה שהופכים אותנו לחכמים יותר וגורמים לנו להיראות חכמים יותר. הרחבת הזיכרון ההיא, בה אתה פתאום מחובר ליותר מחיים שלך מכיוון שאתה יכול לזכור יותר ממנו כי אתה יכול לגשת ליותר ממנו ולקבל את התזכורות האלה בזמן אמת, זה יישום מעניין.

בימיו הראשונים של מחשוב לביש, עשינו שלושה דברים. עשינו מציאות מוגברת / חלופית, קולקטיבים אינטלקטואליים וזיכרון מוגבר. הקולקטיב האינטלקטואלי הוא סוג של מדיה חברתית. מציאות מוגברת היא כל הזעם בימינו. רוב האנשים לא מבינים שזה נקרא מציאות מלאכותית לפני שטבענו את המונח "מציאות מוגברת חלופית". למעשה, אני יכול לומר לך מדוע שינינו את השם.

למה עשית את זה?

בימיי הראשונים של חקר המציאות המלאכותית הזו היה שם בחור בשם מירון קרוגר, שכתב ספר נפלא בשם מציאות מלאכותית 2 . אני ממליץ בחום לכל מי שרוצה להבין את המציאות המוגברת. בכל מקרה, אני חושב שזה היה טימותי לירי שהתחיל לערוך ראיונות עיתונאים שבהם דיבר על מציאות מדומה ומציאות מלאכותית כמו טיולי סמים של LSD. באותה תקופה הייתי סטודנטית שכתבתי הצעת מענק, ולא רציתי שהם יבדקו את המונח מציאות מלאכותית ויראו שהיא קשורה ל- LSD.

אז חשבתי שאני צריך למצוא מונח אחר להשתמש בו שלא ימשוך משהו באינטרנט שעלול להסתבך אותי, אז קיבלנו את ההחלטה המודעת הזו לקרוא לזה Augmented Reality. למרבה המזל אני החבר'ה האחרים בבואינג בדקו גם הם שימוש במציאות מוגברת כדי להרכיב את החומר הזה לביצוע רתמות קו חשמל וייצור מטוסים, והם הגיעו לאותה מונח. אז אני חושב שהייתה לי הגרסה הראשונה שנכתבה עליה, והיה להם את הפרסום הראשון עליו. השם מציאות מוגברת נתקע.

קיבלת את המענק?

אני עשיתי. זו הסיבה שאני כאן היום. תודה ל- NDSEG, למלגת הבוגרים הלאומית למדע והנדסה, אני מאמין. אם זה לא היה בשבילכם, אני לא הייתי כאן. לא הייתי פרופסור. המענק הזה איפשר לפרופסור שלי לקחת סטודנט לתואר ראשון נוסף ולאפשר לי לגרום למחשבים לבישים לקרות. אז תודה רבה.

• מהיר קדימה: מארח 'הערה לעצמי' מנוח זומורודי מהיר קדימה: 'הערה לעצמי' מארח מנוח זומורודי
• מהיר קדימה: סטיב סינג של SAP בנושא אוטומציה, עסקים ללא גבולות מהיר קדימה: סטיב סינג של SAP בנושא אוטומציה, עסקים ללא גבולות
• שאלות ותשובות מהיר קדימה: כיצד לבנות מכונות רגשיות שאלות ותשובות קדימה: כיצד לבנות מכונות רגשיות

אם אנשים רוצים לעקוב אחריך ולגלות על מה אתם עובדים, כיצד הם יכולים לעשות זאת באופן מקוון?

הדרך הקלה ביותר היא לגשת ל- Google Scholar ולהקלד את שמי ותקבל גישה לכל המסמכים שלי ופשוט לחץ על המסמכים האחרונים. אם אתה רוצה לראות משהו שהוא יותר מיום ליום אם אתה הולך לקהילת Google+ בנושא מחשוב לביש, זה זה שאני מנהל, אני מנסה לשים את הדברים הכי מגניבים שקורים שם בחוץ. לפחות מהמחקר שלי ואנחנו נתחיל לסקור כמה מהדברים שקורים באופן כללי.