Rapid înainte: Thad Starner vorbește google glass, ajutând câinii să vorbească

Am fost în Austin, Texas, luna trecută pentru SXSW Interactive, unde am avut șansa să mă așez cu o serie de execuții din industria tehnologică pentru serialul meu video Fast Forward, inclusiv Chris Becherer, VP de produs la Pandora.

În această ediție a Fast Forward, vorbim cu Thad Starner, profesor de calculatoare la Georgia Tech. Thad a fost conducerea tehnică a unui proiect care a dus în cele din urmă lumea la Google Glass, pe care a purtat-o ​​în timpul chat-ului nostru. Dar a fost în spațiul de purtat mult mai mult decât atât, iar munca sa se concentrează pe însăși natura interfeței om-mașină. Cea mai recentă lucrare a sa constă în construirea de ținute purtătoare de minte pentru câini. Consultați chat-ul nostru în videoclip și transcrierea de mai jos.

Dan Costa: Este un SXSW ocupat. Se vorbește mult despre realitatea augmentată. Se vorbește mult despre realitatea virtuală. Wearables sunt încă un subiect foarte fierbinte. Atunci când majoritatea oamenilor se gândesc la purtabile, se gândesc la Google Glass sau la un Fitbit pe care îl porți la încheietura mâinii pentru a-ți urmări pașii. Când te gândești la purtabile, ce crezi?

Thad Starner: Ei bine, pentru mine este orice computer, orice dispozitiv purtat de corp, care te ajută în timp ce faci o altă sarcină primară. Este orice computer purtat de corp care este proiectat să fie secundar. Te ajută pentru o altă sarcină principală, cum ar fi să răspunzi la întrebări în timpul unui interviu.

Notele mele sunt pe iPad mini. Trebuie să mă uit în jos pentru a obține cele mai recente note și pentru a vă corecta titlul. Ai asta în sine.

Da. Nu trebuie decât să arunc o privire, să prind câteva cuvinte și să mă întorc imediat la conversație. Vechile mele sisteme, nu știu dacă ai privit unele dintre imaginile mele mai vechi, dar sistemele mele mai vechi aveau afișaj chiar aici. De fapt, a existat unul din 1997, unde era chiar în obiectiv. Aceasta a fost realizată de o companie numită Micro Optical la acea vreme. Acest lucru vă permite să fiți destul de ușor cu un asistent inteligent care vă poate ajuta de la secundă la secundă. Îți schimbă cu adevărat încrederea și îți schimbă capacitatea de a face lucruri din mers pe care, în mod normal, le-ai putea împiedica.

Ai fost unul dintre echipajele inițiale. Se pare că voi sunteți aproape în concurență pentru a vedea cine poate construi cel mai cool, mai sofisticat, cel mai funcțional sistem de purtat.

Am început să-mi fac sistemul în 1990, dar nu am reușit din nou. Abia în’93 am avut în sfârșit un sistem pe care îl puteam purta în viața mea de zi cu zi. La acea vreme, lucram pentru o companie numită BBN. Au ajutat la crearea primelor routere pentru internet. După ce am instalat dispozitivul, am realizat într-o lună că nu este doar o cercetare bună. A fost un stil de viață bun.

Cam asta sunt aceste dispozitive. Creează un stil de viață criminal pentru tine. Desigur, pe atunci aveam o conexiune la telefon mobil pentru internet, care era măsurată în picioare, nu în ritm de biți. Cu alte cuvinte, câți picioare aș putea merge pe jos înainte de a scădea apelul telefonului analog și a trebuit să reaprind conexiunea?

În cele din urmă, m-am întors la MIT Media Lab și am început să recrutez din ce în ce mai mulți studenți interesați de acest lucru. Am avut un mic convoi de oameni care au creat dispozitivele pentru nevoile lor particulare și ne-am dat seama cum să trăim ca o comunitate de cyborgi. Asta a schimbat ceea ce credeam despre tehnologie. O să vă dau un exemplu: să presupunem că veniți ca VIP pentru a vizita laboratorul. Vom avea o persoană să discute cu tine despre care sunt interesele tale. În timp ce se întâmplă, vor exista mesaje care se întorc înainte și înapoi între globii oculari ai celorlalți membri ai grupului care încearcă să-ți planifice ziua. "Oh, este foarte interesat de simțurile augmentate. Așa că îl luați la prânz. Trebuie să merg la programul la trei la ore, așa că îl voi duce la doi." Așadar, aveți acești oameni care tastează pe tastaturile lor care își trimit mesaje unul altuia în timp ce conversația continuă să încerce să planifice o zi pe baza intereselor dvs. Cam ajunge la stadiul de telepatie.

De multe ori sună foarte mult ca Slack, unde avem comunicare în timp real și diferite segmente prind contur. Dar, în loc să-l faceți bazat pe terminal și să-l conectați la un computer, unde trebuie să fiți în fața laptopului sau a telefonului, este oriunde v-ați afla. Puteți face două lucruri simultan. Puteți avea acea conversație și programați prânzul.

Ei bine, nu, nu vrei să faci asta. IQ-ul dvs. scade cu 40 de puncte atunci când încercați să faceți asta. Ceea ce doriți să faceți este să faceți computerul să susțină conversația. De exemplu, avem un sistem numit agent de amintire care are un mic microfon care anulează zgomotul, ascultă partea mea a conversației și tot ce spun eu este transcris și introdus într-un tampon de text. Și apoi computerul caută continuu e-mailuri anterioare, lucrări anterioare, conversații anterioare care ar putea avea legătură cu ceea ce vorbim. Acesta afișează mici amintiri în afișarea mea despre detaliile pe care aș putea să le includ în această conversație. Așa că susține conversația, oferindu-mi informații.

Am avut un elev care îmi vorbea despre recunoașterea vorbirii - cum doriți să folosiți recunoașterea vorbirii cu purtătorii. Și am spus, bine, dacă vrei într-adevăr să faci asta, ar trebui - și mi-am scos notele în timp ce purtăm conversația - îi spun, ar trebui să te uiți cu adevărat la discuția lui Steve Whittaker despre Filochat din 1995. Cred el a avut câteva detalii grozave despre cum până la 93 la sută din zilele oamenilor sunt petrecute în comunicare oportunistă. I-am furnizat toate aceste detalii. Studentul meu s-a uitat la mine ca „cum știi toate acestea?” E în regulă aici. Am știut suficient să-l caut pe Steve Whittaker și apoi computerul mi-a furnizat toate detaliile. Să ai un astfel de sprijin în timp real este într-adevăr un lucru minunat.

Am făcut-o și înainte, unde am dat câteva mărturii la Academia Națională de Științe din Washington, DC, despre creșterea oamenilor. Le-am arătat ce făceam. Am avut studenții mei, studenții mei de grad, înapoi la Georgia Tech - așa că eram în DC, elevii mei de la Georgia Tech ascultă și, de asemenea, le-am arătat tuturor că am avut un feedback live la Georgia Tech. Am prezentat atât notele mele de prezentare, cât și notele studenților pe care le sugerau în timp real.

Așa cum mărturiseau, mi-au spus: „Oh, ar trebui să vorbim despre asta” și m-ar fi aruncat o adresă URL, „sau ar trebui să vorbim despre asta” și să aruncăm chestii, oferind alte informații. Panoul care mă intervievase, au început să pună întrebări ale elevilor, nu ale mele.

Am fost doar un fel de om de față pentru toate aceste cunoștințe despre acest consorțiu de oameni din laborator, care ar putea răspunde rapid la întrebări, deoarece erau experți în domeniu. Dar puteau căuta informații mult mai repede decât am putut. Pur și simplu m-au obișnuit să vorbesc. Acești colectivi intelectuali, această capacitate de a merge la experți, fiind capabili să vă ajute la o notificare de moment, este un lucru destul de puternic. Pe de altă parte, dacă încercați să spuneți „Citiți e-mailul” în timp ce aveți o conversație, sună ca un idiot. Oamenii nu pot multi-sarcina foarte bine.

Nu este multi-tasking. Este cu adevărat mărire.

Dreapta.

Pare ca natura de a fi inteligent, natura cunoașterii, natura inteligenței s-a schimbat. Trebuia să memorezi toate aceste lucruri pentru a avea o conversație cu ea fără să te referi la notele tale, iar aceasta nu mai este paradigma. Trebuie doar să știți ce întrebări să puneți și să fiți conectat la un sistem care vă poate oferi acele răspunsuri.

Există o anumită cantitate de informații pe care trebuie să o interiorizezi, astfel încât să o poți căuta rapid și să poți gândi în acele domenii, dar pentru multe alte lucruri, vrei doar cunoștințele lumii la îndemâna ta și să le aduci la dispoziție. când ai nevoie. Această idee de preluare a informațiilor la timp este foarte puternică. Asta cred că se va întâmpla în următorii cinci sau 10 ani. Vom avea acești asistenți inteligenți care ne pot ajuta la o secundă de secundă.

Acesta este unul dintre lucrurile grozave despre computerele purtabile. Ceea ce cred că definește calculatoarele purtabile este că este ceva în care computerul devine parte din noi. Probabil ați folosit binoclu înainte? E ceva ce ridici. Privești ceva în depărtare. Ajustați focalizarea. Sunt cam generoși, nu? Trebuie să le mențineți corect și să reglați focalizarea de fiecare dată când schimbați de la un subiect la altul. Le dai jos, în sus și în jos. Nu te gândești la binoclul tău ca parte din tine. Dar ochelarii tăi, îi pui și îi folosești toată ziua. Vedeți prin ele. Nu te gândești la ele. Le folosești. Deci, ce avem acum cu majoritatea acestor dispozitive, majoritatea acestor computere, smartphone-urile, tabletele noastre; nu fac parte din noi. Sunt altele.

De îndată ce apropiați dispozitivele de corp, dintr-o dată tehnologia iese din cale. Acesta este paradoxul calculatoarelor purtabile. Prin apropierea tehnologiei de corp, o scoate din cale. Cred că acolo vom merge în viitor. Vom vedea din ce în ce mai multe modalități prin care tehnologia ne va ajuta, ne va face mai puternici, mai independenți, mai încrezători și mai informați pe o fracțiune de secundă prin divizare-secundă. Vreau să văd că acești asistenți inteligenți pleacă de la ceva despre care vorbiți; la ceva care face parte din tine. Ceva care te ajută de la un moment la altul foarte proactiv.

Cred că conceptul de a experimenta lumea prin tehnologie, spre deosebire de utilizarea doar a tehnologiei, este o diferență crucială.

Aceasta este experiența la care am lucrat. Multe dintre acestea este pur și simplu viteza de acces. Larry Page mi-a spus: „Este vorba despre reducerea timpului dintre intenție și acțiune”. Am fost uimit. Am încercat să articulez importanța vitezei de acces a unui dispozitiv. Aici a făcut-o într-o singură frază. Timpul dintre intenție și acțiune este crucial.

Una dintre demonstrațiile pe care le fac este să fac pe toată lumea să îndeplinească două sarcini. Îi fac să ridice mâna după ce finalizează fiecare sarcină. Deci, voi spune ceva de genul: „Bine, la ce oră este?” O să ridic mâna pentru că timpul meu este pe partea din față a ecranului chiar acum, iar publicul meu finalizează și sarcina foarte repede. Apoi, a doua sarcină pe care o am de făcut este să răspund la o întrebare de genul "unde este Muntele Pinatubo?" Pot ridica mâna, deoarece punerea întrebării mi-a primit răspunsul pe ecran acum. Este în Filipine și, de fapt, am o mică hartă a locului în care se află chiar acum pe ecranul meu.

Este atât de greu pentru publicul meu să ajungă rapid la aceste informații încât nici măcar nu se deranjează să o facă. Vorbesc despre audiențe tehnice precum Xerox Park sau Georgia Tech sau Stanford. Iată-mă aici, într-o audiență plină de tocilari, fac un experiment cu ei și cei mai mulți nici nu se deranjează să încerce să ajungă la informațiile respective, deoarece știu că va dura prea mult.

Ce se întâmplă dacă îl putem schimba de la ceva care durează prea mult la ceva care este la fel de ușor ca verificarea timpului. Deodată, îi faci pe oameni mult mai puternici. Dacă puteți reduce timpul de intenție la acțiune la două secunde sau mai puțin, dintr-o dată oamenii o vor face fără să se gândească la asta. Face parte din ele. Odată ce trece peste două secunde, utilizare coboară exponențial și oamenii se gândesc la un „altul”.

Înainte de a începe înregistrarea, vorbeam despre sfinții patroni. Și încercam să ne dăm seama de ce a fost Sfântul Stanislau patronul. Am o tabletă conectată la internet în mână. Am vrut informația. Dar nu m-am deranjat să deschid Google, să-l tastez și să-l căut, pentru că nu-mi pasă atât de mult. Dar doar având acea conversație, a apărut pe ecran.

Adică îl am aici. Eu doar am intrebat. Acest lucru este mai explicit. Am spus că am întrebat simplu: „Sfântul Stanislau a fost patronul?” - răspunsul este Polonia - și apoi a apărut câteva secunde mai târziu. Este destul de puternic. Reduce felul de reticență de a încerca să găsească informații despre aceasta în lume. Este excelent pentru mine ca profesor, deoarece mă face să par mai inteligent decât mine.

Acest lucru s-a întâmplat când eram student la MIT. Am luat o clasă de la Justine Cassell și a fost cam gest . În timpul unei examinări anterioare examenului final, ea a întrebat: „Ce importanță are Deixis?” Aveam toate notele de clasă pe computer și puteam accesa foarte repede cu această tastatură. Înainte de recunoașterea discursului a devenit foarte bună. Ce aș face este să-mi construiesc propozițiile astfel încât să pot găsi răspunsul la timp pentru a termina o propoziție.

Așa că am ridicat mâna să răspund la întrebare. M-a chemat pe mine. Am spus: „La începutul clasei, am spus că importanța permisului este uh, uh, uh, um”, pentru că am făcut o greșeală. Mi-am dat jos tastatura. Am intrat în modul greșit al E-Mac-urilor. Am spus: „Va trebui să mă întorc la tine. Am intrat în modul greșit.”

Întreaga clasă s-a despărțit râzând. Petrecuseră tot acest timp cu mine și nu își dăduseră seama că fac asta zilnic. Un profesor care a ținut cursul cu mine s-a aplecat și mi-a spus: „Acum vreau una. Tu faci asta tot timpul, nu-i așa? Puteți extrage informații atât de repede. Se pare că este parte din tine." Da, tocmai acesta este motivul pentru care fac asta.

A fost uimitor faptul că acești profesori și studenți cu care am lucrat ani de zile nu au realizat niciodată cât de multă asistență îmi oferă dispozitivul. Prima dată când am dat o discuție profesională, unul dintre studenții superiori a venit și mi-a spus: „Thad a fost cea mai bună discuție pe care v-am auzit-o vreodată, dar de ce purtați computerul?”

Nu avea habar că, în timp ce majoritatea oamenilor au cartele indice de 3 la 5, le am aici. Având acest tip de asistență m-a făcut un vorbitor mai bun. În momentul în care puteai să folosești mașina asta, nu cumva să faci minte oamenilor.

Deci, haideți să facem un mic pivot. Am vorbit multe despre purtările umane. Acum lucrezi cu câinii. Explicați munca pe care o faceți.

Proiectul se numește FIDO, Facilitarea Interacțiunilor pentru câini cu ocupații. Da, este un acronim, dar este unul drăguț. Ideea este că există toți acești câini care lucrează. Câinii care sunt câini de alertă alergică sau câini de alertă medicală, căutare și salvare, detectare de bombe, inspecție pentru TSA pentru contrabandă sau agricultură. Acești câini își fac foarte multe slujbe, dar le este foarte greu să comunice ceea ce simt și ce gândesc pentru manipulatorii lor.

Am avut unul dintre antrenorii noștri acum câțiva ani pentru a face o demonstrație. Este o diabetică și una dintre aceste persoane care poate leșina pur și simplu de lipsa glicemiei. Are un câine care este antrenat să reacționeze la acea situație alertă. Câinele merge și găsește persoana cea mai apropiată, le apucă și încearcă să le aducă la ea pentru că va trece în curând.

Înainte ca ea să fie să leșine, merge și primește ajutor?

Da. De fapt, poate simți această schimbare în chimia corpului miros și obțineți ajutor. Acest lucru s-a întâmplat la poarta de securitate de pe aeroportul din Atlanta, iar câinele a făcut ceea ce a fost antrenat să facă - a urcat pe un ofițer de securitate TSA. Ofițerul de securitate a crezut că câinele este prietenos, dar instructorul nostru a spus: „O să leșin într-o secundă. Trebuie să mă așez”. Vă puteți imagina că ar fi mult mai bine dacă câinele ar putea vorbi.

Așadar, am făcut o vestă unde câinele merge și comunică alerte trăgând vesta. Când senzorul este activat și spune: "Vă rog să mă urmați. Proprietarul meu are nevoie de asistența voastră." Desigur, prima dată când testați acest lucru, oamenii cred că sunt făcuți sau pur și simplu nu cred. Oare câinele acesta a vorbit cu mine?

Este o înregistrare audio a unei voci umane care spune de fapt această propoziție?

Da. Trebuie să dresăm câinele să-l facă de două ori, deoarece pentru prima dată când oamenii nu cred.

A doua oară, câinele spune: "Nu, într-adevăr! Adică de data asta?"

Nu, trebuie doar să repetăm ​​același lucru și pare să funcționeze. Încă îl testăm. Trebuie să-l testăm pe unii oameni neîncrezători de la Georgia Tech și să vedem ce spun ei. Dacă vi se întâmplă, știți că face parte din testarea noastră. Vom avea unul dintre câinii noștri asistenți în pregătire să vină aici să facă demonstrația.

Cățelul acela trebuie să învețe trucuri noi până la 14:00 în această după-amiază?

De altfel, inițial am crezut că vom avea probleme cu aducerea câinelui în SXSW și astfel vom face astăzi mult antrenament pentru a putea arăta ceea ce ne dorim.

Ideea că acești câini au toate aceste percepții pe care ni le pot articula este cam nouă. Aveam ceva presă pe vesta noastră FIDO și am primit un apel de la poliția din Georgia Tech, care ne întreba dacă veșmintele pot fi folosite pentru câinii care adulează bomba. Am fost surprinși să aflăm că au câini adulți cu bombe, au explicat că acești câini sunt obișnuiți să scaneze locurile de sport înainte ca oamenii să intre. „Suntem ca„ Oh. Povestiți-ne despre adulmecarea bombei. "Suntem interesați pentru a afla mai multe .

Se pare că câinii sunt antrenați pentru lucruri precum pulberea de pistol și C4, dar și lucruri precum bombele cu peroxid, care… miros foarte diferit. Bombele cu peroxid sunt, de asemenea, foarte instabile. Dacă primiți unul dintre acestea, nu doriți câinele sau manipulatorul nicăieri lângă el. Praful de gunoi sau C4 sunt foarte stabile și nu este o problemă. Ceea ce a dorit să facă poliția din Georgia Tech a fost ca câinii să aibă vesta cu două jucării mici. Dacă câinele miroase pulbere de armă , trag smântâna pistolului și ea geo-localizează ei și arată locația câinelui pe afișul ofițerului unde se află câinele. Atunci știu că aici este o bombă, dar este o bombă stabilă și pot comanda doar câinele să rămână acolo și să latre la bombă până când o pot găsi rapid.

Dacă câinele trage de cealaltă parte a vestei, este o bombă cu peroxid. Știm că este instabilă și atunci îți amintești de fapt câinele să-l scoată din drum și apoi trimiți un alt tip de unitate de eliminare a bombelor.

Același lucru este și căutarea și salvarea… și acești câini din agricultura TSA pentru ceea ce miros în bagajele oamenilor. Puteți și chiar face acest lucru pentru inspecția câmpurilor fermierilor. Există unele lucruri precum putregaiul de cartof dulce în care nu puteți spune din exterior că există o problemă. Este un lucru nou în Carolina de Nord, care le face ravagii. Câinii o pot mirosi. Puteți să trimiteți câinii și să îi aveți, astfel încât să poată căuta pe câmpuri până îl vor găsi. Dacă o găsesc, ei avertizează. Vedeți unde sunt. Tu mergi acolo. Puteți vedea unde sunt amplasate, dezgropați rădăcinile, confirmați că de fapt putredește și apoi scăpați de acea parte a câmpului și începeți din nou.

Se dovedește că, odată ce începem să folosim acești câini pentru a face aceste lucruri, mai multe persoane ies din lucrările din lemn, sunt descoperite aplicații noi. Câini care adulmecă trufele, de exemplu.

La asta mă gândeam.

Aceasta este una dintre preferatele mele. Avem un hobbyist care vrea să joace acum cu noi.

Pot împrumuta câinele pentru weekend?

Exact.

Lucrul care îmi place este că le oferiți oamenilor acces la percepțiile câinelui, care sunt în multe feluri superioare oamenilor și doar utilizați tehnologia pentru a le permite să comunice acele percepții.

Simțul mirosului lor este de 100 de ori mai bun decât orice facem electronic. Au un sentiment foarte bun al auzului. Privirea lor nu este la fel de bună ca a noastră, dar percep altfel. Dacă le permitem să comunice de fapt mai bine, am putea învăța multe mai multe despre ceea ce sunt capabili să facă și cum își pot face treaba mai bine. Desigur, câinii cred că este distracție minunată. Acesta este totul pentru ei.

Să trecem la feedback-ul haptic și la învățarea haptică și la unele sisteme pe care le-ați făcut acolo. Este adevărat că poți învăța pe cineva cum să cânte la pian fără să joci de fapt pian ?

Este destul de nebun. Numim acest lucru învățare pasivă pasivă haptică pasivă. Este una dintre super puterile pe care vi le pot oferi calculatoarele purtabile. Ideea că vă poate învăța o sarcină mecanică complexă sau o sarcină manuală complexă fără atenția dumneavoastră. Este cam surprinzător. Am făcut asta cu pianul de mai multe ori.

Să presupunem că vrei să înveți „Ode către bucurie” de Beethoven. Este unul dintre cele mai simple pe care le folosim pentru demonstrațiile noastre. V-am pus o mănușă, iar mănușa are mici motoare cu vibrații pe fiecare deget. Îți pui căștile Bluetooth și doar cântă cântecul pe măsură ce tu și cu mine vorbim sau citești e-mail, sau conduci, orice. O ignori și doar cântă cântecul încă o dată. Pe măsură ce fiecare notă este redată, atinge degetul care aparține acelei note. După 20 de minute, aveți prima strofă din „Ode to Joy”.

Următoarele 20 de minute, îl ai pe cel de-al doilea. În aproximativ o oră și 30 de minute de la doar această înregistrare, trebuie să o despărțim în bucățile potrivite, dar după aproximativ o oră și treizeci de minute, ai toată melodia. Dacă puneți degetele în jos, apoi puneți mâna în jos pe pian, marcăm unde se află prima notă in caz contrar nu ai ști, iar mâna ta devine stăpânită și cântă doar melodia. Este unul dintre aceste lucruri care, dacă te concentrezi prea mult pe el, nu poți face asta, dar dacă te distrag, poți.

Joci melodia și, îmi imaginez, redați sunetele în cap pentru a încerca să atingeți aceleași note.

Am făcut asta cu Chad Myers pe CNN o dată. Nu are talent muzical. L-am pus pe mână în timp ce urmărea un uragan în Golf, apoi l-am scos în direct pe CNN. L-ai putut vedea cum are spaima asta. Acest tip se află în fața a 20 de milioane de oameni în fiecare zi, dar are spaimă pe scenă în timp ce pune mâna pe pian. Puteți vedea că nici măcar nu știa care este melodia. El doar începe să-l atingă. Nu știe ce avea să fie, dar, pe măsură ce continuă, recunoaște tonul. Deodată ritmul lui se îmbunătățește și apoi îl repetă. El devine din ce în ce mai bun pe măsură ce merge. Ai putut vedea această revelație „oh cuvântul meu” pe fața lui. După ce mi-am făcut-o de câteva ori, voi spune că este un lucru foarte ciudat.

Lucrul pe care încercăm să îl facem acum este figura cât de departe putem merge cu el. Am început cu o singură notă, melodii de o singură mână. Atunci, studentul meu, Caitlyn, și-a dat seama cum să facă acorduri. Acum, piesa noastră standard este Marșul turcesc al lui Mozart. Pentru oamenii care sunt muzicieni, știți că două mâini sunt ritmuri foarte diferite, foarte diferite pe ele. Este o piesă suficient de complexă încât învățarea ei este nedivizibilă. Luăm novice complete, aruncăm mănușile pe mâini și după câteva ședințe, joacă această piesă complexă. Nu spun că sunt niște muzicieni grozavi, dar spun că știu secvența de note. Ne-am interesat atunci în ce altceva am putea să învățăm.

Unul dintre lucrurile la care am început să ne uităm a fost tastarea. De când ne-am dat seama cum să facem coarde, am încercat să facem braille. Braille implică aceste șase degete, deci sunt punctele, sau aceste opt degete dacă faceți forma extinsă a acestuia. Majoritatea oamenilor nu se deranjează să învețe braille pe măsură ce îmbătrânesc, deoarece își pierd viziunea. Este, de asemenea, o adevărată criză cu studenții. Aproximativ 40 la sută dintre ei nu învață niciodată braille, cel puțin nu suficient pentru a comunica cu utilizarea lui. Învățarea braille pentru un student orb este unul dintre indicatorii majori ai progresului educațional viitor, precum și a succesului economic. Acești profesori de braille care predau braille sunt itineranți, în mișcare. Ei merg pur și simplu de la școală la școală, deoarece nu există o cerere suficientă pentru a avea un profesor permanent la o anumită școală.

Am început să ne uităm să facem mănuși care să îi poată învăța pe oameni să brailleze pasiv. Răspunsul a fost da. În patru ore, îți pot da o cască și aceste mănuși. În timp ce faci și poți face tot ce vrei, și doar îți repetă, „Vulpe maro rapid sare peste câinele leneș”. Face fiecare literă la un moment dat și simți scrisoarea pe degete. După aproximativ patru ore în acest sens, spun: „Care este litera G” și știi că este așa. Care este litera A, „știți că este acea. Nu numai că îl puteți tasta, dar îl puteți simți. Treci cu degetul peste sâmburi și știu să tastezi scrisoarea. Te duci: "Bine, acum cum aș tasta asta? Bine, deci asta este G." Spre surprinderea noastră, doar funcționează.

Ce crezi că se întâmplă în creier pentru a permite acest tip de conexiune? Pentru că nu este conștient și nici nu este doar intelectual? Este altceva între minte și corp.

Chiar nu știu multe. Există însă unele speculații ale unui coleg de-al meu care crede că ceea ce se întâmplă este că simțul atingerii este un simț uman evolutiv mult mai devreme pe care oamenii l-au obținut în mod evolutiv. Aproape toate animalele au un sentiment de atingere. Asta pare să se potrivească cu ideea că atingerea face parte dintr-o parte cu o funcționare foarte scăzută a creierului nostru, chestii cu un creier de șopârlă foarte slab. Poate că expunerea ne condiționează cu adevărat să recunoaștem aceste tipare. În timp ce încercați să înveți ceva de genul limbii când dormiți, nu funcționează foarte bine, deoarece sunetul este un lucru foarte mare la nivelul creierului. De aceea, nu ne așteptam să funcționeze experimentul de introducere a textului. Muzica este foarte scăzută în creier, în timp ce sistemele de limbaj sunt considerate ca fiind funcții cerebrale superioare.

Nu este asociat cu limbajul.

Dreapta. Faptul că învățarea introducerii textului a funcționat a fost o surpriză pentru noi. Nu suntem prea siguri cât de departe putem ajunge. Putem învăța limba semnelor? Putem învăța dansul? Putem ajuta experții să devină mai eficienți? Unul dintre lucrurile pe care vrem să le facem este să obținem niște ulciori de baseball și să înregistrăm mișcările brațelor lor și să vedem dacă putem să le jucăm înapoi în timpul opririi lor și să le creștem consistența.

Nu am idee dacă ceva din astea va merge. Un lucru pe care l-am încercat, totuși, a fost Codul Morse. Braille este doar o secvență cheie. Codul Morse este ritm.

Am constatat că putem folosi traductorul de inducție pe sticlă. Pentru a atinge partea laterală a capului. Acum, acest lucru funcționează în mod normal prin vibrarea craniului și trimiterea sunetului direct către cochlea dvs., ocolind timpanul. Acesta este motivul pentru care pot purta acest lucru și să primesc mici alerte și să nu am nimic care să-mi blocheze urechile, dar dacă lovitura ta cu 15 hertzi se simte ca un robinet.

Am început cu antrenamente în stilul „câinilor rapide de vulpe maro peste câinele leneș”, dar acum tocmai atingem partea din cap în Codul Morse și credem sau nu în 4 ore din nou - pare a fi timpul magic pentru alfabet - majoritatea participanților noștri au coborât la 0 eroare… când îi rugăm să tasteze S. Le putem arăta linii și puncte pe hârtie și pot scrie literele pentru asta. Putem atinge din nou partea laterală a capului și pot ști ce mesaj ne trimitem.

Deci patru ore și îi facem să facă asta în timpul unui joc video. Deci ne asigurăm că le distragem cu un joc video. Jocurile video se dovedesc a fi cele mai eficiente distrageri.

Știm asta de foarte mult timp.

Este adevărat. Încercăm examenele de absolvire. Oferiți-le înțelegeri de citire sau probleme de matematică. Se pare că singurul care distrage este jocurile video.

Este un lucru interesant. Tocmai astăzi vorbeam cu Poppy Crum despre audio și amestecarea simțurilor. La această emisiune există foarte multe AR; există multă realitate virtuală. Unele dintre cele mai interesante lucruri se întâmplă nu doar într-un singur sens, ci într-o colecție de simțuri. Deci, în această conversație am vorbit despre spațiul vizual, am vorbit despre spațiul audio și, de asemenea, despre fizic. Senzatia tactila. Când puneți toate aceste lucruri se pare că lucrurile cu adevărat interesante încep să se întâmple.

Asta e totul. Nu este doar sinteza sau simțurile. Este, de asemenea, faptul că este ceva ce poți purta cu tine pe parcursul zilei. După ce aveți acest tip de apropiere de corp, puteți face tot felul de lucruri cu corpul la care nu ne-am gândit până acum.

Învățarea prin atingere tactilă pasivă este una, iar un alt lucru care a apărut a fost reabilitarea tapetului tactil pasiv. Acest lucru a fost, de asemenea, o surpriză pentru noi. Aveam o casă deschisă care ne demonstra lucrurile la pian și unul dintre colegii noștri de la Centrul Shepherd - care lucrează mult la vătămarea măduvei spinării - a venit și mi-a spus: „Hei Thad, vreau asta pentru pacienții mei”. Nu am putut înțelege de ce ar dori ca oamenii cu tetraplegie să practice pianul. Ea a spus: „Nu înțelegi, Tetraplegia înseamnă că toate cele patru membre sunt afectate. Pacienții mei cu leziuni parțiale ale măduvei spinării au încă senzații și o anumită dexteritate. Pariez dacă îți punem mănușile pe ele și îi instruim să cânte la pian., că de fapt vor recăpăta o anumită senzație; își vor îmbunătăți senzația și dexteritatea."

Ea avea dreptate. Am învățat aproximativ opt cântece diferite pe parcursul a opt săptămâni. Participanții ar avea mănușile două ore pe zi, cinci zile pe săptămână și apoi ar avea lecții de pian de trei ori pe săptămână. La sfârșitul celor opt săptămâni, participanții care aveau mănușile s-au descurcat mult mai bine. Au avut îmbunătățiri semnificative în senzația de mână și dexteritate în comparație cu oamenii care au avut doar lecții normale de pian.

Deci, această idee că putem face reabilitare, că îți putem păcăli creierul în a-ți dedica tot mai multe resurse pentru a explica aceste semnale care ies din mâna ta este doar uimitoare. Nu știu dacă ai avut vreodată un picior rupt sau ai avut un părinte care a făcut o intervenție chirurgicală la șold, dar reabilitarea durează mult timp. Este foarte plictisitor și este greu să-l distrezi. Este greu să obții conformitatea. Dacă pot pune doar o mănușă și s-a întâmplat reabilitare, și, apropo, vă vom oferi această super putere care veți învăța să cântați la pian până la sfârșitul acesteia, asta este un motiv pentru un mulți oameni.

Asta facem în prezent. O facem chiar acum. Încercăm să vedem dacă acest lucru ar putea ajuta la recuperarea senzației de mână după accident vascular cerebral. Dacă acest lucru se dovedește a funcționa, atunci este posibil să ajutăm un milion de oameni pe an. Este foarte speculativ. Nu avem idee dacă va merge sau nu, dar vom vedea.

In regula. Să trecem la câteva întrebări pe care le pun tuturor oaspeților mei. Ce tendințe tehnologice vedeți în acest moment care vă preocupă cel mai mult? Ce te ține noaptea?

Foarte puțin mă ține noaptea. Dorm destul de bine.

Ai trei locuri de muncă.

Am trei slujbe. Nu am timp să dorm. O mulțime de griji ale oamenilor cu privire la tehnologie este ceea ce vedeți în presă. Realitatea este mult mai plictisitoare decât ceea ce mulți comentatori te vor conduce să crezi sau filmele o vor face. Cred că lucrul de care mă preocupă cel mai mult este camera de ecou pe care o pot provoca social media. Oamenii pot crede pseudo-știința. Oamenii pot fi conduși să creadă lucruri care pur și simplu nu sunt adevărate. Oamenii fac comentarii la munca mea și sunt ca și cum, nu este în regulă.

Lucrez mult cu comunitatea surdă. Se dovedește că învățarea limbii de semne a copilului dvs. îi va ajuta să dobândească mai rapid abilitățile lingvistice. Pentru cel mai mult timp, oamenii au crezut că, dacă îi înveți copiilor limbajul semnelor, acesta va întârzia debutul vorbirii normale. Este exact greșit. Predarea limbajului semnelor încă de la naștere pare să ajute la îmbunătățirea abilităților lingvistice tuturor.

Majoritatea copiilor nu pot forma cuvintele în mod coerent până la vârsta de 12 luni. Pot începe să formeze semnele, știi lucruri precum laptele sau mâncarea. Ei pot face asta la șase luni. A avea copii capabili să se exprime este ceea ce le dă termen scurt memorie. Înveți memorie pe termen scurt, învățând cum să comunici. Așadar, faptul că copiii să poată semna cu șase luni mai devreme decât pot vorbi, le poate oferi un avantaj asupra memoriei și limbajului în general. Cercetarea inițială a avut 20 de ani, dar acum sunt destul de siguri. Deci nu de puține ori, chiar și comunitatea medicală a spus: „Oh, ar trebui să înveți nu doar copiii surzi, ci toți copiii limbajul semnelor”. Este un lucru destul de puternic.

Avem un joc numit Pop Sign care permite audierea părinților copiilor surzi să învețe limba semnelor sau orice părinți să învețe limba semnelor, jucându-se pe acest site de joc captivant sau pe telefoanele lor mobile.

Așadar, revenind la întrebarea inițială, văd celelalte situații în care oamenii care intră în camere de ecou, ​​în special cu cunoștințe rare. Este ușor să îi determini pe oameni să meargă pe calea greșită.

În ceea ce privește partea optimistă, pentru ce ești cel mai încurajat și cel mai de nădejde?

Îmi plac lucrurile pe care Elon Musk le face despre încercarea de a ne converti la energie solară. Sunt genul de persoană care așteaptă ca aceste plăci de acoperiș să fie disponibile, astfel încât să-mi pot transforma casa.

În propriul spațiu, calculul purtabil, asistentul inteligent decolează. Văzând viața oamenilor schimbată în funcție de disponibilitatea acestui dispozitiv nu este doar pentru că își îmbunătățește viața personală sau viața profesională, ci literalmente salvează vieți pe masa de operație, doar datorită informațiilor pe care le putem livra la timp chirurgului.

Așadar, această idee că vom avea acești asistenți inteligenți care ne pot ajuta în mod secundar. În cele din urmă, ajungem la stadiul în care aceste lucruri devin utile.

Ce gadget, un serviciu sau un dispozitiv pe care îl folosești în fiecare zi, ți-au schimbat viața? Ce iubesti cel mai mult? Nu puteți alege Google Glass.

Îmi pot alege prototipul anterior sistem foto ?

Cred că voi permite asta.

Sistemul pe care îl aveam înainte de Glass era un display Micro Optical SVB6 și tastatura Twiddler și un computer pentru pachetul de umeri. Hardware-ul nu era schimbătorul de jocuri, era capacitatea de a lua note în timpul conversațiilor și de a face referire la aceste note are mi-a schimbat viata. Dacă stau peste masă de la un câștigător al Premiului Nobel la prânz, vreau să-mi amintesc acea conversație. Vreau să știu doar cele cinci cuvinte care îmi vor stimula memoria naturală.

S-a dovedit că faptul că această tastatură pot să scriu sub tabel și să iau note despre acea conversație m-a făcut o ființă umană mult mai eficientă și mai grațioasă din punct de vedere social. Unul dintre lucrurile pe care studenții mei au fost șocați este că înainte de a vedea pe cineva, îmi ridic Rolodex pe ele. Este ultima dată când am vorbit împreună și despre ce am vorbit. Mă ajută cu adevărat să-mi reîncărc creierul despre conversațiile noastre.

Să presupunem că vizitez un prieten vechi. Am note de genul "Hei, da, copilul fiicei sale mergea la facultate. Studiază geologie; voiam să o pun în contact cu soția mea. Ar trebui să-l întreb dacă s-a întâmplat asta." Vă permite într-adevăr, nu doar în cariera profesională, ci și să fiți mai social.

Da, am vorbit mult despre aceste dispozitive care ne fac mai deștepți și ne fac să parem mai deștepți. Acea extensie a memoriei în care ești brusc conectat la mai multe din viața ta, pentru că poți să-ți amintești mai mult de ea, deoarece poți accesa mai multe din ea și să primești acele mementouri în timp real, aceasta este o aplicație interesantă.

În primele zile ale calculului purtabil, am făcut trei lucruri. Am făcut realitate augmentată / alternativă, colective intelectuale și memorie mărită. Colectivul intelectual este un fel de social media. Realitatea mărită este toată furia în aceste zile. Majoritatea oamenilor nu-și dau seama că a fost numită Realitate artificială înainte de a inventa termenul „Realitate augmentată alternativă”. De fapt, vă pot spune de ce am schimbat numele.

De ce ai facut asta?

În primele mele zile în care am studiat această realitate artificială, a existat un tip de nume Myron Krueger, care a scris o carte minunată numită Artificial Reality 2 . Recomand cu mare drag tuturor celor care doresc să înțeleagă Realitatea Augmentată. Oricum, cred că a fost Timothy Leary cel care a început să efectueze interviuri de presă, unde a vorbit despre Realitatea Virtuală și Realitatea Artificială ca fiind călătoriile de droguri LSD. La vremea respectivă, eram un student care scria o propunere de subvenție și nu voiam ca aceștia să caute termenul Realitate artificială și să-l vadă afiliat cu LSD.

Așa că m-am gândit că trebuie să găsesc un alt termen care să-l folosească, care să nu scoată ceva pe web, care să mă poată pune în dificultate, așa că am luat această decizie conștientă de a o numi Realitate augmentată. Din fericire pentru pe mine acești alți băieți de la Boeing se uitau, de asemenea, să folosească realitatea mărită pentru asamblarea acestor lucruri pentru a face hamuri de linii electrice și pentru a face avioane și au venit cu același termen. Așa că cred că am avut prima versiune scrisă și au avut prima publicație pe ea. Numele de realitate augmentată a rămas blocat.

Ai primit subvenția?

Am facut. De aceea sunt aici astăzi. Mulțumesc NDSEG, credința absolvită de științe și inginerie pentru apărare națională, cred. Dacă nu ar fi pentru voi, nu aș fi aici. Nu aș fi profesor. Acea subvenție a permis profesorului meu să ia un elev suplimentar și să-mi permită să fac computerul care se poate purta. Deci mulțumesc foarte mult.

• Redirecționare rapidă: „Notă pentru sine” Gazdă Manoush Zomorodi Rapid înainte: „Notă pentru sine” Gazdă Manoush Zomorodi
• Rapid înainte: Steve Singh al SAP pe automatizare, afaceri fără frontiere Avans rapid: Steve Singh al SAP pe automatizare, afaceri fără frontiere
• Îndepărtare rapidă Q&A: Cum să construiți mașini emoționale Îndrumări rapide și avansate: Cum să construiți mașini emoționale

Dacă oamenii doresc să vă urmeze și să afle la ce lucrați cum pot face acest lucru online?

Cel mai simplu mod este să accesați Google Scholar și să tastați numele meu și veți avea acces la toate lucrările mele și trebuie doar să faceți clic pe cele mai recente. Dacă doriți să vedeți ceva care este mai mult zi de zi dacă mergeți în comunitatea Google+ pe calculatoare Wearable, este cea pe care o conduc, încerc să pun cele mai frumoase lucruri care se întâmplă acolo. Cel puțin din cercetările mele și vom începe să analizăm unele dintre lucrurile care se întâmplă în general.