Domov Appscout Rýchly posun vpred: ten začiatočník hovorí google glass, pomáha psom rozprávať

Rýchly posun vpred: ten začiatočník hovorí google glass, pomáha psom rozprávať

Video: Apple Glass — умные очки от «яблока» и убийца Google Glass (Septembra 2024)

Video: Apple Glass — умные очки от «яблока» и убийца Google Glass (Septembra 2024)
Anonim

Minulý mesiac som bol v Austine v Texase pre spoločnosť SXSW Interactive, kde som mal možnosť sadnúť si s mnohými popravami technologického priemyslu pre moju video sériu Fast Forward, vrátane Chrisa Becherera, viceprezidenta pre produkt v spoločnosti Pandora.

V tomto vydaní časopisu Fast Forward hovoríme s Thadom Starnerom, profesorom práce na počítači v spoločnosti Georgia Tech. Thad bol technickým vedúcim projektu, ktorý nakoniec priviedol svet do služby Google Glass, ktorú mal počas nášho rozhovoru na sebe. Ale bol v nositeľnom priestore omnoho dlhšie a jeho práca sa zameriava na samotnú povahu rozhrania človek-stroj. Jeho najnovšia práca spočíva v budovaní nositeľných odevov na čítanie pre psov. Pozrite sa na náš rozhovor vo videu a prepis nižšie.

Dan Costa: Je to zaneprázdnené SXSW. O rozšírenej realite sa veľa hovorí. O virtuálnej realite sa veľa hovorí. Wearables sú stále veľmi horúcou témou. Keď väčšina ľudí premýšľa o nositeľných šatách, myslia si buď na Google Glass alebo na Fitbit, ktoré nosíte na zápästí a sledujú vaše kroky. Čo si myslíte, keď si myslíte o nositeľných odevoch?

Thad Starner: No, pre mňa je to akýkoľvek počítač, akékoľvek zariadenie nosené na tele, ktoré vám pomáha, keď robíte nejakú inú hlavnú úlohu. Je to akýkoľvek počítač nosený na tele, ktorý je navrhnutý ako sekundárny. Pomáha vám pri vykonávaní niektorých ďalších základných úloh, napríklad pri odpovedaní na otázky počas rozhovoru.

Moje poznámky sú na mojom iPad mini. Musím sa pozerať dolu, aby som získal najnovšie poznámky a aby som správne spravil váš titul. Máte to samo o sebe.

Áno. Jediné, čo musím urobiť, je pozrieť sa, zobrať pár slov a vrátiť sa späť ku konverzácii. Moje staré systémy, neviem, či ste sa pozreli na niektoré z mojich starších obrázkov, ale moje staršie systémy tu mali displej. V skutočnosti existoval jeden z roku 1997, keď bol dokonca v šošovke. V tom čase to bola spoločnosť Micro Optical. To vám v skutočnosti umožňuje byť inteligentný pomocník, ktorý vám môže pomôcť od sekundy po sekundu. Skutočne to zmení vašu dôveru a zmení vašu schopnosť robiť veci za behu, ktoré by ste za normálnych okolností mohli naraziť.

Boli ste jednou z pôvodných posádok. Zdá sa, že ste vy skoro súťažili o to, kto by mohol zostaviť najlepší, najdokonalejší a najfunkčnejší nositeľný systém.

Systém som začal vyrábať už v roku 1990, ale opakovane som zlyhával. Až v roku 1993 som konečne mal systém, ktorý môžem nosiť v každodennom živote. V tom čase som pracoval pre spoločnosť s názvom BBN. Pomohli vytvoriť prvé smerovače pre internet. Po zapnutí zariadenia som si v mesiaci uvedomil, že to nebol len dobrý výskum. Bol to dobrý životný štýl.

O tom sú tieto zariadenia. Vytvára pre vás vražedný životný štýl. Samozrejme, vtedy som mal pripojenie na internet na internet, ktorý bol meraný v stopách, nie v bitovej rýchlosti. Inými slovami, koľko metrov by som mohol chodiť, než by prerušil analógový mobilný telefón a musel som znovu vytočiť spojenie?

Nakoniec som sa vrátil do MIT Media Lab a začal som prijímať viac a viac študentov, ktorí sa o to zaujímali. Mali sme trochu konvojov ľudí, ktorí vyrábali zariadenia pre svoje konkrétne potreby a prišli sme na to, ako žiť ako komunita kyborgov. To zmenilo to, čo sme si mysleli o technológii. Ukážem vám príklad: Predpokladajme, že ste prišli ako VIP na návštevu laboratória. Budeme s vami hovoriť o tom, aké sú vaše záujmy. Zatiaľ čo sa to deje, medzi očami ostatných členov skupiny sa budú snažiť naplánovať deň správy tam a späť. „Och, má veľký záujem o rozšírené zmysly. Takže si ho vezmeš na obed. Musím ísť o doktorovej schôdzke o tretej, takže ho dostanem o dvoch.“ Takže títo ľudia píšu na svojich klávesniciach, aby si navzájom posielali správy, zatiaľ čo sa konverzácia práve snaží naplánovať deň podľa toho, aké sú vaše záujmy. Je to niečo, čo sa dostane do štádia telepatie.

Mnohokrát to znie veľmi podobne ako Slack, kde máme komunikáciu v reálnom čase a formujú sa rôzne segmenty. Ale namiesto toho, aby bol založený na termináli a aby bol pripojený k počítaču, kde musíte byť pred prenosným počítačom alebo telefónom, je to kdekoľvek. Môžete robiť dve veci naraz. Môžete mať tú konverzáciu a naplánovať obed.

Nie, nechceš to robiť. Keď sa o to pokúsite, vaše IQ klesne o 40 bodov. Čo chcete urobiť, je, aby počítač podporoval konverzáciu. Napríklad máme systém nazývaný Remembrance Agent, ktorý má mikrofón rušiaci šum, ktorý počúva na mojej strane konverzácie a všetko, čo hovorím, sa prepíše a vloží do textovej medzipamäte. A potom počítač neustále vyhľadáva predchádzajúce e-maily, predchádzajúce príspevky, predchádzajúce rozhovory, ktoré by mohli súvisieť s tým, o čom hovoríme. Pri zobrazení podrobností, ktoré by som chcel zahrnúť do tejto konverzácie, pritiahne malé pripomienky. Takže podporuje konverzáciu a poskytuje mi informácie.

Mal som študenta, ktorý so mnou hovoril o rozpoznávaní reči - ako chcete používať rozpoznávanie reči s nositeľnými. A povedal som, že ak to naozaj chcete urobiť, mali by ste - a počas rozhovoru som si vytiahol poznámky - hovorím mu, že by ste sa mali skutočne pozrieť na rozhovor Steva Whittakera o Filochate z roku 1995. Verím mal niekoľko skvelých detailov o tom, ako sa až 93 percent dňa ľudí trávi v oportunistickej komunikácii. Poskytol som mu všetky tieto podrobnosti. Môj študent sa na mňa len pozrel ako „ako to všetko vieš?“ Je to v poriadku. Vedel som dosť na to, aby som hľadal Steva Whittakera, a potom mi počítač poskytol všetky podrobnosti. Mať takúto podporu v reálnom čase je skutočne úžasné.

Urobili sme to aj predtým, ako som dával nejaké svedectvo na Národnej akadémii vied vo Washingtone, DC o rozširovaní ľudí. Ukázal som im, čo robím. Mal som svojich študentov, študentov, späť v spoločnosti Georgia Tech - takže som bol v DC, študenti zo spoločnosti Georgia Tech počúvali a tiež som všetkým ukázal, že mám živú spätnú väzbu na spoločnosť Georgia Tech. Uviedol som svoje prezentačné poznámky aj poznámky svojich študentov, ktoré navrhovali v reálnom čase.

Takže keď som svedčil, povedali: „Och, mali by ste o tom hovoriť, “ a oni by ma hodili URL, „alebo by ste o tom mali hovoriť“ a vyhodiť veci a poskytnúť ďalšie informácie. Panel, ktorý mi robil rozhovor, začal klásť otázky študentom, nie mne.

Bol som akýsi tvárový človek pre všetky tieto vedomosti tohto konzorcia ľudí z laboratória, ktorí mohli rýchlo odpovedať na otázky, pretože boli odborníkmi v tejto oblasti. Ale mohli vyhľadať informácie oveľa rýchlejšie ako ja. Jednoducho ma použili na rozhovor. Tieto intelektuálne kolektívy, táto schopnosť ísť k odborníkom, schopná vám pomôcť v okamihu, je dosť silná vec. Na druhú stranu, ak sa počas konverzácie pokúsite povedať „Čítať e-maily“, znie to ako idiot. Ľudia nemôžu robiť viac úloh veľmi dobre.

Nie je to viac úloh. Je to naozaj zväčšenie.

Správny.

Vyzerá to, že povaha inteligentnosti, povaha poznania, povaha inteligencie sa zmenila. Musel si si zapamätať všetky tieto veci, aby si s tým hovoril bez toho, aby si odkázal na svoje poznámky, a to už nie je paradigma. Potrebujete iba vedieť, aké otázky sa majú opýtať a byť pripojené k systému, ktorý vám tieto odpovede môže doručiť.

Existuje určité množstvo informácií, ktoré je potrebné internalizovať, aby ste si ich mohli rýchlo vyhľadať a mohli v týchto oblastiach premýšľať, ale pre mnoho ďalších vecí si len chcete svetové vedomosti na dosah ruky a nechať si ich doručiť. keď to potrebujete. Táto myšlienka získavania informácií v čase je veľmi silná. To je to, čo si myslím, že sa stane v najbližších piatich alebo 10 rokoch. Budeme mať týchto inteligentných asistentov, ktorí nám môžu pomôcť za sekundu po sekunde.

To je jedna z vynikajúcich vecí na nositeľných počítačoch. Myslím, že definuje nositeľné počítače, že počítač sa stáva súčasťou nás. Pravdepodobne ste už predtým používali ďalekohľad? Je to niečo, čo si vyzdvihneš. Pozeráte sa na niečo z diaľky. Upravíte zaostrenie. Sú trochu záludné, však? Musíte ich držať v poriadku a zaostriť pri každej zmene z jedného predmetu na druhý. Položil si ich dolu, hore a dole. Nemyslíte si, že váš ďalekohľad je súčasťou vás. Ale tvoje okuliare si obliekaš a používaš ich celý deň. Vidíš cez ne. Nemyslíš na nich. Stačí ich použiť. Čo máme teraz s väčšinou týchto zariadení, väčšinou týchto počítačov, našich smartfónov, tabletov; nie sú súčasťou nás. Sú iní.

Len čo sa zariadenie priblíži k telu, technológia sa náhle dostane z cesty. To je paradox nositeľných počítačov. Priblížením technológie k telu sa to dostane z cesty. Myslím, že tam pôjdeme v budúcnosti. Uvidíme stále viac spôsobov, ako nám môžu technológie pomôcť, urobiť nás silnejšími, nezávislejšími, sebavedomejšími a informovanejšími na základe medzisekundy za sekundu za sekundu. Chcem vidieť, ako títo inteligentní asistenti prechádzajú od niečoho, s čím hovoríte; na niečo, čo je súčasťou teba. Niečo, čo vám veľmi aktívne pomáha od okamihu do druhého.

Myslím si, že koncepcia prežívania sveta prostredníctvom technológie, na rozdiel od samotného používania technológie, je zásadným rozdielom.

To je skúsenosť, na ktorej som pracoval. Veľa z toho je jednoducho rýchlosť prístupu. Larry Page mi povedal: „Je to všetko o skrátení času medzi zámerom a konaním.“ Bol som ohromený. Snažil som sa vyjadriť dôležitosť rýchlosti prístupu k zariadeniu. Tu to urobil v jednej vete. Čas medzi zámerom a konaním je rozhodujúci.

Jedným z ukážok, ktoré robím, je, aby všetci splnili dve úlohy. Po dokončení každej úlohy ich nechám zdvihnúť ruku. Takže poviem niečo ako: „Dobre, koľko je hodín?“ Zdvihnem ruku, pretože práve teraz mám čas na prednej strane obrazovky a moji publikum túto úlohu tiež veľmi rýchlo dokončí. Potom je druhou úlohou, ktorú musím urobiť, zodpovedať otázku ako „kde je Mount Pinatubo?“ Môžem zdvihnúť ruku, pretože položením otázky mi práve teraz dalo odpoveď na moju obrazovku. Je to na Filipínach a vlastne mám na mape malú mapu, kde sa práve nachádza.

Pre moje publikum je také ťažké dostať sa k týmto informáciám rýchlo, takže sa o to ani neobťažujú. Hovorím o technických divákoch ako Xerox Park alebo Georgia Tech alebo Stanford. Takže tu v publiku plnom hlupákov robím experiment s nimi a väčšina z nich sa ani neobťažuje pokúšať sa dostať k týmto informáciám, pretože vedia, že to bude trvať príliš dlho.

Čo ak to dokážeme zmeniť z niečoho, čo trvá príliš dlho, na niečo také ľahké, ako je kontrola času. Zrazu urobíte ľudí oveľa silnejšími. Ak dokážete skrátiť čas úmyslu konať na dve alebo menej sekúnd, ľudia to náhle urobia bez premýšľania. Je ich súčasťou. Akonáhle to prekročí dve sekundy, použitie ide exponenciálne dole a ľudia myslia ako o „inom“.

Predtým, ako sme začali nahrávať, hovorili sme o svätých patróna. Snažili sme sa prísť na to, čo je svätý Stanislava patrónom. Mám v ruke tablet s pripojením na internet. Chcel som informácie. Ale ja som sa neobťažoval otvárať Google, písať to, a hľadať to, pretože mi to bolo jedno. Ale práve vďaka tejto konverzácii sa objavila na obrazovke.

Myslím, že to tu mám. Len som sa spýtal. Toto je jasnejšie. Jednoducho som sa spýtal: „Svätý Stanislaus bol patrónom?“ - odpoveď je Poľsko - a potom sa objavil o pár sekúnd neskôr. Je to dosť silné. Znižuje to druh neochoty snažiť sa o nej nájsť informácie vo svete. Je to pre mňa ako profesora skvelé, pretože sa mi zdá inteligentnejšie ako ja.

Toto sa stalo, keď som bol študentom na MIT. Zobral som si triedu od Justine Cassellovej a bolo to asi tak gesto , Počas preskúmania pred záverečnou skúškou sa spýtala: „Aký význam mal Deixis?“ V počítači som mal všetky poznámky k triedam a pomocou klávesnice som k nemu mal veľmi rýchly prístup. Bolo to skôr, ako sa rozpoznávanie reči stalo veľmi dobrým. Čo by som urobil, je zostaviť svoje vety, aby som mohol nájsť odpoveď včas, aby som mohol dokončiť vetu.

Takže som zdvihol ruku, aby som odpovedal na otázku. Zavolala na mňa. Povedal som: „Na začiatku triedy sme povedali, že význam deixisu je uh, uh, uh, um, “ pretože som urobil chybu. Pustil som klávesnicu. Dostal som sa do nesprávneho režimu E-Macov. Povedal som: „Musím sa k tebe vrátiť. Dostal som sa do nesprávneho režimu.“

Celá trieda sa rozosmiala. Celý čas trávili so mnou a neuvedomovali si, že to robím každý deň. Profesor, ktorý so mnou chodil do triedy, sa naklonil a povedal: „Teraz ho chcem. Robíš to stále, všakže? Môžeš získať informácie tak rýchlo. Zdá sa, že je to tvoja časť.“ “ Áno, to je presne ten dôvod, prečo to robím.

Bolo úžasné, že títo profesori a študenti, s ktorými som roky pracovala, si nikdy neuvedomili, akú pomoc mi toto zariadenie poskytuje. Pri prvom profesionálnom rozhovore prišiel jeden zo starších študentov a povedal mi: „Bol to ten najlepší hovor, aký som kedy počul, ale prečo si nosil počítač?“

Netušila, že zatiaľ čo väčšina ľudí má indexové karty 3 po 5, mám to tu. Vďaka tejto pomoci som sa stal lepším hovorcom. V tej dobe to bolo pre ľudí fascinujúce, že ste mohli stroj používať týmto spôsobom.

Takže urobme malý pivot. Veľa sme hovorili o ľudských odevoch. Teraz pracujete so psami. Vysvetlite prácu, ktorú robíte.

Projekt sa nazýva FIDO, uľahčenie interakcií pre psov s povolaniami. Áno, je to skratka, ale je to roztomilé. Myšlienka je, že tam sú všetci títo pracujúci psi. Psy, ktoré sú alergickými výstražnými psami alebo lekárskymi výstražnými psami, pátracie a záchranné, detekcia bomby, kontrola pašovania alebo poľnohospodárstva na TSA. Títo psi robia veľa práce, ale majú veľmi ťažké komunikovať to, čo cítia a čo si myslia so svojimi psovodmi.

Pred pár rokmi sme mali jedného z našich trénerov, aby sme urobili demonštráciu. Je to diabetik a je jedným z týchto ľudí, ktorí môžu jednoducho omdlieť kvôli nedostatku cukru v krvi. Má psa, ktorý je vyškolený, aby reagoval na túto výstražnú situáciu. Pes ide a nájde najbližšiu osobu, chytí ich a pokúsi sa ich priviesť k nej, pretože čoskoro odíde.

Predtým, ako sa chystá omdlieť, ide a dostane pomoc?

Áno. Je to skutočne cítiť, že zmena v chémii tela od vôňa a získajte pomoc. Stalo sa to pri bezpečnostnej bráne na letisku v Atlante a pes urobil to, čo mal na výcvik - vyšiel na bezpečnostného dôstojníka TSA. Bezpečnostný dôstojník si myslel, že pes je priateľský, ale náš tréner povedal: „Za chvíľu omdlím. Musím si sadnúť.“ Dokážete si predstaviť, že by bolo oveľa lepšie, keby mohol pes hovoriť.

Takže sme urobili vestu, kam pes ide a komunikuje výstrahy potiahnutím vesty. Keď je senzor aktivovaný a hovorí: „Nasledujte ma. Môj majiteľ potrebuje vašu pomoc.“ Samozrejme, keď to prvýkrát vyskúšate, ľudia si myslia, že sú žartovaní, alebo tomu jednoducho neveria. Hovoril si so mnou tento pes?

Je to zvukový záznam ľudského hlasu, ktorý skutočne hovorí túto vetu?

Áno. Musíme psa trénovať tak, aby to robil dvakrát, pretože prvýkrát mu ľudia neveria.

Hovorí pes druhýkrát: „Nie, naozaj! Myslím to tentoraz?“

Nie, iba opakujeme to isté a zdá sa, že to funguje. Stále to skúšame. Musíme to vyskúšať na niektorých netušiacich ľuďoch v Georgia Tech a vidieť, čo hovoria. Ak sa to stane vám, viete, že je to súčasť nášho testovania. Budeme sem chodiť jedného z našich pomocných psov, aby sme predviedli túto demonštráciu.

Ten pes sa dnes popoludní musí naučiť nové triky do 14:00?

V skutočnosti sme si spočiatku mysleli, že budeme mať problémy s privedením psa na SXSW, a tak budeme dnes robiť veľa tréningov, aby sme mohli predviesť, čo chceme.

Myšlienka, že títo psi majú všetky tieto vnímania, ktoré nám dokážu artikulovať, je celkom nová. Mali sme nejaký tlak na našu vestu FIDO a zavolali sme policajnú techniku ​​Georgia Tech s otázkou, či by vesty mohli byť použité pre psy, ktoré čuchajú. Boli sme prekvapení, keď sme sa dozvedeli, že majú psy, ktoré čuchajú, vysvetlili, že psy sa používajú na skenovanie športovísk skôr, ako ľudia vstúpia. "Sme radi, " Oh. Povedzte nám o čuchaní bômb. “Máme záujem naučiť sa viac ,

Ukazuje sa, že psy sú trénované na veci ako pušný prach a C4, ale aj na veci ako peroxidové bomby, ktoré… vonia veľmi odlišne. Peroxidové bomby sú tiež veľmi nestabilné. Ak dostanete jedného z nich, nechcete psa ani psovoda nikde blízko. Pušný prach alebo C4 sú veľmi stabilné a nie je to problém. Polícia Georgia Tech chcela urobiť to, že psy majú vestu s dvoma malými hračkami. Ak pes vonia pištoľový prášok , vytiahnú prášok z pištole a to geo-lokalizuje a ukazuje, kde je pes. Potom vedia, že je tu bomba, ale je to stabilná bomba a môžu psa iba prikázať, aby zostal a bombu štekal, kým ju rýchlo nenájdu.

Ak pes ťahá na druhú stranu vesty, ide o peroxidovú bombu. Vieme, že je to nestabilné, a potom si psa skutočne spomeniete, aby ho dostal z cesty a potom pošlete iný typ jednotky na likvidáciu bomby.

To isté s pátraním a záchranou… a týmito poľnohospodárskymi psami TSA za to, čo voňajú v batožine ľudí. Môžete a dokonca to môžete urobiť pre kontrolu polí poľnohospodárov. Existuje niekoľko vecí, ako je sladká zemiaková hniloba, kde nie je možné zvonku povedať, že existuje problém. Je to nová vec v Severnej Karolíne, ktorá pustoší ich úrodu. Psi to môžu cítiť. Môžete poslať psy a nechať ich tak, aby mohli prehľadávať polia, až kým ich nenájdu. Ak to nájdu, upozornia vás. Vidíte, kde sú. Môžete tam ísť. Môžete vidieť, kde sa nachádzajú, vykopať korene, potvrdiť, že sa skutočne hnije, potom sa zbavíte tej časti poľa a začnete znova.

Ukazuje sa, že akonáhle začneme tieto psy využívať na robenie týchto vecí, viac ľudí vyjde z dreva, objavia sa nové aplikácie. Napríklad psy, ktoré čuchajú hľuzovky.

To som si myslel.

To je jeden z mojich obľúbených. Máme tu fandu, ktorý s nami chce teraz hrať.

Môžem si psa na víkend požičať?

Presne tak.

To, čo sa mi na ňom páči, je to, že dávate ľuďom prístup k vnímaniu psa, ktoré sú v mnohých ohľadoch lepšie ako ľudia, a využívate túto technológiu len na to, aby ste im mohli tieto vnemy oznámiť.

Ich čuch je stokrát lepší ako čokoľvek, čo robíme elektronicky. Majú veľmi dobrý sluch. Ich zrak nie je taký dobrý ako náš, ale vnímajú inak. Ak im len dovolíme, aby skutočne komunikovali lepšie, mohli by sme sa dozvedieť oveľa viac o tom, čo dokážu a ako môžu lepšie pracovať. Psy si, samozrejme, myslia, že je to skvelá zábava. To všetko je pre nich hra.

Poďme na hmatovú spätnú väzbu a hmatové učenie a niektoré systémy, ktoré ste tam urobili. Je pravda, že môžete niekoho naučiť, ako hrať na klavír bez toho, aby ste skutočne hrali piano ?

Je to dosť šialené. Túto vec nazývame pasívnym učením hmatovej pasívnej spätnej väzby. Je to jedna z vynikajúcich schopností, ktorú vám môžu nosiť počítače. Myšlienka, že vás môže naučiť zložitú mechanickú úlohu alebo zložitú manuálnu úlohu bez vašej pozornosti. Je to trochu prekvapujúce. Urobili sme to niekoľkokrát s klavírom.

Predpokladajme, že sa chcete naučiť Beethovenovej knihe „Óda na radosť“. Je to jeden z najjednoduchších, ktorý používame pri našich ukážkach. Nasadili sme si rukavice a rukavice majú na každom prste málo vibračných motorov. Nasadíte si náhlavnú súpravu Bluetooth a jednoducho a znova prehrá skladbu, keď spolu hovoríme, čítate e-maily alebo jazdíte čokoľvek. Ignorujete to a bude to znova a znova prehrávať. Počas prehrávania každej noty klepne na prst, ktorý patrí k tejto note. Po 20 minútach máte prvú stanzu „Óda na radosť“.

Ďalších 20 minút máte druhú. Asi za hodinu a 30 minút od tohto klepnutia sa musíme rozbiť na správne kúsky, ale asi za hodinu a tridsať minút máte celú pieseň. Ak položíte prsty nadol, položíte ruku na klavír, označíme, kde je prvá nota inak to by ste nevedeli a vaša ruka sa stane posadnutou a iba ju prehrá. Je to jedna z týchto vecí, ktoré sa na ňu príliš zameriavate, nemôžete to urobiť, ale ak vás rozptýlim, môžete.

Hráte pieseň a ja si myslím, že hráte zvuky v hlave, aby ste sa pokúsili zasiahnuť rovnaké noty.

Urobili sme to raz s Čad Myersom na CNN. Nemá žiadny hudobný talent. Položili sme ho na ruku, keď sledoval hurikán v Perzskom zálive, a potom ho naživo vydal na CNN. Mohli ste vidieť, ako má táto scéna strach. Tento chlap má každý deň pred 20 miliónmi ľudí, napriek tomu sa bojí javiska, keď položí ruku na klavír. Môžete vidieť, že ani nevedel, čo je to za pieseň. Len na to začne klepať. Nevie, čo to bude, ale keď bude pokračovať, rozpozná melódiu. Zrazu sa jeho rytmus zlepší a potom ho zopakuje. Postupne sa k tomu dostáva lepšie a lepšie. Na jeho tvári ste mohli vidieť toto „oh moje slovo“. Keď som to niekoľkokrát urobil pre seba, poviem, že je to veľmi zvláštne.

To, čo sa teraz snažíme urobiť je číslo ako ďaleko s tým môžeme ísť. Začali sme iba jednou notou, melódiami jednej ruky. Potom môj študent, Caitlyn, prišiel na to, ako robiť akordy. Teraz je našou štandardnou súčasťou Mozartov turecký marec. Pre ľudí, ktorí sú hudobníkmi, viete, že dve ruky sú veľmi odlišné a veľmi odlišné rytmy. Je to dosť zložitý kúsok, aby sa naučil, že je netriviálny. Berieme úplných nováčikov, hádzame rukavice do rúk a po niekoľkých sedeniach hrajú túto zložitú skladbu. Nehovorím, že sú to skvelí hudobníci, ale hovorím, že poznajú postupnosť not. Mali sme záujem potom v čom by sme mohli byť schopní učiť.

Jednou z vecí, na ktorú sme sa začali pozerať, bolo písanie. Keďže sme prišli na to, ako robiť akordy, snažili sme sa robiť Braillovo písmo. Braillovo písmo sa týka týchto šiestich prstov, takže sú to bodky alebo týchto osem prstov, ak ich vytvoríte v predĺženej podobe. Väčšina ľudí sa neobťažuje s učením Braillovho písma, keď starnú, pretože strácajú svoju víziu. Je to tiež skutočná kríza so študentmi. Asi 40 percent z nich sa nikdy nenaučí Braillovo písmo, ktoré nie je natoľko dostatočné, aby komunikovalo s jeho používaním. Učiaci sa Braillovo písmo pre slepého študenta je jedným z veľkých ukazovateľov budúceho pokroku vo vzdelávaní a hospodárskeho úspechu. Títo učitelia Braillovho písma, ktorí učia Braillovo písmo, sú pohybliví. Jednoducho chodia zo školy do školy, pretože neexistuje dostatočný dopyt po stálej učiteľke na konkrétnej škole.

Začali sme sa zaoberať výrobou rukavíc, ktoré dokážu pasívne učiť ľudí. Odpoveď bola áno. Za štyri hodiny vám môžem dať špuntu a tieto rukavice. Zatiaľ čo robíte a môžete robiť, čo chcete, a to sa len opakuje, „Rýchla hnedá líška preskočí lenivého psa.“ Robí každé písmeno naraz a cítite ho na svojich prstoch. Asi po štyroch hodinách od toho poviem: „Čo je to písmeno G, “ a vy viete, že je to tak. Čo je písmeno A, „vieš, že je že. Môžete to nielen napísať, ale aj cítiť. Prstom prejdete cez internet pips a vedieť, ako napísať list. Choď, "Dobre, teraz, ako by som to napísal? Dobre, tak to je G." Na naše prekvapenie to jednoducho funguje.

Čo si myslíte, že sa deje v mozgu, aby sa umožnilo takéto spojenie? Pretože to nie je vedomé a nie je to len intelektuálne? Medzi mysľou a telom je niečo iné.

Je toho veľa, čo naozaj neviem. Ale sú tu nejaké špekulácie od môjho kolegu, ktorý verí, že to, čo sa deje, je to, že zmysel pre dotyk je oveľa skôr evolučný ľudský zmysel, ktorý ľudia dostali evolučne. Takmer všetky zvieratá majú zmysel pre dotyk. Zdá sa, že to zapadá do myšlienky, že dotyk je súčasťou veľmi nízko fungujúcej časti nášho mozgu, veľmi nízkeho typu mozgu jašterice. Možno je to expozícia, ktorá nás skutočne podmieňuje, aby sme tieto vzory rozpoznali. Aj keď sa počas spánku snažíte naučiť niečo ako jazyk, nefunguje to naozaj dobre, pretože zvuk je oveľa vyššia vec v mozgu. Preto sme neočakávali, že experiment s textovými vstupmi bude fungovať. Hudba je veľmi nízka mozgová hmota, zatiaľ čo systémy jazyka sa považujú za vyššiu funkciu mozgu.

Nie je to spojené s jazykom.

Správny. Skutočnosť, že zadávanie učebného textu fungovalo, pre nás bolo prekvapením. Nie sme si úplne istí, ako ďaleko môžeme ísť. Môžeme učiť posunkovú reč? Môžeme učiť tanec? Môžeme pomôcť odborníkom zefektívniť sa? Jednou z vecí, ktorú chceme urobiť, je získať nejaké baseballové džbány a zaznamenať ich pohyby paží a zistiť, či ich dokážeme hrať v ich prestojoch a zvýšiť ich konzistentnosť.

Nemám potuchy, či niektoré z týchto vecí budú fungovať. Jedna vec, ktorú sme vyskúšali, bol Morseov kód. Braillovo písmo je len kľúčová sekvencia. Morseov kód je rytmus.

Zistili sme, že indukčný prevodník môžeme použiť na sklo. Poklepaním na bok hlavy. Teraz to za normálnych okolností funguje tak, že vibruje lebka a vysiela zvuk priamo do slimáka, čím obchádza ušné bubienko. To je dôvod, prečo to môžem nosiť a nechať si trochu varovať a nemám nič, čo by blokovalo moje uši, ale ak váš zásah 15 hertzmi, je to ako klepnutie.

Začali sme školením v štýle „rýchleho hnedého líška preskočiaceho na lenivého psa“, ale teraz v Morseovom kóde len poklepávame na hlavu a veríme tomu alebo nie do 4 hodín - vyzerá to ako magický čas pre abecedu - Väčšina našich účastníkov klesla na 0 chýb… keď ich požiadame, aby napísali S. Môžeme im ukázať pomlčky a bodky na papieri a môžu za to zapísať písmená. Môžeme znova poklepať na bok ich hlavy a môžu vedieť, akú správu posielame.

Takže štyri hodiny a robíme ich, aby to robili počas videohry. Zabezpečujeme, aby sme ich rozptyľovali videohrami. Videohry sa ukázali ako najúčinnejšie rozptýlenie.

Vieme to už veľmi dlho.

To je pravda. Snažíme sa absolvovať prijímacie skúšky. Dajte im porozumenie pri čítaní alebo matematické problémy. Ukázalo sa, že jediným rušivým je videohra.

Je to zaujímavá vec. Dnes sme sa práve rozprávali s Poppy Crum o zvuku a zmiešaní zmyslov. Na výstave je veľa AR; existuje veľa virtuálnej reality. Niektoré z najzaujímavejších vecí sa dejú nielen v jednom zmysle, ale v zbierke zmyslov. Takže v tejto konverzácii sme hovorili o vizuálnom priestore, hovorili sme o zvukovom priestore a tiež o fyzickom. Hmatový pocit. Keď dáte všetky tieto veci dohromady, vyzerá to, že sa naozaj začínajú diať naozaj zaujímavé veci.

To je všetko. Nie je to iba syntéza alebo zmysly. Je to tiež skutočnosť, že je to niečo, čo si môžete nosiť po celý deň. Akonáhle budete mať takú blízkosť k telu, môžete robiť rôzne veci s telom, o ktorom sme predtým nerozmýšľali.

Pasívne hmatové učenie klepaním je jedna, a ďalšia vec, ktorá prišla, bola pasívna hmatová rehabilitácia klepnutím. Bolo to pre nás celkom prekvapenie. Mali sme otvorený dom, ktorý demonštroval našu hru na klavír a jedného z našich kolegov v Shepherdovom centre - ktoré robí veľa práce pri poranení miechy - prišla a povedala: „Ahoj Thad, chcem to pre svojich pacientov.“ Nerozumel som, prečo by chcela, aby ľudia s tetraplegiou cvičili na klavíri. Povedala: „Nie, nerozumieš, Tetraplegia len znamená, že sú postihnuté všetky štyri končatiny. Moji pacienti s čiastočným poranením miechy majú stále nejaké pocity a určitú obratnosť. Stavím sa, že ak si na ne položíme rukavice a vycvičíme ich, aby hrali na klavír, že skutočne získajú nejaké pocity; zlepšia svoje pocity a obratnosť. “

Mala pravdu. Za osem týždňov sme sa učili asi osem rôznych piesní. Účastníci budú mať rukavice dve hodiny denne, päť dní v týždni a potom majú trikrát do týždňa hodiny klavíra. Na konci ôsmich týždňov sa účastníkom, ktorí mali rukavice, darilo oveľa lepšie. V porovnaní s ľuďmi, ktorí práve absolvovali normálne hodiny klavíra, mali výrazné zlepšenie citlivosti a obratnosti rúk.

Táto myšlienka, že môžeme urobiť rehabilitáciu, že môžeme prinútiť váš mozog venovať viac a viac zdrojov na vysvetlenie týchto signálov vychádzajúcich z vašej ruky, je úžasná. Neviem, či ste niekedy mali zlomenú nohu alebo ste rodiča, ktorý podstúpil operáciu bedra, ale rehabilitácia trvá dlho. Je to veľmi nudné a je ťažké robiť si srandu. Je ťažké dosiahnuť súlad. Ak si môžem len obliecť rukavicu a nechať ju rehabilitovať, a mimochodom, dáme ti túto super moc, že ​​sa na jej konci naučíš hrať na klavíri, to je určitá motivácia pre veľa ľudí.

To je to, čo v súčasnosti robíme. Robíme to hneď teraz. Snažíme sa zistiť, či by to mohlo pomôcť pri obnove pocitu rúk po mŕtvici. Ak sa ukáže, že to funguje, potom by sme mohli ročne pomôcť miliónu ľudí. To je veľmi špekulatívne. Nemáme tušenie, či to bude fungovať alebo nie, ale uvidíme.

V poriadku. Poďme na pár otázok, ktoré kladiem všetkým svojim hosťom. Aké technologické trendy vidíte v súčasnosti, ktoré sa vás najviac týkajú? Čo ťa drží v noci?

V noci ma veľmi málo drží. Spím celkom dobre.

Máte tri úlohy.

Mám tri pracovné miesta. Nemám čas spať. Veľa ľudí sa obáva technológií, čo vidíte v tlači. Realita je omnoho nudnejšia ako to, čo vás veľa komentátorov povedie k tomu, aby ste uverili alebo filmy. Myslím, že to, čoho sa najviac obávam, je ozvena, ktorú môžu sociálne médiá spôsobiť. Ľudia môžu veriť pseudovedám. Ľudia môžu viesť k tomu, aby uverili veciam, ktoré jednoducho nie sú pravdivé. Ľudia robia komentáre k mojej práci a ja som rád, to je zle.

S hluchou komunitou robím veľa práce. Ukazuje sa, že výučba znakového jazyka vášho dieťaťa im pomôže rýchlejšie získať jazykové znalosti. Najdlhší čas ľudia verili, že ak učíte posunkovú reč svojich detí, oneskorí to začatie normálnej reči. To je presne zlé. Zdá sa, že výučba posunkového jazyka od narodenia pomáha zlepšiť jazykové zručnosti všetkých.

Väčšina detí nevie slová skutočne tvoriť koherentne, kým nebudú mať 12 mesiacov. Môžu začať tvoriť znaky, viete veci ako mlieko alebo jedlo. Môžu to urobiť o šesť mesiacov. To, že sa deti dokážu vyjadriť, je to, čo im dáva krátkodobý Pamäť. Naučíte sa krátkodobú pamäť naučiť sa komunikovať. Takže mať deti možnosť podpísať sa o šesť mesiacov skôr, ako môžu hovoriť, môže byť výhodou pre ich pamäť a jazyk všeobecne. Pôvodný výskum bol dvadsať rokov, ale teraz si to celkom dobre myslia. Až donedávna dokonca aj lekárska komunita povedala: „Ó, mali by ste učiť nielen hluché deti, ale všetky deti posunkovú reč“. Je to docela mocná vec.

Hráme na tejto návykovej hernej stránke alebo na svojich mobilných telefónoch hru s názvom Pop Sign, ktorá umožňuje vypočúvajúcim rodičom nepočujúcich detí učiť sa posunkovej reči alebo iným rodičom naučiť sa posunkovú reč.

Keď sa teda vrátim k vašej pôvodnej otázke, vidím ďalšie situácie, keď sa ľudia, ktorí sa dostanú do ozveny, zvlášť so zriedkavými znalosťami. Je ľahké prinútiť ľudí ísť zlým smerom.

Z optimistického hľadiska, čo vás najviac povzbudzuje a najviac dúfa?

Páči sa mi to, čo Elon Musk robí, keď sa nás snaží premeniť na solárnu energiu. Som typ človeka, ktorý čaká na sprístupnenie tých strešných škridiel, aby som mohol svoj dom previesť.

Vo svojom vlastnom priestore, nositeľnom výpočte, inteligentný pomocník štartuje. Videnie života ľudí zmeneného dostupnosťou tohto zariadenia nie je len preto, že zlepšuje ich osobný život alebo profesionálny život, ale doslova šetrí životy na stole operačných sál, len kvôli informáciám, ktoré môžeme poskytnúť včas chirurgovi.

Takže táto myšlienka, že budeme mať týchto inteligentných asistentov, ktorí nám môžu pomôcť v sekundách. Nakoniec sa dostávame do štádia, keď sa tieto veci stávajú užitočnými.

Aký gadget, služba alebo zariadenie, ktoré používate každý deň, zmenil váš život? Čo máš najradšej? Google Glass si nemôžete vybrať.

Môžem si vybrať svoj predchádzajúci prototyp foto systém ?

Myslím, že to dovolím.

Systém, ktorý som mal pred Glassom, bol displej Micro Optical SVB6 a klávesnica Twiddler a počítač s batohom. Hardvér nebol menič hry, bola to schopnosť robiť poznámky počas konverzácií a odkazovať na tieto poznámky zmenil môj život. Ak sedím pri stole od víťaza Nobelovej ceny za stôl, chcem si na túto konverzáciu pamätať. Chcem poznať iba päť slov, ktoré podnietia moju prirodzenú pamäť.

Ukazuje sa, že vďaka tejto klávesnici, aby som mohol písať pod stolom a robiť si poznámky o tejto konverzácii, sa z mňa stal oveľa efektívnejší človek a spoločensky ladnejší. Jedna z vecí, ktorú boli moji študenti šokovaní, je, že predtým, ako niekoho uvidím, vytiahnem na nich svoj Rolodex. Je to naposledy, čo sme spolu hovorili a o čom sme hovorili. Naozaj mi to pomáha znova načítať mozog o našich rozhovoroch.

Predpokladajme, že navštevujem starého priateľa. Mám poznámky ako „Hej, áno, dieťa jeho dcéry chodilo na vysokú školu. Študovala geológiu; chcel som ju uviesť do kontaktu so svojou manželkou. Mal by som sa ho opýtať, či sa to stalo.“ Skutočne vám to umožňuje nielen vo vašej profesionálnej kariére, ale aj v sociálnej oblasti.

Áno, veľa sme hovorili o týchto zariadeniach, vďaka ktorým sme inteligentnejší a zdajú sa inteligentnejší. Toto rozšírenie pamäte, kde ste náhle prepojení s ďalším životom, pretože si naň môžete pamätať viac, pretože k nemu máte prístup viac a získať tieto pripomienky v reálnom čase, je to zaujímavá aplikácia.

V prvých dňoch nositeľnej výpočtovej techniky sme urobili tri veci. Urobili sme rozšírenú / alternatívnu realitu, intelektuálne kolektívy a zväčšenú pamäť. Intelektuálny kolektív je druh sociálnych médií. Rozšírená realita je v týchto dňoch zlosťou. Väčšina ľudí si neuvedomuje, že sa to volalo umelá realita predtým, ako sme razili termín alternatívna rozšírená realita. Vlastne ti môžem povedať, prečo sme zmenili meno.

Prečo si to urobil?

V mojich prvých dňoch štúdia tejto umelej reality bolo meno chlapa Myron Krueger, ktorý napísal úžasnú knihu s názvom Umelá realita 2 . Dôrazne odporúčam každému, kto chce porozumieť Augmented Reality. Každopádne si myslím, že to bol Timothy Leary, ktorý začal viesť tlačové rozhovory, kde hovoril o tom, že virtuálna realita a umelá realita sú ako drogové výlety za LSD. V tom čase som bol študentom, ktorý napísal návrh na udelenie grantu, a nechcel som, aby vyhľadali pojem umelá realita a videli, že je spojený s LSD.

Takže som si myslel, že potrebujem nájsť ďalší termín, ktorý by som nevyužil na webe, čo by ma mohlo dostať do problémov, a tak sme sa rozhodli toto vedomé rozhodnutie nazvať Augmented Reality. Našťastie pre ma títo ostatní chlapci v Boeingu sa tiež zaoberali využívaním rozšírenej reality na zostavenie týchto vecí na výrobu káblových zväzkov a výrobu lietadiel a prišli s rovnakým termínom. Takže si myslím, že som mal prvú písomnú verziu a mali prvú publikáciu. Názov Augmented Reality uviazol.

Získali ste grant?

Urobil som. Preto som tu dnes. Ďakujem vám, NDSEG, štipendijnému štipendiu Národnej obrannej vedy a inžinierstva. Keby to nebolo pre vás, nebol by som tu. Nebol by som profesor. Tento grant umožnil môjmu profesorovi prijať ďalšieho študenta a dovolil mi, aby sa stalo nosenie počítačov. Ďakujem vám veľmi pekne.

  • Rýchly posun vpred: Host '' Note to Self 'Manoush Zomorodi Rýchly posun vpred: ‚Note to Self' Host Manoush Zomorodi
  • Rýchly posun vpred: Steve Singh SAP v oblasti automatizácie, podnikania bez hraníc Rýchly posun vpred: Steve Singh SAP v oblasti automatizácie, podnikania bez hraníc
  • Rýchlo dopredu Otázky a odpovede: Ako zostaviť emocionálne stroje Rýchlo dopredu otázky a odpovede: Ako zostaviť emocionálne stroje

Ak vás ľudia chcú sledovať a zistiť, na čom pracujete, ako to môžu urobiť online?

Najjednoduchším spôsobom je ísť do služby Študovňa Google a napísať moje meno. Získate prístup ku všetkým mojim dokumentom a kliknete na najnovšie. Ak chcete vidieť niečo, čo je každý deň viac, ak idete do komunity Google+ na nositeľnom počítači, je to ten, ktorý bežím, snažím sa dať tie najúžasnejšie veci, ktoré sa tu dejú. Aspoň z môjho výskumu a my začneme skúmať niektoré veci, ktoré sa dejú všeobecne.

Rýchly posun vpred: ten začiatočník hovorí google glass, pomáha psom rozprávať