Google Glass goes Gamification

GEUG14: Google Glass goes Gamification

This project is an interdisciplinary project involving four departments at Umea University in Sweden. The project aims both to explore how Google Glass can be used in learning situations and to enable students at Umea University to develop tools and pedagogical activities for Google Glass. Within the project, we are exploring how to use Google Glass in specific learning situations where the learning process is designed as a kind of treasure hunt or gamification.

Two young pupils, Elvira (13 yrs. old), and Axel (15 yrs. old) participated in a learning activity where they were using Google Glass to solve challenges and pedagogical problems. The challenges and problems they solved were sent to their Google Glass when they approach a specific area (GPS coordinated information) at some locations along the Umea City Hall esplanade (the treasure hunt was decided to be outside to be able to use GPS). When the pupils successfully solved a challenge, the students were receiving new clues pushed to Google Glass to be able to find the next location where a new challenge or clue was presented.

The university students who developed the GPS coordinated information are enrolled in engineering programme in Interaction and Design. The tool they developed for Google Glass made it possible to set information to specific coordinates and to a specific radius and, so to speak, made it possible to trigger the information feed to be pushed. When Elvira and Axel were approaching the area where the information was set to, the information was pushed to Google Glass. The other student group, enrolling programmes in engineering physics and Industrial economics, developed the challenges and problems for the treasure hunt. The challenges, problems and clues, was also of course connected to existing functionality in Google Glass, the tool that the students from Interaction and Design developed for GPS coordinated information and to content connected to the European City of Culture, for example art, sculptures and poems ( Criteria for the challenges for this student group was also that the treasure hunt should be fun for the pupils to participated in, an interdisciplinary learning activity and that the pupils should need to communicate and share information through Google Glass (and YES the students succeeded in doing this!). The pupils had to solve, among a lot of other things, for example a physical experiment, clues from poems printed on a big wall and clues from the app ‘WallTagger’ (an augmented reality-app) connected to a piece of art. The pupils also had to cooperate, communicate and share information for solving challenges and problems to get the right clue for next location through Google Glass. The two student groups have received help (besides the involved university teachers) from technical experts and mentors from two local companies that is developing IT applications – CGI and Dohi Sweden.

The two student groups worked really hard to make everything possible to implement. They thought it was a tough challenge but very fun. They also passed their courses with distinction. The two pupils, Elvira and Axel, loved participating in the treasure hunt and said that they learned a lot of different things. They would like teaching and learning in schools to be more like this. They expressed that this treasure hunt with Google Glass was a memory for life.

Google Glass goes Gamification is not only a project to provide students to develop tools and pedagogical activities for Google Glass. It is also a contribution to the current debate about using IT in schools. The question is not only about how and when to use IT solutions in teaching and learning and what benefits it will bring, there is also a need to look beyond the contemporary use of IT in schools. What will the future bring? What do we need to do when we are facing new challenges and new opportunities to use for example wearable technology such as Google Glass, and how can and should we handle that?

Some images from the treasure hunt with Google Glass:
Photos: Thomas Mejtoft

The treasure hunt begins.

DSC_0106 kopia
Elvira and Axel needed to communicate and help each other to solve this clue.

‘Glass’ means icecream in Swedish 🙂

The students are coordinating the treasure hunt. In the background the symbol of the European City of Culture – ‘The heart’.
A journalist is interesting in what Axel is about to do. Here he is using the augmented-reality-app WallTagger to get the next clue.The piece of art he is pointing the app towards is named ‘Ok, glass’ by the artist Camilla Hällgren. You´ll find it here >>

The students are trying out functionalities.

The two student groups are discussing and planning together.

One of the student groups are presenting their projects for their classmates and teachers at the university.





Google Glass in Dentistry Programme at Umea University

GEUG14: Google Glass in Dentistry Programme at Umea University, Sweden

We started to integrate Google Glass as a device in dentistry program at Umea University in Sweden in 2013. In this project we particularly focused on those activities where dentist students have their clinical practice with the patients. We are exploring how Google Glass may facilitate the communication between the students and their teacher during the student’s clinical practices with the patient.

  • Before Google Glass. The dentist students had patients in a booth. When a student needed help from the teacher, they wrote the number of the booth on a whiteboard where they are located with their patient so the teacher would know, looking at the white board, that a student needed help with something.
  • With Google Glass. The dentist students have patients in a booth. The students use mobile devices (e.g. media tablets) and the teacher uses Google Glass to communicate with each other. The students send emails or a Hangout message to the teacher that describes where they are, in which booth and what they need help with. The teacher gets a notification through a sound, while wearing Google Glass that means that one of the students has sent a message. The teacher is then able to read the message through Google Glass and reply to the student by a voice message.

During this project, both students and the teacher expressed that the communication between students and teacher has been facilitated, improved and decreased waiting time through the integration of tablets and Google Glass.

The students described that It feels good not to leave the patient alone when they need help from the teacher, they got help faster than before and specifically they got in contact with the teacher faster since the teacher is able to reply to the students messages directly from Google Glass regardless of where in the clinic the teacher is. The students know when they can expect help from the teachers replay and can start with something else meanwhile waiting for help. The students also used Hangout to send images to the teacher. In some cases, when looking at an image a student has sent, the teacher replayed from Glass and didn’t need to go to the booth. The teacher could instead go to another student that needed her help more.

The teacher in this project pointed out that it is possible to, for the first time, prioritize which student need help first due to the content of the messages sent via the mobile device to Google Glass. Before, when only the booth number was written on the white board and not what kind of help the student needed, it was not possible for the teacher to make a priority. The teacher also said when helping a student it is possible to know if there are another student waiting for help or at least want to be in contact with the teacher since a notification of a sound is given when a message is sent. Sometimes when the teacher needed to treat a patient herself and of course need her both hand, she could replay to another student that was asking for help through the voice-controlled Google Glass.




Google Glass goes Gamification

Nu börjar vi närma oss den tidpunkt då Elvira 13 år och Axel 15 år ska få prova att använda Google Glass och lösa spännande utmaningar i projektet #tagga2014 (Läs mer om projektet här). För studenternas del innebär det också slutfasen på ett intensivt arbete med att få allt att klaffa. Verktyget som studenterna från Interaktion och Design utvecklar för Google Glass ska anpassas till brillorna och utmaningarna som studenterna vid Teknisk fysik och Industriell ekonomi skapar för Elvira och Axel ska anpassas till befintliga funktionerna i Google Glass. De har verkligen gjort ett fantastiskt arbete! Jag är så imponerad av deras hårda slit och det har varit en ren fröjd att få samarbeta med dessa ambitiösa studenter. Det finns verkligen hopp för framtiden!

Eventet som sker inom Kulturhuvudstadsårets ram går av stapeln den 27 maj kl. 15.00.
För den nyfikne finns det möjlighet att följa med på äventyret. Samling vid Kulturhuvudstadshjärtat, Rådhusesplanaden kl. 15.00.

Nedan visa några bilder från studenternas planering och tester i projektet.

Bild1: Elvira och Axel är nu redo. De har nu tränat och kan hantera Google Glass galant. Riktiga proffs!
Elvira #selfie                                                   Axel #selfie

Bild 2: Brainstorming om vilka utmaningar som är lämpliga.
Studenterna från Teknisk fysik och Industriell ekonomi.

Bild 3: Möte mellan studenterna från Teknisk fysik, Industriell ekonomi samt Interaktion och Design. De båda grupperna uppdaterar varandra om arbetet som båda parterna gjort.
Från vänster: Andreas Bolzyk, Andreas Blanck, Josefin Nilsson, Josef Larsson, Malin Östman, Lovisa Lund, Elin Nilsson och Jonas Gustafsson (ryggen mot kameran).

Bild 4: Test av glasögonens olika funktioner.
Josef, Malin, Lovisa, Josefin och Andreas.

Bild 5: Mittpresentationen då vi presenterade, under 15 minuter, vårt arbete. Dvs, vad projektet går ut på, projektprocessen, var vi var just då i projektet och lite annat smått och gott.
Josef Larsson, Mattias Tjernqvist, Lovisa Lund, Josefin Nilsson, Malin Östman och Andreas Blanck.

Att skapa lärande utmaningar i kombination med användning av Google Glass och platsberoende information

Under våren 2014 leder jag ett projekt med Google Glass som handlar om att utforska hur Google Glass kan användas i lärsituationer. Wearable technology och mer specifikt just användning av Google Glass i utbildningssyfte är ett outforskat område inom såväl grundskolan som inom högre utbildning. Det här projektet syftar till att utforska hur Google Glass kan användas som stöd i lärsituationer. Syftet är också att utforska hur Google Glass i kombination med platsberoende information och augmented reality kan användas för att stärka skolelevers lärande och att skapa nyfikenhet och lust till lärande. Vidare är syftet att erbjuda studenter vid Umeå universitet möjlighet att utveckla verktyg och pedagogiska aktiviteter för Google Glass.

I detta projekt utforskas alltså användning av Google Glass i en specifik lärsituation där lärprocessen utformas som en typ av skattjakt eller gamification.

Två skolelever, Elvira 13 och Axel 15 år, kommer att få använda Google Glass, få utmaningar/problem pushat till glasögonen (via GPS) när de närmar sig ett specifikt område (platsberoende information). Utmaningarna som pushas till glasögonen ska de sedan lösa. Eleverna ska alltså lösa utmaningarna/problemen och få ledtrådar för att ta sig till nästa ställe där nästa utmaning eller ledtråd kommer att presenteras.

Detta projekt är en del av ett större övergripande samarbetsprojekt mellan tre institutioner/enheter vid Umeå universitet och lokala företag. Vid Umeå universitet medverkar interaktiva medier och lärande (IML), Interaktion och Design, Teknisk fysik och Industriell ekonomi. Lokala företag som medverkar i projektet är CGI, Algoryx och Dohi Sweden.

Studenter vid Interaktion och Design kommer att utveckla ett verktyg för Google Glass där man kan lägga in och få platsberoende information pushat till dem, d.v.s. göra det möjligt att binda information till fysiska platser genom att ange koordinater som informationen ska bindas till samt en radie inom vilken informationen kan visas.

Studenter i kursen Ingenjörens roll i arbetslivet ska alltså skapa de utmaningar/problem som skoleleverna ska lösa. Dessa utmaningar ska kopplas ihop med befintlig funktionalitet i Google Glass samt till den tekniska lösning för platsberoende information som studenterna vid Interaktion och Design utvecklar.

De tre lokala företag som är involverade i projektet är främst kopplade till studenternas arbete. Algoryx kommer att agera i rollen som tekniskt sakkunnig i projektet för de medverkande studenterna som ska skapa utmanignarna. Företaget Dohi Sweden är mentorer för studenterna vid Interaktion och Design som utvecklar den tekniska lösningen för platsberoende information. Även företaget CGI har en koppling till projektet eftersom deras applikation, WallTagger (beskrivning längst ner på den länkade sidan), kommer att användas i en av utmaningarna.

Det är otroligt spännande att se hur det hela kommer att utvecklas. 27 maj kl. 15.00 ska applikationerna vara färdiga och eleverna ska få testa  i skarpt läge 🙂
Vi samlas vid Kulturhuvudstadshjärtat vid Rådhusesplanaden.

Google Glass i tandläkarutbildningen

I januari inleddes vårt andra pilotförsök med att använda Google Glass i tandläkarutbildningen. Denna gång var det vid handledning av studenter som har egna patienter. Studenterna läser termin 7 i utbildningen. I pilotförsöket ingick 18 studenter, 10 tjejer och 8 killar, och en lärare. Läraren använde Google Glass och studenterna fick kommunicera med läraren via en iPad. Studenterna arbetade två och två varav en av dem hade sin patient medan den andre fick assistera.

När studenterna behövde komma i kontakt med läraren, om de exempelvis behövde hjälp av något slag eller behövde ett godkännande, kontaktade de läraren via mail eller genom att skicka ett meddelande via Hangout, som är Googles variant av Skype. Tidigare hade studenterna enbart skrivit upp det nummer på det bås som de höll till i via en Whiteboard som satt ute i korridoren. Studenterna tyckte det var fantastiskt roligt att få prova ett helt nytt sätt att kommunicera med läraren.

De första erfarenheterna:

  • Studenterna tyckte bl.a. att det var skönt att inte behöva lämna patienten för att gå ut i korridoren för att skriva upp sig på White boarden utan kunde skicka ett meddelande till läraren direkt från det bås de höll till
  • De flesta studenterna tyckte att de fick hjälp snabbare eftersom läraren kunde svara på meddelandet direkt från Googlebrillorna
  • Läraren kunde göra en prioritering eftersom studenterna skrev vad de hade för ärende. Tidigare hade studenterna alltså enbart skrivit upp sitt båsnummer på White Boarden
  • Eftersom läraren fick en ljudnotifikation när någon skickade ett meddelande så var det möjligt för henne att veta att någon väntade på att få hjälp
  • När studenterna skickade meddelande via Hangout så var det möjligt för dem att även skicka med en bild vilket de menade skulle kunna ha en betydande funktion. De menade att läraren skulle kunna bedöma om de exempelvis behövde ta fler röntgenbilder av en patient även om läraren inte befann sig i närheten. Det skulle kunna minska väntetiderna.
  • Dock så är mobila enheter typ iPad och Google Glass, som användes i detta försök, beroende av att det trådlösa nätverket fungerar tillfredställande. När signalen fluktuerade, d.v.s. gick upp och ner, gick inte meddelanden fram. Det medförde att studenterna blev lite osäkra på om läraren verkligen hade fått deras meddelande eller inte. Det medförde i sin tur att läraren fick vara noga med att svara på studenternas meddelande så fort som möjligt så att de skulle veta att deras meddelande verkligen hade kommit fram.

Både studenter och lärare såg flera framtida möjligheter med att använda Google Glass både i tandläkarutbildningen men även som praktiserande tandläkare. Några saker som de nämnde var exempelvis att det skulle vara möjligt att rådfråga en kollega om ett problem utan att behöva lämna patienten eller att det är möjligt att föra anteckningar med enbart rösten med Google Glass.

Här nedan visas några bilder från pilotförsöket i januari.






Invigningen av kulturhuvudstadsåret

Helgen den 31 januari till 2 februari var det invigning av det europeiska kulturhuvudstadsåret här i Umeå – Umeå2014. Halva Umeås befolkning tillsammans med inresta från hela världen skapade ett böljande, pulserande hav nere på stan. Invigningsceremonin Burning Snow ute på Umeälven var startskottet och lockade till sig ca 55 000 besökare. För den som missade showen går den att se via SVT Play här>>

Själv besökte jag alla de fantastiska isskulpturerna nere vid Rådhustorget och fotade dem med Google Glass. En ny funktion sedan en tid tillbaka gör att det är möjligt att ta ett foto enbart genom att blinka med högerögat. En funktion som jag uppskattade mycket en eftermiddag som denna då det var riktigt kallt och otroligt mycket människor i omlopp. Vid skulpturerna var det mycket trångt och det kändes helt fantastiskt enkelt att bara kunna sticka fram huvudet mot en skulptur, blinka till och så hade jag tagit ett kort. Att jag dessutom slapp ta av mig vantarna för att kunna ta ett foto eller filma gjorde inte saken sämre.

Här nedan är några foton från invigningshelgen tagna med Google Glass.

20140201_163912_959_800 20140201_163751_930_800 20140201_163745_493_800 20140201_163715_122_800 20140201_163439_884_800 20140201_163333_777_800 20140201_161647_941_800 20140201_161048_008_800 20140201_160251_439_800 20140201_154350_263_800 20140201_154253_765_x_800 20140201_153618_956_800 20140201_153539_269_800

New York, New York

Nu var det verkligen ett bra tag sedan jag uppdaterade bloggen. Man kan säga att en Australienresa kom i vägen 🙂 Mer om denna resa kommer lite längre fram.

I detta blogginlägg tänkte jag fortsätta på föregående historia och berätta om när jag åkte till New York och hämtade dem. Detta har jag tidigare skrivit om på Umeå universitets personalblogg, men tänkte att det är på sin plats att även publicera inlägget här.

Som sagt äntligen var då tiden kommen när det var dags för mig att resa till New York för att hämta mina Google Glass. Som jag hade väntat! Inte en dag för tidigt med andra ord. Den 4 juli satte jag mig på planet i Stockholm och åtta timmar senare landade jag på Newark-flygplatsen. Jag hade inte haft en tanke på då jag bokade tiden hos Google eller flygresan för den delen, att jag skulle komma till New York på nationaldagen, 4th of July
Alltså, den helg som är den absolut mest besökta under hela året. Vad tänkte jag på? Det visar i och för sig på hur upptagen jag hade varit med att försöka få alla bokningar att gå ihop. Nåja, tänkte jag, när jag äntligen hade kommit på plats. Lite trängsel får jag väl stå ut med.

Under vistelsen i New York bodde jag alldeles i närheten av Empire State Building. Empire State Building var upplyst med ett färgsprakande ljusspel under större delen av kvällen. New York bjöd även på ett fantastiskt skådespel med fyrverkerier nere vid Hudsonfloden. Helt fantastiskt! Detta hade jag inte en aning om att jag skulle få uppleva.

Dagen efter det stora firandet var det som sagt äntligen dags att hämta mina Google Glass. Oj, vad nervös jag var. Tänk om de skulle säga att jag inte skulle få hämta dem och att alltihop bara hade varit ett misstag? Tänk om jag hade åkt hela denna långa väg förgäves? Hjärtat bultade hårt i bröstet hela vägen upp i hissen och fram till receptionen där jag anmälde mig och visade fram passet. Dunk, dunk, dunk… Jag kunde knappt andas.

Personen som satt i receptionen framför mig, naturligtvis med Google Glass, frågade efter mitt namn och granskade mitt pass. Dessa minuter kändes som en hel evighet. Till slut tittade hon upp, log mot mig och sa ”Welcome to Google”. Jag kunde andas ut. Åtminstone för en liten stund.

Jag fick sätta mig i en soffa och vänta på den instruktör som skulle visa mig hur Google Glass fungerade. Efter en liten stund kom en kvinna och ropade upp mitt namn och visade mig till det bord där vi skulle hålla till. Hon frågade mig om de fick bjuda på champagne. Självklart svarade jag ja. Detta var ju sannerligen något att fira! Google Glass! Helt overkligt! Jag fick nypa mig i armen flera gånger för att förstå att detta inte bara var en dröm. Jag var verkligen här.

Först fick jag prova de olika färger som Google Glass tillverkas i och välja den färg som jag önskade ha. Jag valde ett par svarta eller Charcoal som Google kallar färgen. Hade någonstans läst att de vita, Cotton, kunde bli lite solkiga efter ett tag. Ett par solkiga Google Glass ville jag verkligen inte ha. Efter utprovningen och val av färg kopplades mina egna Google Glass ihop med mitt Google-konto och till telefonen för att jag alltid ska ha åtkomst till Internet även när jag är ute på vift, så att säga. Jag fick även lära mig hur man tar foton och filmar m.m.

När hela besöket, som varade nästan två timmar, var över lade jag försiktigt mina Google Glass i kartongen och i väskan som hörde till. Jag höll väskan krampaktigt under armen medan jag med snabba steg gick tillbaka till hotellet. Hjärtat dunkade igen och jag var fullkomligt livrädd att något skulle stjäla dem på vägen tillbaka till hotellet. Blotta tanken på att bli bestulen gjorde att jag ökade steglängden ännu lite till. Såg framför mig hur jag utstrålade lång väg att jag precis hämtat ett par Google Glass. Jag var ju onekligen inte den första om jag säger så. Sammanlagt har Google i första omgången plockat ut ca 10 000 personer till sitt Glass Explorer Program. Efter expansion av programmet har antalet ökat avsevärt.

Här nedan visar jag lite bilder från det spännande äventyret i New York. Klicka på bilderna för en något större version.

Färgsprakande ljusspel – Empire State Buildingempirestat_build

Googles kontor i New York
googleVäggprydnad med Google Glass typiska typsnitt
tavlaOlika färger att välja mellan
fargerNågot nöjd!
spegelHär får jag instruktioner om hur jag ska använda Google Glass
instruktionFörsta fotot taget med Google Glass – #throughglass

Första filmen med Google Glass

Hur började det hela egentligen?

Nu när bloggen har varit i gång ett tag kom jag på att jag inte har berättat hur hela historien med Google Glass egentligen började.

Det hela började med att jag en kväll i februari satt i soffan hemma och surfade på webben för att få veta lite mer om ryktet som sa att Google höll på att utveckla ett par röststyrda glasögon, Google Glass. Är det möjligt? Hur fungerar ett par sådana? Av en ren slump upptäckte jag att Google hade utlyst en tävling via twitter där de sökte efter personer som ville prova dem. Tävlingen innebar att man skulle beskriva vad man skulle använda glasögonen till. På 140 tecken knåpade jag efter mycket möda och stort besvär ihop en kort beskrivning av vad jag skulle undersöka om jag hade ett par. Jag skickade sedan iväg mitt tweet (klicka på bilden för en större version).

Screenshot 2013-11-04 10.38.42

Sedan tänkte jag inte så mycket mer på det och dagarna gick, men så på påskafton fick jag ett meddelande via twitter som löd:

Screenshot 2013-11-04 10.38.53

Hjärtat började bulta. Är det verkligen sant eller är det ett aprilskämt?! Jag vågade inte tro på att jag verkligen skulle få ett par Google Glass. Det var för bra för att vara sant. Naturligtvis berättade jag för familjen och de närmaste kollegorna på jobbet, men i övrigt höll jag det hemligt om det inte skulle gå hela vägen.

Tiden fram till det att jag fick besked om när jag kunde hämta mina googlebrillor kändes som en evighet. På midsommarafton mitt i en silltugga kom äntligen det efterlängtade beskedet (klicka på bilden).

Screenshot 2013-11-04 10.40.26

Efter detta fantastiska och spännande meddelande började en hektiskt tid. Jag skulle betala glasögonen (tro inte att de var gratis nej), boka tid på Googles kontor, boka resa och allt annat som hör till ett sådant hastigt beslut. Det var nämligen så att man var tvungen att hämta dem personligen på något av Googles kontor i New York, San Francisco eller Los Angeles. Jag valde New York. Efter mycket om och men hade jag äntligen lyckats boka en tid fredagen den 5 juli och dessutom lyckats boka en flygresa som stämde.

Puh! ”Nu börjar äventyret”, tänkte jag.

Studiebesök på neuroröntgen

Häromdagen hade jag förmånen att få besöka neuroröntgen här i Umeå. Jonas Bergdahl visade mig hur han jobbar i vardagen. En fantastisk upplevelse att se hur det går till och att få beskrivet hur  den tekniska utrustning används vid undersökning (neuroröntgen), angiografi dvs. det sätt man gör diagnostiken på och ser vad som händer samt behandling (röntgenstyrda botande ingrepp s.k. neurointervention) av exempelvis stroke. Det går att vända och vrida på bilden så att det är möjligt att se kärl från alla håll. Det går till och med åka inuti i ett kärl för att se om det finns något i kärlet som inte ska vara där.

Jonas visade bilder på kärl i hjärnan och hur det kan se ut när han exempel “klistrar igen” ett blodkärl som läcker. Om jag förstår det hela rätt så för neuroradiologer in en smal kateter via ljumsken. I ena änden på katetern finns en liten knapp och när neuroradiologen trycker på knappen utlöses en liten droppe klister i andra änden som klistrar igen blodkärlet. Det går också att plocka ut en propp i ett kärl och därmed återställa blodflödet i hjärnan. Genom denna metod kan alltså även bråck och förträngningar i kärlen behandlas. Helt fascinerande! Naturligtvis var det ingen riktigt patient vid tillfället utan Jonas visade exempelbilder. I en av bilderna nedan visas ett kärl i förstoring på skärmen. Kärlet är i verkligheten ca 3-4 mm i diameter.

Här finns en film som beskriver verksamheten >> (Youtube)

Alla bilderna nedan är tagna med Google Glass (#throughglass).
Klicka på bilden för att se en något större variant.

bild1_2bild2 bild3 bild4 bild5 bild6 bild7 bild8