Visual Code Recognition for Camera-Equipped Mobile Phones

In this ETH project we evaluate the feasibility of using the CCD cameras built into off-the-shelf mobile phones to act as sensors for 2-dimensional visual codes. The codes can be attached to physical objects and act as a key to access object-related information and functionality. The use of mobile phones is interesting in this scenario, because mobile phones are ubiquitously available devices providing constant wireless connectivity, and models with integrated cameras are getting more and more popular. Using the integrated camera as a sensor thus offers a natural way of detecting objects in the user's immediate surroundings.

See also:
German non-technical introduction (PDF):

Foto-Handys als mobile Interaktionsgeräte im Alltag – Klicken in der realen Welt
Durch Anvisieren eines aufgedruckten Visual Codes kann Zusatzinformation zum Papieraushang angezeigt werden. Foto-Handys lassen sich auf eine neuartige, interessante Weise als Geräte zur Interaktion mit Gegenständen einer „smarten“ Umgebung nutzen. Indem die Mobiltelefone beispielswiese spezielle „Visual Codes“ erkennen, die auf Produkten oder Plakaten angebracht sind, können sie zugehörige Informationen unmittelbar via Mobilkommunikation aus dem Internet holen und dem Nutzer anzeigen – Dinge „kommunizieren“ so mit dem Menschen. Ferner lassen sich durch den Vergleich schnell hintereinander aufgenommener Bilder die Bewegungen des Handys in rein optischer Weise ermitteln. Das Mobiltelefon agiert damit als persönlicher Mediator zwischen Objekten in der Umgebung und mobilen Informationsdiensten – es wird zu einer Art „Computermaus“, mit der man in der realen Welt surfen und klicken kann. Die hierfür erforderlichen Techniken wurden am Institut für Pervasive Computing der ETH Zürich entwickelt und werden derzeit in Zusammenarbeit mit verschiedenen Firmen in der Praxis erprobt.

Via Emily

StoryCast: simple, digital storytelling with photos and narration

StoryCast is an experimental digital storytelling service that lets people use their camera phones and other mobile devices to easily create and instantly share stories with friends and family. Each story consists of a sort of narrated slide show of photos accompanied by the storyteller's voice.

Plog -- Unlocking the Revolutionary Power of Cameraphones as Storytelling Devices

Plog seizes and extends this exciting new opportunity in a couple key ways:

• Plog makes it easy and effortless to capture and share photos with rich metadata
• Plog automates and enriches the organization and presentation of photos by turning them into stories

Plog is not a photoblog. It is not about publishing a list of pictures on a web page. Plog is about telling stories that are easy to create, fun to watch, and interactive.

Via Dan Gillmor's Bayosphere