Text 2.0 - Wenn der Text weiß, dass er gelesen wird

Duration	unbegrenzt
Responsible	Prof. Dr. Prof. h.c. Andreas Dengel
Team	DFKI Kaiserslautern Forschungsbereich Wissensmanagement
Project type	Technologie & Prototypen

Wir entwickeln Multimediale Lese-Bücher mit Bild und Ton, inhaltsabhängig und interaktiv, als Kombination digitaler Medien, wie Sounds oder Bilder, mit klassischem Text. Mit einem Eyetracker wird das Leseverhalten der Benutzer analysiert. Das System gibt den Lesern multimodales, kontextsensitives Feedback zu der Textstelle, an der sie sich gerade befinden.Weitere Anwendungsmöglichkeiten:• Unterhaltungsindustrie• Buchsektor• Sprachlernprogramme• Edutainment• Textbasierte Informationssysteme• Relevance-Feedback

Eyebook – Applikationen im Bereich Infotainment

Individuelle Blickdaten des Benutzers werden durch einen mobilen Eyetracker gesammelt, verschiedene Filter entlang der Prozesskette erkennen das Leseverhalten

Die Ergebnisse können mit den Metadaten durch die Blickerkennung in einem semantischen Wiki gespeichert werden und zu einer Verbesserung des Relevance-Feedback führen.

Ein Auszug aus „The Origin of Species“, der um typische Augmented Reading Elemente angereichert wurde. Dazu gehören: Spontane Übersetzungen, intelligente Fußnoten, automatische Lesezeichen, natürlichsprachliche Interaktion (z.B.: „How do you pronounce that?“). Die Applikation läuft in einem Web-Browser und nutzt die Text 2.0 Engine. Die roten Markierungen kennzeichnen die Blickeffekte und -bereiche.

Rohdaten des Eyetrackers

Erkennung der Fixationspunkte und Klassi kation der Sakkaden

Sequenzausrichtung der Sakkaden- und Leseerkennung

Automatische Annotation mit Blickdaten