Приложение TagSense, созданное молодыми исследователями из университета Дюка и университета Южной Каролины (двое из них сейчас проходят летнюю практику в Microsoft Research) использует для расстановки меток на фотографии, сделанные камерой мобильного телефона, информацию с датчиков движения, наклона, освещения – и не только того аппарата, которым сделана фотография, но и всех аппаратов в пределах досягаемости. Программа работает на смартфонах Google Nexus One.
В момент съемки телефон устанавливает связь с близлежащими устройствами и запрашивает информацию с датчиков. (Разумеется, владельцы этих устройств должны сначала включить функции TagSense.) Обработка информации позволяет установить, кто попал в кадр, различить их позы и скорость движений и в итоге даже предположить, какое именно событие запечатлено на снимке. Микрофон зафиксирует, молчат ли люди на снимке или смеются, датчик освещения – сделан ли снимок на улице или в помещении, и все эти параметры будут записаны в системе меток. Впоследствии можно будет найти, например, все снимки, на которых изображены танцующие и улыбающиеся люди или один конкретный человек.