Vývoj asistivních technologií je nákladný, protože každý jedinec s postižením má unikátní potřeby.

Například u pacientů se syndromem uzamčení (kdy nemohou přímo komunikovat) lze identifikovat personalizované pohybové možnosti, jako je používání úst, rukou nebo podobných metod. Aplikace také musí zohlednit specifické požadavky, včetně omezení rozsahu pohybu, nekontrolovaných pohybů (tiků) a dalších faktorů.

Také speciální hardwarové řešení pro zpracování obrazu nemusí být levné.

• Použijeme sjednocený software pro zachycení dat o obličejových a tělesných pozicích, gestech, zvucích atd.
• Tento software spustíme na chytrém telefonu a tím využijeme jeho procesor pro zpracování obrazu a zvuku, stejně jako jeho kameru a/nebo mikrofon. Můžeme také potenciálně využívat další senzory jako GPS, akcelerometr, gyroskop, světelné senzory atd.
• Definujeme API (Application Programming Interface), které mohou ostatní vývojáři použít k vytváření svých aplikací. API poskytne proud textových dat.
• Představíme několik ukázkových aplikací, abychom demonstrovali celý koncept využití dat z API.

Nikdy nepřenášíme video a audio data mezi aplikacemi.

Všechna data jsou přenášena pouze jako obecné textové informace. Například 2D souřadnice jednotlivých kloubů ruky nebo textový popis gesta (například "otevřená dlaň", nebo "pěst").

Účelem projektu je zveřejnit celé API (tj. podrobný popis datového formátu) - připravené pro uživatelské aplikace. Kdokoliv si může ověřit, jaké informace jsou přenášeny.

Stručně řečeno, to znamená, že jsou přenášena stejná data, ať jste oblečeni nebo ne.

Pokud aplikaci stále nevěříte, můžete ji otestovat v bezpečném prostředí a poté jí odepřít přístup ke kameře a mikrofonu.