smartARM: sztuczna inteligencja rewolucjonizuje protezy bioniczne
Tradycyjne protezy bioniczne często wymagają od pacjentów ręcznego przełączania trybów chwytu w zależności od podnoszonego przedmiotu, co sprawia, że codzienne czynności są wieloetapowe i uciążliwe. Kanadyjski startup smartARM postanowił wyeliminować ten problem. Firma z Toronto rozwija oparty na wizji maszynowej prototyp bionicznego ramienia, w którym sztuczna inteligencja automatycznie analizuje otoczenie i dobiera odpowiedni rodzaj chwytu, co pozwala na płynne działanie bez konieczności świadomego sterowania przez człowieka.
DINOv2 i kamera w dłoni
Kluczowym elementem technologii opracowanej przez smartARM jest aparat fotograficzny wbudowany bezpośrednio w dłoń protezy. Urządzenie „widzi” obiekty w swoim zasięgu i rozpoznaje je, wykorzystując DINOv2, udostępniony w modelu open-source system wizyjny od firmy Meta. Zastosowane oprogramowanie pozwala na bezpośrednie odczytywanie cech wizualnych obiektów bez wcześniejszego zaprogramowania pod konkretne przedmioty.
W przeszłości proces uczenia protezy obsługi nowych rzeczy mógł trwać tygodniami. Dzięki nowemu podejściu, system potrafi zaadaptować się do nowych zadań niemal natychmiast, opierając się zaledwie na kilku zdjęciach referencyjnych.
Ekosystem Meta AI Glasses
Aby zapewnić protezie jeszcze lepsze rozumienie intencji użytkownika, smartARM zintegrowało swój sprzęt z inteligentnymi okularami Meta AI Glasses. Urządzenie to pełni funkcję opcjonalnego dodatku, który przy wykorzystaniu narzędzia Meta Wearables Device Access Toolkit dostarcza systemowi dane z perspektywy pierwszej osoby. Dzięki temu sztuczna inteligencja otrzymuje szerszy kontekst na temat tego, z jakim przedmiotem osoba nosząca protezę chce wejść w interakcję.
Dodatkowo, twórcy przewidzieli możliwość głębokiej personalizacji. Użytkownicy mogą samodzielnie dodawać do bazy nowe obiekty za pomocą aplikacji na smartfony, co pozwala precyzyjnie dopasować działanie urządzenia do ich codziennych potrzeb.
Rozwiązanie, które działa od pierwszego założenia
Projekt, który zyskał początkowy międzynarodowy rozgłos w 2018 roku po zwycięstwie zespołu inżynierów w prestiżowym konkursie Microsoft Imagine Cup, ma na celu zdemokratyzowanie branży bionicznej. Tradycyjne rozwiązania protetyczne nierzadko wymagały od pacjentów długiego treningu. W tym przypadku sprzęt ma działać poprawnie już przy pierwszym założeniu.
Przełomowe podejście doceniają sami użytkownicy. Shaquem Griffin, były zawodnik NFL i wieloletni użytkownik technologii smartARM, jednoznacznie ocenia ten kierunek rozwoju: „Ze wszystkich technologii, w które jest to wyposażone, najbardziej liczą się dla mnie skalowalność i dostępność. To jest przyszłość protetyki konsumenckiej”.
Podobną filozofię projektowania wyznaje Hamayal Choudhry, założyciel i CEO smartARM. Zwraca on uwagę na to, że doskonały sprzęt mechaniczny to nie wszystko. „Zbudowanie sprawnej dłoni to tylko część wyzwania. Równie ważne jest uczynienie jej intuicyjną w użyciu” – zaznacza Choudhry. Jak tłumaczy, wspierając ramię w rozpoznawaniu codziennych obiektów, firma chce stworzyć warunki, w których pacjenci skupią się po prostu na celu, który chcą osiągnąć, a nie na tym, jak obsługiwać swoją protezę.
