Naukowcy z Carnegie Mellon University tak odkryli rozwinięty system, który umożliwia przedmiotom codziennego użytku poruszanie się autonomicznie i przewidywanie działań użytkownika. Technologia integruje kamery, modele sztucznej inteligencji i małe platformy na kółkach, aby umożliwić proaktywne przemieszczanie przedmiotów takich jak kubki do kawy, zszywacze i podstawki. Według dr Violet Han, takie podejście ma na celu zwiększenie wygody bez wprowadzania dodatkowych dedykowanych robotów do istniejących środowisk. student CMU i główny autor artykułu na temat badań. Naukowcy zamontowali przedmioty, w tym piórnik, zszywacz i kubek do kawy, na platformach na kółkach kontrolowanych przez system sztucznej inteligencji w laboratorium struktur interaktywnych na Uniwersytecie Carnegie Mellon. Każda platforma wykorzystuje mikrokontroler obsługujący technologię Bluetooth z silnikami i bateriami zapewniającymi mobilność. Same obiekty z natury nie zawierają sztucznej inteligencji; raczej centralny system sztucznej inteligencji nadzoruje całe środowisko. System wykorzystuje kamerę do przesyłania strumieniowego klatek obrazu do modeli AI, które przetwarzają i identyfikują bieżące działania oraz odpowiednie obiekty. Duże modele językowe z możliwością wnioskowania przewidują kolejne działania. Wbudowana w system baza wiedzy informuje go o typowych interakcjach człowiek-obiekt, takich jak dla wygody ustawienie uchwytu kubka w stronę użytkownika. Badania te dotyczą wyzwań związanych z większymi robotami humanoidalnymi, które obejmują potencjalne uszkodzenia spowodowane awariami, problemy związane z wyglądem przypominającym człowieka oraz trudności w osiągnięciu niezawodnej zręczności. Alexandra Ion, adiunkt w Instytucie Interakcji Człowiek-Komputer na CMU i kierująca Laboratorium Struktur Interaktywnych, zauważyła, że istniejące środowiska są często budowane przy założeniu ludzkiej zręczności. Choć technologia ta „nie jest aż tak daleka” od wdrożenia, zdaniem Iona wdrożenie zależy od społecznej akceptacji kamer sufitowych. Potencjalne zastosowania obejmują tackę na klucze potrząsającą kluczami, gdy użytkownik ma zamiar wyjść bez nich, lub system sztucznej inteligencji przesuwający ukryty zszywacz w polu widzenia. Kwestie związane z prywatnością i bezpieczeństwem, takie jak korzystanie z kamer umieszczonych nad głową, stanowią nowe wyzwania wymagające rozwiązań politycznych i regulacyjnych, a także modeli działających na lokalnym sprzęcie niepołączonym z Internetem. Dyskusje na temat uruchamiania przedmiotów, takich jak noże, podkreślają względy bezpieczeństwa. Naukowcy skonfigurowali ruchomy nóż tak, aby jego ostrze było zawsze skierowane w stronę przeciwną do ludzi. Celem jest zapewnienie, że działania robotów w środowisku domowym będą sprzyjać bezpieczeństwu i być zgodne z intencjami użytkownika, umożliwiając robotom zrozumienie preferencji użytkownika, powiedział Han.
