O sistema baséase na comunicación entre humanos e máquinas. InterAmi é un proxecto que pretende mover o guindastre con voz e xestos. Paira iso, o guindastre conta con dúas cámaras infravermellas que recollen a posición e os xestos dos operarios. Os operarios en xeral levarán catro marcadores retroreflectantes en brazos, cabeza e partes do corpo. Un foco de luz infravermella iluminará estes marcadores e as dúas cámaras que identifican este tipo de luz recibirán os movementos do corpo, regulados internacionalmente. Por exemplo, ao estirar o brazo dereito significa que o guindastre deberá moverse nesa dirección.
En definitiva, as cámaras recollerán imaxes das que extraerán a información que ofrecerán os marcadores de luz infravermella. Os puntos obtidos en cada imaxe servirán paira determinar a localización espacial do usuario. Desta forma, a aplicación pode detectar se o usuario está a facer algún xesto ou ou non, e si identifícase un xesto, o proceso seguiría adiante.
Ao mesmo tempo, as instrucións dos operarios ou comandos de voz serán solicitados pola aplicación coa axuda dun micrófono de laringe, mesmo en contornas ruidosas. Estes micrófonos presentan una maior inmunidade ao ruído ambiental que os micrófonos convencionais.
Ambos os sinais, voz e imaxe, compleméntanse entre si, e o dispositivo non realiza ningunha acción se non recibe a mesma orde a través de ambos os sinais. En definitiva, ambos os sinais están sincronizadas en todo momento. Como medida de seguridade, o sistema compara os comandos de xesto e voz: se se observa que dan a mesma orde, este sinal será enviada ao guindastre e cumprirá o movemento indicado polo guindastre.
O movemento dos brazos e a orde verbal deben producirse simultaneamente e nun tempo determinado. Pola contra, o guindastre non reaccionará. Desta forma pódese dicir que se reducen os riscos laborais. De feito, o sistema non realiza ningún movemento salvo que o usuario portador do marcador indíqueo.
O sistema centrarase nas instalacións industriais e recollerá a información do persoal que se atope en máis dunha das zonas de devanditas instalacións. Por iso, deberá cumprir una serie de requisitos: por unha banda, o sistema deberá prestar atención aos comandos gestuales dos empregados, talles como a posición, o movemento das mans e a voz; por outro, o sistema deberá ser capaz de traballar en múltiples condicións de iluminación; e por último, evitaranse os malentendidos entre os comandos que o usuario facilita e interpreta.
Até o momento, os investigadores de Robotiker-Tecnalia desenvolveron una instalación e una guindastre virtual nun porto marítimo de mercadorías. O sistema coñece todas as zonas nas que se move o guindastre, a localización de todos os seus elementos e os seus posibles movementos. Se se detecta que o guindastre debe chocar contra un obxecto, esta aplicación informa o usuario e o usuario cesa automaticamente a actividade.
Aínda que polo momento estas aplicacións foron incorporadas a un guindastre virtual --e só nunha contorna informática-, esperan poder aplicalas en futuros guindastres reais.