Обычно видеоигры позволяют вводить данные с помощью кнопок на контроллере. Консоль распознает команды за счет источников света или через датчики движения.
Авторы разработки, которая уже запатентована, предложили использовать недорогое, простое и неэлектронное устройство для видеоигр.
Технология работает следующим образом — производится оцифровка и создается трехмерное изображение объекта, который находится в руке пользователя. Затем этот объект интерпретируется как игровой контроллер. Таким образом, геймер может сделать банан контроллером со всеми четырьмя кнопками PlayStation, либо превратить его в рулевое колесо или джойстик. Два банана могут стать огнестрельным оружием в игре. Разработка подходит и для других предметов.
В Sony отметили, что геймпад не потребует дополнительного источника питания и будет стоить намного дешевле чем обычный джойстик.