Пользователи обычно общаются с чат-ботом ChatGPT с помощью текстовых сообщений, но студент из Стэнфорда Брайан Хау-Пинг Чанг нашел ему новое применение.
Что это такое
Парень разработал умный монокль rizzGPT с аппаратным обеспечением Monocle AR с открытым исходным кодом, в котором используется искусственный интеллект ChatGPT и система распознавания речи Whisper от того же OpenAI. Компактный гаджет умеет распознавать текст, речь, распознавать лица, понимать и обрабатывать живой разговор и предоставлять пользователю необходимую ему информацию.
Таким образом, ИИ может стать хорошим помощником практически в любой ситуации: помочь поддержать беседу во время свидания, ответить на вопросы при приеме на работу и порекомендовать блюда в ресторане, исходя из предпочтений пользователя.
Монокль работает на LifeOS, которую Чанг вручную обучил на личных сообщениях, фотографиях и других данных. Например, он узнавал лицо своего друга и во время разговора вспоминал общие истории из прошлого.
Парень признает, что над rizzGPT еще нужно поработать. В первую очередь нужно поработать над конструкцией устройства, так как носить его неудобно. Иногда ИИ тоже медленно реагирует, что приводит к неловким паузам в разговоре.