Суть
Husk, вирусный инфлюенсер, известный своими испытаниями ИИ-моделей, протестировал новый голосовой модель GPT-Live от OpenAI, проведя тест на правописание. Несмотря на свои заявления о более естественном и человеческом характере, GPT-Live допустил фундаментальные ошибки, что указывает на необходимость доработки.
Как это работало
Husk установил модель GPT-Live на самый высокий уровень интеллекта и спросил, сколько E в слове 'seventeen'. Модель неверно ответила, что их только два, хотя позже правильно написала это слово. Husk продолжил взаимодействие, попросив совет, схожий с человеческим, что привело к предложениям делать личные комплименты незнакомцам. Неловкие паузы и ответы в ходе этих обменов подчеркнули ограничения модели в создании поистине естественного общения.
Результаты
GPT-Live не справился с простым тестом на правописание, неправильно подсчитав E в 'seventeen'. Кроме того, модель продемонстрировала неловкое поведение в разговоре, такое как тяжелые вздохи и долгие паузы, что снижало естественность, к которой она стремилась. Хотя были достигнуты улучшения по сравнению с предыдущими моделями в таких параметрах, как приятность и текучесть общения, эти примеры показывают, что она все еще не может сравниться с человеческим взаимодействием.
Почему это важно для вас
Если вы работаете с ИИ-чат-ботами или голосовыми помощниками, учитывайте выводы Husk как напоминание о важности человеческого взаимодействия. Хотя ИИ развивается, внедрение эмпатии и естественных пауз может улучшить пользовательский опыт. Всегда тестируйте ваши модели в реальных сценариях, чтобы выявить пробелы в их возможностях. Это гарантирует, что ваш ИИ действительно сможет помочь, а не запутать пользователей.
