ChatGPT додає голос, зір і слух

(Фото Леона Ніла/Getty Images)
ChatGPT від OpenAI оголосив про значне оновлення, яке незабаром буде доступним, що змінить спосіб взаємодії з генеративним інструментом ШІ. Нова функція буде доступна за планом підписки ChatGPT Plus. У найближчі кілька тижнів OpenAI додасть можливості голосу та прослуховування, які дозволять користувачеві розмовляти зі штучним інтелектом і змусити його відповідати мовою. Хоча здатність слухати та відповідати не є новою територією, інші інструменти, такі як Alexa та Siri, мають обмежені можливості творчо реагувати так, як ChatGPT. OpenAI пропонує вибір голосів, ретельно навчених найнятими акторами голосу.

Читайте також: Boston Scientific оновлює робота-собаку за допомогою голосового зв’язку ChatGPT

>ChatGPT буде об’єднано з існуючою технологією під назвою Whisper, яка може слухати користувачів і транскрибувати голосові розмови в текст. Нове програмне забезпечення буде додано, щоб приймати відповіді ChatGPT і перетворювати їх на вимовлені слова. Але найбільш дивним доповненням до нового випуску має бути додавання «зору» до інструменту. Використовуючи новий інструмент для створення зображень DALL-E, ChatGPT зможе переглядати зображення, розпізнавати їх і реагувати на них. Наприклад, користувач може завантажити зображення Ейфелевої вежі та попросити ChatGPT розповісти користувачеві про те, що зображено на зображенні.

ChatGPT розпізнає зображення та зможе надати історію вежі без додаткових підказок. Батьки можуть сфотографувати домашнє завдання з математики своєї дитини та обвести проблему, щоб ChatGPT допоміг їй знайти відповідь. Мабуть, одним із найкрутіших варіантів використання є партнерство з BeMyEyes, додатком, який допомагає сліпим і людям із слабким зором «бачити» навколишній світ за допомогою відеозв’язку з помічниками-волонтерами. Але OpenAI використовує функцію перегляду ChatGPT, щоб підключатися безпосередньо до програми та допомагати негайно, не чекаючи, поки підбере помічник.