Сколько раз вы хотели, чтобы ваш телефон мог понять, что вы сказали? Если он вас понимает, он может делать много полезных вещей, например, искать в Интернете информацию на основе вашего устного запроса или отправлять электронное письмо кому-то в ответ на то, что вы видите и слышите вокруг себя. Такие компании, как Google и Apple, работают над этой технологией, но один стартап, возможно, превзошел их с помощью языковой модели с открытым исходным кодом. В этой статье я хочу познакомить вас с GPT-3, наиболее широко используемой на сегодняшний день языковой моделью, разработанной OpenAI.

Что такое ГПТ-3?

GPT-3 — это языковая модель, основанная на глубоком обучении. Он был создан в 2020 году командой исследователей OpenAI и сейчас используется для машинного перевода и распознавания речи. GPT-3 можно использовать в качестве замены для более традиционных языковых моделей, таких как модель NMT (нейронный машинный перевод), которая обычно используется для машинного перевода.

Кто его разработал?

GPT-3 был разработан OpenAI, некоммерческой исследовательской компанией, основанной генеральным директором Tesla Илоном Маском, соучредителем Microsoft Биллом Гейтсом и президентом Y Combinator Сэмом Альтманом. Компания развивает исследования в области искусственного интеллекта. GPT-3 — их самая последняя разработка в области понимания естественного языка (NLU).

Как это работает?

GPT-3 — это генеративно-состязательная сеть (GAN). Он принимает набор слов и преобразует их в вектор. Они переданы двум системам. Первый запрограммирован на создание состязательных примеров, которые затем оценивает второй и повышает точность системы. Оба обучались на одних и тех же данных, что позволяло им продолжать совершенствоваться. Модель GPT-3 превосходит другие языковые модели, такие как модель Google BERT, обеспечивая более естественную речь без каких-либо ошибок.

GPT-3 обучался на огромном количестве данных, сжатых в виде пар байтов-токенов. Общий объем обученных данных составил 498 миллиардов токенов, в основном из веб-статей, статей из Википедии и книг.

Как это используется в реальном мире?

По своей сути языковая модель GPT-3 представляет собой машину, которая может давать ответы и фразы в ответ на конкретные вопросы. Он используется для многих целей, таких как перевод документов, ответы на текстовые запросы о данных и помощь в решении проблем с обслуживанием клиентов. Система была разработана с использованием программирования искусственного интеллекта, чтобы она могла учиться на взаимодействиях с пользователем и вырабатывать ответы. Модель GPT-3 может отвечать на вопросы на естественном человеческом языке, но не может читать или воспроизводить исходный текст самостоятельно. Он зависит от информации от людей и других источников. GPT-3 можно найти в клиентских чат-ботах, переводчиках или инструментах генерации текста.

Вы используете его в так называемом Помощнике по письму, таком как: Anyword, Rytr, Writesonic или Copy.ai.

Если вы хотите узнать больше об этом программном обеспечении, вы можете прочитать мой обзор Anyword или Rytr.

Каковы его сильные/слабые стороны/ограничения?

Основная сила этого типа ИИ — это уровень, на котором он может понимать устную речь. Это позволяет ему переводить языки на другие языки и эффективно общаться с людьми. Одним из ограничений этого типа ИИ является тот факт, что он не может понимать контекстную информацию, поэтому при получении двусмысленных или неполных предложений они не могут давать точные ответы. Проще говоря: чем лучше вход, тем лучше результат :)

Заключение

GPT-3 — это искусственный интеллект, который учится говорить и писать человеческим голосом. Он может принять личность любого реального или вымышленного человека и может читать любой исходный текст. Это делает его очень универсальным инструментом для всего: от автоматических чат-ботов для обслуживания клиентов до написания романов в стиле вашего любимого автора. Система учится, анализируя человеческий язык, разбивая слова на составные части, а затем используя эти части в качестве строительных блоков для новых предложений. Во многих случаях на выходе может быть «человеческий» текст.

Отказ от ответственности:Эта статья была (частично) написана с помощью Anyword. Это ли не хорошая реклама модели ГПТ-3? :)