На фото нет списков слов для выбора: выпадающие меню закрыты, видны только знаки «?». Пропуски заполнены по смыслу текста, но точные варианты из меню на фото не видны. Если нужно сверить с вариантами, откройте списки и пришлите фото с ними.
Расставьте пропущенные слова в тексте.
Нейросетевые технологии существуют с 1950-х годов. Нейросети решают различные задачи. Например, задачу классификации. Данный курс посвящён использованию ? нейросетей учителем.
Этот вид нейросетей начал активное развитие после появления архитектуры под названием ? . Именно из-за неё получил своё название GPT — генеративный предобученный трансформер. В основу этой архитектуры лёг ? , который заставляет нейросеть смотреть на текст как на набор взаимосвязанных смысловых элементов.
Технически это происходит за счёт разбиения слов на ? , которые преобразуются в ? — то есть математические представления ? как ? внутри ? .
Разбираем текст по смыслу.
- Курс посвящён использованию генеративных нейросетей учителем. Пропуск: «генеративных» (текстовых, языковых).
- Архитектура, давшая название GPT («трансформер»): «трансформер».
- В основу архитектуры лёг механизм внимания (attention), он заставляет сеть видеть связи между элементами текста: «механизм внимания».
- Слова разбиваются на токены: «токены».
- Токены преобразуются в эмбеддинги — математические представления токенов (векторы).
- Фраза «математические представления … как … внутри …» читается так: представления слов (токенов) как векторов внутри многомерного пространства.
Языковая модель делит текст на токены, превращает их в эмбеддинги (числовые векторы), а механизм внимания в трансформере учитывает связи между токенами.
- генеративных
- трансформер
- механизм внимания
- токены
- эмбеддинги
- слов (токенов)
- векторов
- многомерного пространства
