Компания Яндекс разработала нейросетевой алгоритм YaLM и сервис на его основе под названием «Зелибоба». Нейросеть умеет генерировать тексты, опираясь на заданное пользователем слово, фразу или предложение. Фактически она придумывает готовую концовку, и, стоит отметить, получается у неё очень здорово. «Зелибоба» делает это с юмором и зачастую очень точно чувствует контекст. Как отмечает издание N + 1, языковую модель обучили на нескольких терабайтах русскоязычных текстов, в числе которых были как статьи из «Википедии», так и обычные публикации в социальных сетях. Новая нейросеть использует 3 млрд параметров.
Алгоритм YaLM (Yet another Language Model) от Яндекса, как и GPT-3 разработки OpenAI, способен очень точно предсказывать следующее слово в текстовой последовательности. В «Зелибобе» пользователям предлагают выбрать стиль дополненного текста. Это могут быть теория заговора, тосты, ТВ-репортажи, рекламные слоганы или подписи к постам в Instagram*. Разработчики говорят, что нейросеть может очень быстро научиться новому стилю, для этого ей нужно несколько десятков примеров.
Компания Яндекс намерена использовать новый алгоритм в своих сервисах и вскоре более подробно об этом расскажет.
P. S. На момент написания этой заметки сайт «Зелибоба» перестал работать. Видимо, из-за большого наплыва желающих опробовать новую нейросеть.
* Деятельность Meta* (соцсети Facebook* и Instagram*) запрещена в России как экстремистская.
