Офтоп
Rokors

Заменяем Metacritic нейросетями

Генерируем оценки и отзывы.

Многие считают, что оценки на Metacritic не имеют значения (но не перестают их обсуждать), а игровые журналисты пишут рецензии за хорошее настроение от разработчиков. У меня появилась идея: почему бы вообще не заменить Metacritic нейросетями? GPT-2 в даже самой простой вариации генерирует вполне осмысленные тексты, а оценку можно предсказать, сделав обычную модель с помощью tensorflow.

Мной было собрано около 150 тысяч отзывов критиков, которые затем использовались для перетренировки средней (355М) из GPT-2 моделей. Далее можно увидеть примеры отзывов, полученных с помощью нейросети, а ниже будет инструкция, как можно поработать с получившейся моделью и получить аналогичные картинки с помощью Google Colaboratory.

Нейросетевой критик пишет рецензии

Что можно было ожидать, игра года все-таки
Нейросетевой критик поступает прямо как игровой журналист: оценка высокая, а отзыве одни минусы
Будет ли Киберпанк соответствовать отзыву? Узнаем осенью, если снова не перенесут
Не показывайте этот отзыв Степану
Единственная ошибка: Цусима - это все-таки не хоррор
Если бы сообщество ДТФ создавало игру про ДТФ, в ней было бы много багов. Высокая оценка из-за неизвестных нейросети слов 

Как пользоваться нейросетевым критиком

Благодаря Google Colaboratory воспользоваться получившейся нейросетью может любой. Нужны только десктопный браузер Chrome и аккаунт Google. Переходите по ссылке, выполняйте необходимые действия и получайте свои собственные результаты. И пишите отзывы и замечания, соберу их в кучу и буду исправлять.

Замечания и проблемы

  • это альфа-версия
  • нейросеть работает только со входами на английском языке, введение информации на русском приведет к неопределенному результату
  • отзывы генерируются тоже только на английском
  • оценки генерируются в узком диапазоне (из-за того, что большинство критиков ставят оценки от 70 до 95) и не соответствуют отзыву (главный минус)
  • отзывы могут обрываться на полуслове

Критик будет дорабатываться, и большую часть кода я выложу (и буду обновлять) на гитхабе, когда приведу его в порядок. И, конечно, буду обновлять блокнот на Colaboratory (когда найду на это время).

Ссылки

  • gpt-2 simple — библиотека, использованная для создания нейросети
  • minimaxir — создатель gpt-2 simple и популяризатор Google colabotory
  • Илья Куликов — человек, который парсил метакритик и с которого все началось
{ "author_name": "Rokors", "author_type": "self", "tags": [], "comments": 49, "likes": 86, "favorites": 38, "is_advertisement": false, "subsite_label": "flood", "id": 176191, "is_wide": false, "is_ugc": true, "date": "Fri, 24 Jul 2020 15:40:09 +0300", "is_special": false }
0
49 комментариев
Популярные
По порядку
Написать комментарий...
21

За труды 💖

Ответить
1 комментарий
37

Apanasikos

Мексиканский кузен Апанасика.
Сделайте кто нибудь Лейн с усами и в самбреро, плез.

Ответить
5

Спасибо. Апанасикос вышел отличным.

Ответить
4

Ола, амиго

Ответить
1

Ола!

Ответить
2

Греческий. Все шутки - зря...

Ответить
3

Учитывая фамилию, я должен был решить этот вопрос.

Ответить
2

@Andrey Apanasik держи ещё с тиарой

Ответить
27

Описание фифы - золото.
Маркетинг 101
"Есть плюсы, но есть и минусы. Если вам нравится, то вам понравится. Нет, так нет"
"77"

Ответить
4

"В любом случае, вы почувствуете себя полным неудачником"

Ответить
2

Дааа, вот это просто топ фраза:
If you like this game, you'll like this one. If you don't like it, you won't like this one.

Ответить
1

слава сатане, аминь

Ответить
1

Ну так правда же!

Ответить
10

Вы тут щас Ширяева научите плохому, он же в дтф это встроит

Ответить
6

Зато на дтф наконец-то будет кому писать ревью на все выходящие новинки

Ответить
0

Я не против, у меня денег на хостинг нет

Ответить
0

а ну тут чот в начале сломано чутка

Ответить
0

Косяки базы, на которой обучал, буду думать, как исправить. Возникает из-за особенностей некоторых отзывов с ревью и основной частью.

Ответить
1

Спасибо, что воспользовались блокнотом для генерации. Сразу получилось так "нормально" или были проблемы какие-нибудь?

Ответить
0

Сразу норм без ошибок

Ответить
0

Так тлоу2 тоже не хоррор

Ответить
13

Ток не для гомофобов

Ответить
1

Вспоминая внешность Эбби - гомофобия вовсе не обязательна...

Ответить
7

У нее неплохая внешность. Меня подкаченные женщины никогда не пугали.

Ответить
0

сиськи не завезли

Ответить
1

А сетка учитывает ревью бомбинг? Отсутствие LGBTQ+ персонажей? Продажность журналистов? Эксклюзив Nintendo?

Ответить
2

Не учитывает пользовательские отзывы, это только в планах

Ответить
1

да, но как занести теперь Ч_Е_М_О_Д_А_Н_Ы?

и идите подальше со своим хорошим настроением

Ответить
2

натренировать нейросеть на исключительно положительных отзывах и будет идеальный игровой журналист

Ответить
0

Звучит как бизнес-план - как раз хватит на оплату хостинга :)

Ответить
0

Уже бегу удалять репо на гитхабе и блокнот на колабе. Были бы еще контакты координаторов из секретной конференции журналистов

Ответить
1

Главное, что батя все равно будет на первом месте.

Ответить

Фантастический каякер

0

Во-первых, есть уже GPT-3, а во-вторых, есть Порфирьевич, которого успешно накормили русскими текстами и который не менее успешно выдаёт текст на русском языке

Ответить
1

Так GPT-3 ведь в закрытом доступе ещё, нет?
У меня была цель заменять именно метакритик, да и отзывы на русском где-то надо набирать.

Ответить
0

Порфирьич иногда пугает меня тем, что выдаёт текст где слова, вроде бы связаны друг с другом, но, в общем, это выглядит как бред шизофреника 

Ответить

Фантастический каякер

Димас
2

Шизофазия

Ответить
0

Да! Именно так

Ответить

Организационный якорь

0

Я бы сыграл за Ананасика.

Ответить
0

Комментарий удален по просьбе пользователя

Ответить
0

Так ведь уже гпт3 используется, почему ты на второй?

Ответить
0

Потому что, если я не ошибаюсь, гпт-3 только по реквестам. Для такого небольшого проекта OpenAI доступ скорее всего не даст. Гпт-3 — уже не опенсорсный проект

Ответить
0

А почему он не опенсорсный?

Ответить
0

Они закономерно решили зарабатывать на этом деньги

Ответить

Комментарии

null