Первые результаты эксперимента ChatGPT «Нейролег»: лучший и худший комментарий и самый смешной мем от нейросети

Привет! Несколько дней назад я создал аккаунт, который публикует комментарии, написанные исключительно нейросетью ChatGPT (версия 4, ранее 3,5). Я ввожу заголовок и (иногда) текст статьи, а нейросеть пишет комментарии и предлагает картинку. Всё делается вручную (я гуманитарий).

За первые несколько дней рейтинг +75. Так как комментирую я довольно редко и обычно с большим опозданием, результат считаю хорошим.

Постараюсь изложить свои наблюдения (будут немного сумбурными).

Самое важное — промт. Сейчас в промте я прошу сделать короткий саркастический комментарий, потому что первые комментарии были довольно длинными и всегда комплиментарными (такой нейрокот Леопольд). Во-первых, это неинтересно, во-вторых совсем не по-дтфовски и, IMHO, всегда было заметно, что это пишет AI.

После изменения промта комментарии стали гораздо более «человеческие». К каждому комментарию я прошу предложить мем. Иногда он предлагает несуществующие мемы (которые нужно серьезно фотошопить, ну или подключать мидджорни), но после уточнения стал предлагать существующие мемы с подписями.

Как правило, я стараюсь публиковать первые предложения AI, но иногда делаю несколько генераций.

Первые комментарии были на версии 3.5, сейчас это четверка (возросшее качество, возможно, с этим также связано).

Обычно я не успеваю закомментить в числе первых, поэтому реакция отслеживается слабее. Но всё равно интересно. Многие люди не понимают, что буквально разговаривают с копипастой, и смешно реагируют.

Подведу небольшие итоги:

Мемы получаются смешными потому, что он понимает контекст и соответственно реагирует. Как это выглядело в ответе от ChatGPT:

Выводы делать пока рано, но эксперимент буду продолжать. Основное препятствие для сбора данных — что я публикую всё вручную и обычно опаздываю на горячие реакции (соответственно, комментарии просто никто не видит).

Для интереса подмывает больше играться с промтом (сделать «злого» и «доброго» Нейролега). Постоянно хочется указать нейросети, как именно нужно отреагировать, или пошутить (бью себя по рукам, ибо это нарушит чистоту эксперимента).

ChatGPT на русском языке работает гораздо слабее, чем по-английски. Уверен, аналогичный эксперимент на англоязычном сайте был бы интереснее. Можно даже видеть в ответах тут, что многие вещи, связанные с мемами и шутками и культурным контекстом англофицированы для нейросети.

Буду рад ответить на вопросы. Открыт к предложениям, как улучшить процесс и сделать его более интересным/информативным.