Датасет "Комментарии DTF"

Если тут есть желающие поковырять комменты, держите структурированный датасет! В нем также рассчитана токсичность комментариев.
За ее расчет огромное спасибо моему сэнсэю Никите! Внутри поста - структура датасета

huggingface.co

SubMaroon/DTF_Comments_Responses_Counts · Datasets at Hugging Face

Инфо:

Этот набор данных содержит данные с середины 2016 года по конец 2024 года с веб-сайта DTF.ru

Структура:
– post_title - текст сообщения;
– parent_comment - родительский комментарий;
– child_comment - ответный (дочерний) комментарий на родительский комментарий;
– subsite_name - название дочернего сайта (например, темы);
– comment_id_parent - идентификатор родительского комментария к dtf.ru
– comment_id_child - идентификатор дочернего комментария к dtf.ru
– replyTo - идентификатор родительского комментария, на который отвечает дочерний комментарий
– parent_likes - количество лайков на родительский комментарий
– child_likes - количество лайков на дочерний комментарий
– reply_count - количество ответов на родительский комментарий;
– normalized_reply_count - нормализованное значение количества ответов на родительский комментарий (от 0 до 1).
– parent_comment_tox - показатель токсичности родительского комментария
– child_comment_tox - показатель токсичности дочернего комментария

Набор данных содержит следующие символы: a-zA-Za-яА-Я0-9.,!?;:
Глобальный фильтр: были собраны комментарии длиной не менее 30 символов и от 5 лайков и более

Набор данных не очищен! Из-за специфики модерации набор данных содержит много повторяющихся строк. Существует несколько их типов:
– "Этот материал был удален по просьбе автора";
– "Комментарий недоступен";
– "Комментарий удален автором поста";
Это отметка об удаленных комментариях, они ценны только тем, что их подсчитывают, но не тем, что используют для доработки или анализа написанного.

2424

3232

1 ответ на пост

16 комментариев

Комментарий удалён модератором

Nikita Sushko

1 февр

Ackchually нет, мы отдельным, довольно много где использовавшимся, классификатором прошлись. Я глазками глянул чё он там разметил, в принципе, сходится с моим пониманием токсичности.

Едрить ты токсичный

у меня тг акк спизили вот где печаль

Ответить

Dfp

1 февр

Не спиздили, а ты проебал его 😆

Ответить

kotenila

1 февр

Вот кому-то делать нехер

Ответить

Налог на IQ

1 февр

На этом и держится весь интернет

Ответить

Раскрывать всегда

K0mm0n

no context DTF

4 мар

Просто подборка топовых комментов

И как эти комменты нитакусиков продолжают выходить в топ?

Кладбище DTF

Самые токсичные ДТФеры

Мы тут делаем небольшой исследовательский проект, и потребовался список самых токсичных ДТФеров за все время существования сайта. Кто они по вашему мнению? В т.ч. и те, кто уже в вечном бане

1919

Грангер. Вбрасывает политому в виде новости и из-за этого банят кучу людей. Провокатор получается.

Dmitriy.Millennial

Улучшаем DTF

8 янв

7 улучшений, которые мы заслужили!

Я собрал пожелания огромного количества людей, и вот что из этого получилось. Интересует мнение каждого. Не оставайтесь в стороне!

2929

1212

Второй пункт какой то сюр, скорее вообще ничего выкладывать не будут. Когда быстро набираешь текст на смартфоне ошибки неизбежшны приходится исправлять.

Александр Александров

29.12.2024

Только мне уже кажется, что мы живём в придуманном интернете?

Все уже знают, что любой запрос в интернете по какому-то продукту и кеш твой улетает рекламодателям. И Вот у тебя уже на каждой странице силиконовая вагина, купи! Но я всё чаще стал замечать такое, что я чо-то обсуждал в чате вк, к примеру, а мне уже на пикабу через несколько часов вылетает прям один в один тема про то, что мы обсуждали. Такое было…

1818

1111

Привет, это я, твой единственный подписчик. Я на протяжении многих лет создавал иллюзию того, что тебя читает много людей, но это был я. Сейчас напишу это сообщение со всех аккаунтов.

Шьюшный Шьюх

22.12.2024

Когда за день тебе в комментах пишут 4 акка, которые только были созданы ради этого коммента - считаю это успешный успех!

Люди ради тебя стараются и регистрируют страничку на дтф - думаю, что комитету пора доплачивать мне за привлечение новых пользователей на платформу. Вот мой любимый за сегодня коммент, кстати

1212

destructive mindset

22.12.2024

Кажется убирать минуса было не самой лучшей идеей,

потому что эта токсичность лишь возросла на сайте.
Гляньте любую новость или популярный пост и вы увидите, что благодаря вашим алгоритмам ранжирования популярных комментариев, вверх всплывают и те, которые пользователи «минусят» подобающими смайлами, тем самым такие «заминусованные» мнения люди видят одними из первых, что задает общий фон сайту. Не?

1717

Венди

19.12.2024

Логика

DTF: убирает минусование и удаляет любые оскорбительные или провокационные комментарии и посты, что бы бороться с токсичностью. Также DTF: добавляет смайлик говна, что бы пользователи засирали им друг друга 🤣

1212

Датасет "Комментарии DTF"

Успешно боритесь с токсичностью на сайте?