Представляю вам Анализатор DTF

Альтернатива перегруженной ленте DTF

Всем привет. Некоторое время назад у меня появилась потребность искать самые интересные статьи на DTF (некоторым из вас даже известно, почему).

Вы и по своему опыту наверняка знаете, насколько это тяжёлое занятие. Сайт невероятно разросся за этот год: много новых подсайтов, много новых блогеров. А нормальной панели ориентации по сайту нет, потому что администрация не хочет рекламировать шок-контент.

Подписаться на всё сразу невозможно, очень просто что-то упустить. В то же самое время ситуация для большинства пользователей и подсайтов одинаковая: невозможно клепать качественный контент ежедневно, поэтому попадается много низкокачественного материала (известный как щитпост). Так что пользователи вынуждены фильтровать подписки. А общая лента (которая кстати заработала как надо у меня только вчера) хоть и помогает в этом плане, но не до конца.

Поэтому я решил написать свой автоматический инструмент поиска интересных статей.

Раньше этот инструмент имел своей целью отсев низкокачественного контента, но вводить универсальную меру качества, особенно на основании доступных данных, дело весьма неблагодарное и вредное. Поэтому теперь я превратил это в общедоступный сервис, который каждый пользователь может настроить для своих целей.

Встречайте: анализатор DTF. Он собирает всё, что публикуется на DTF, в том числе статистику по всем доступным показателям: количество просмотров, плюсов, закладок, репостов и комментариев. А помимо этого собирает качественную информацию о материалах: где опубликовано, сколько слов и медиафайлов он содержит. На основании всей этой информации он присваевает каждой статье специальный рейтинг, на основании которого он может вам посоветовать или не посоветовать тот или иной материал.

Таким образом вы можете искать не только лонгриды, но и масштабные дискуссии в комментариях, и самые трендовые статьи, и даже контент от малоизвестных блогеров, которых на сайте не знает ещё никто.

Рейтинговая система работает не идеально, поскольку сервис только запустился (здесь можно прочитать об этом подробнее). Я всё ещё продолжаю исследования в сфере оценки постов и ищу тот самый способ, который устроит всех. Сейчас сервис даёт больший приоритет мелким блогерам, но это не намеренное решение, а издержки автоматики. Сервис не предназначен для однозначной оценки всего выходящего материала на DTF, это лишь помощник, который работает по косвенным показателям.

Сейчас сервис собрал статистику по материалам вплоть до 13 сентября этого года, всё что выходило раньше на нём не появится. У меня нет возможности хранить большие данные, так что в будущем бот наверняка будет вычищать из себя лишнее. Расчитывайте на то, что сервис будет хранить информацию только лишь на предыдущую неделю.

Ну а ещё сервис может упасть от высокой нагрузки. За это заранее прошу прощения. Если вдруг кто-то захочет помочь или предложить правки, исходный код сервиса доступен по ссылке.

Напоследок хочу поблагодарить Евгения Приходько за основу для сервиса (я воспользовался его наработками из этого поста), Андрея Апанасика за консультации и Prostagma за перенос сервиса на облако. Благодаря вам выход сервиса случился намного раньше.

Всем Большое Спасибо!