Анализ вакансий на gamedev.ru

Всем привет. Я не так давно увлекся парсингом на питоне и решил спарсить, а после проанализировать вакансии на gamedev.ru за последние 2 года. Как таковой цели не было, просто попрактиковать свои навыки, но в итоге мне показалось, что эта инфа может кому-то показаться занимательной, так что вот пишу этот пост.

Сам код довольно незамысловатый и маленький. По сути этот скрипт просто парсит текст вакансий со страницы по циклу, после парсинга каждой страницы он меняет значение в ссылке и так 90 страниц. То, что именно на 90 странице находятся вакансии с начала 2020 я нашел в ручную. Всего было собрано 3500 вакансий.

После все эти вакансии выводятся в консоль. Можно было сразу в txt файл, но я поленился. Далее в ручную скопировал в txt файл, который уже стал анализировать с помощью второго скрипта.

Опытные программисты начали бы пинать меня ногами за такой способ анализа, но ничего проще я не придумал. Данный код ищет написанный мною текст в названиях вакансий и если находит, то плюсует единицу к переменной, таким образом, я нахожу сколько было вакансий с таким текстом. Пришлось в ручную вводить кучу текста, так как он ищет точно такой же текст, учитывая заглавные буквы. В итоге, чтобы найти все вакансии, например, по Unreal Engine я вводил: "ue", "Unreal", "UE," "Ue".

Тут с отрывом выигрывает Unity, почти в 7 раз больше вакансий. Для меня это было открытием, я конечно понимал, что вакансий на Юнити будет больше, но не думал, что настолько.

Unreal Engine - 106

Unity - 722

Тут без конкретики, я просто собрал количество вакансий на junior, middle, senior. Было интересно посмотреть соотношение. Это довольно ожидаемый результат, мидлы пользуются популярностью, позволить себе сеньеров могут не все, джуны популярностью не пользуются, хотя вакансий не сильно меньше.

Junior - 22%

Middle - 43%

Senior - 35%

Тут почти поровну.

2D Artsit - 48%

3D Artist - 52%

За 2 года всего 10 вакансий для python программистов, что в принципе не удивительно.

Как то так. Я не смог придумать, чтобы еще найти. Спасибо, что дочитали

PS: Далее я хочу попробовать спарсить и проанализировать подсайт @Ищу команду. Правда пока у меня не получается, так как там динамическая загрузка страницы(как и на всем дтф), так что если вы шарите как это решить или у вас есть на примете хороший видос про то, как это делается скиньте плиз.

Вторая часть -