Автоматизация парсинга сайтов на Python.
Артем Мураховский
Python Developer, тренер-консультант CyberBionic Systematics
01.01.1960
19:00 - 21:00
Рейтинг: 5.
Проголосовало: 12
В эру машинного обучения информация становится нефтью 21го века. Проекты, связанные со сбором и анализом данных, выходят на первые позиции в глобальных компаниях и в стартапах.
Как собирать и обрабатывать информацию? В зависимости от целей проекта данные могут собираться абсолютно разные. На вебинаре мы рассмотрим один из наиболее распространенных подходов – парсинг сайтов.
Мы возьмем один из популярных сайтов с рабочими вакансиями и на его примере разберем библиотеки для парсинга веб-сайтов, библиотеки для работы с запросами. Разберем виды популярных баз данных и поймем где и какую нужно использовать.
План вебинара:
- Что такое парсинг веб-сайтов.
- Библиотеки для парсинга веб-сайтов.
- Библиотеки для работы с сетью.
- Написание кода парсеров.
- SQL и NoSQL - при каких задачах, какой тип используется.
- Написание кода менеджеров баз данных.
Целевая аудитория:
Данный вебинар будет полезен для людей, понимающих синтаксис языка Python и принципы объектно-ориентированного программирования, перед которыми стоит задача автоматизации сбора данных посредством парсинга сайтов.
01.01.1960
120
2602
01.01.1960
120
1623
01.01.1960
120
1148
01.01.1960
120
1493
01.01.1960
120
3826
01.01.1960
120
2913
01.01.1960
120
1446
01.01.1960
120
976
01.01.1960
120
1843
01.01.1960
120
2684
01.01.1960
120
5756
01.01.1960
120
2234
Python в 2026 году: статистика, популярность, зарплаты и перспективы карьеры
21.07.2026
Когда заходит речь о самых популярных языках программирования, Python почти всегда оказывается в лидерах. И это не случайность и не мимолетный тренд. Уже больше десяти лет он стабильно держится в первой тройке мировых рейтингов, а во многих из них уверенно занимает первое место.
Почему всё больше Python-разработчиков выбирают Reflex
09.06.2026
В веб-разработке много лет действовало неписаное правило: хочешь создать современное веб-приложение — готовься работать сразу с двумя мирами. Бекенд пишется на Python, Java или Go, а пользовательский интерфейс — на JavaScript или TypeScript с React, Angular либо Vue.
Вебинары Артёма Мураховского по программированию на Python
14.10.2022
Когда человек делает то, что он любит, что он сам избрал как свое дело, он вдохновляет других жить и творить. Таковым был Артём Мураховский.
ТОП-10 лучших видео по Python
24.01.2022
Друзья, в этот раз мы подготовили для вас подборку лучших вебинаров от ITVDN по направлению Python. В рейтинг вошли как познавательные вебинары с актуальной информацией, так и вебинары, ориентированные на прокачку ваших навыков создания кода. Давайте приступим к их рассмотрению.
100+ вопросов по Python для Junior, Middle и Senior
18.11.2020
Редакция DOU пообщалась с разработчиками, которые проводят технические собеседования Python-специалистов для различных уровней, и собрала примерный список вопросов к кандидатам. Конечно, он не является исчерпывающим, однако содержит типичные вопросы.
Кто такой Full-stack разработчик
29.07.2020
Full-stack разработчик (произносится “фулл стек”) — это некий мастер на все руки в мире веб-разработки. Ему под силу реализовать как клиентскую, так и серверную сторону приложения, которыми, обычно, занимаются FrontEnd и BackEnd разработчики раздельно друг от друга. Таким образом, Full-stack специалист способен в одиночку вести проект от начала до конца.
Что должен знать Python разработчик в 2020 году
29.01.2020
Добрый день, дорогие читатели блога ITVDN! Предлагаем вашему вниманию новую публикацию в рубрике “Что должен знать разработчик...”, в которой мы пишем о самых популярных IT-профессиях. Ранее уже были опубликованы обзоры по FrontEnd и .NET. В этот раз в центре внимания язык Python. В каких сферах он успешно применяется, а в каких буквально незаменим? Какими знаниями нужно обладать, чтобы стать, к примеру, Python BackEnd разработчиком? Все это вы узнаете в нашей статье. Приятного чтения!
Создаем Telegram-бота на Python. Часть 2
25.09.2019
Чат боты — это новый инструмент взаимодействия разработчика с пользователем. Их все чаще внедряют для совершенно различных целей. Новостные ленты, обработка налоговых деклараций, сохранение файлов – боты становятся удобным интерфейсом взаимодействия c различными сервисами.
Топ-5 лучших фреймворков для Python-разработчиков
07.11.2018
Сейчас трудно представить себе любого девелопера без использования фреймворков. Здесь вы найдёте 5 лучших и наиболее признанных фреймворков для Python-разработчиков.
Как я построил проект на Django, Django REST Framework, Angular 1.1.x и Webpack
27.07.2016
Моя идея состояла в том, чтобы построить простой репликабельный проект на Angular с бэкэндом на Django. Я искал и не смог найти нужных решений, пришлось во всем разбираться самому. В итоге я разобрался и решил сам написать гайд для всех, кого может заинтересовать данная проблема.
Данная статья поможет вам построить простое приложение Angular с бэкэндом на Django, организованного с помощью Webpack.
Модуль asyncio Python
12.01.2016
Мы продолжаем цикл статей об асинхронном программировании с использованием сопрограмм в Python. В предыдущей статье мы рассмотрели реализацию сопрограмм при помощи генераторов в Python 2.5 и выше, в этой же познакомимся с той инфраструктурой, которая построена на основе них в Python 3.
Сопрограммы на основе генераторов Python
15.12.2015
В данной статье, которая является второй из цикла об асинхронном программировании с использованием сопрограмм в Python, мы рассмотрим их классическую реализацию, доступную ещё с Python версии 2.5, при помощи расширенных возможностей генераторов (PEP 342).
комментарии и обсуждения