Web-программирование \ Python

Парсинг на Python. Урок 7. Библиотека SoupSieve

От автора: продолжаем тему парсинга данных на Python. В этом уроке будет рассмотрена работа с библиотекой SoupSieve. Данная библиотека интегрирована в последние версии библиотеки Beautiful Soup и позволяет осуществлять выборку элементов из DOM-дерева, использую CSS селекторы.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 5. Библиотека Beautiful Soup. Часть 2

От автора: продолжаем тему парсинга данных на Python. В этом уроке мы продолжим работу с популярной библиотекой для парсинга – библиотекой Beautiful Soup. Данная библиотека предлагает множество атрибутов и методов для поиска и получения данных. В уроке мы поработаем с набором методов для перемещения по DOM-дереву.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 5. Библиотека Beautiful Soup. Часть 2

От автора: продолжаем тему парсинга данных на Python. В этом уроке мы продолжим работу с популярной библиотекой для парсинга – библиотекой Beautiful Soup. Данная библиотека предлагает множество атрибутов и методов для поиска и получения данных. В уроке мы поработаем с двумя ключевыми методами – методами find и find_all.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 4. Библиотека Beautiful Soup. Часть 1

От автора: продолжаем тему парсинга данных на Python. В предыдущих уроках мы устанавливали и знакомились со вспомогательными библиотеками для парсинга. В этом же уроке мы начнем знакомство с одной из ключевых библиотек, которая и позволяет разбирать, т.е. парсить контент – это библиотека Beautiful Soup.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 3. Библиотека fake-useragent

От автора: продолжаем тему парсинга данных на Python. Важным моментом при парсинге является соблюдение определенных рекомендаций, которые позволят вам продолжать парсинг и не быть забаненным. Одна из таких рекомендаций — использование заголовков. Ключевым заголовком является user-agent. Благодаря этому заголовку мы можем выдать себя за браузер, а не за бота.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 2. Библиотека requests

От автора: продолжаем тему парсинга данных на Python. Для того, чтобы парсить какие-либо данные сайта, эти данные для начала нужно получить с сайта. Для этого нужно выполнить HTTP-запрос и получить контент сайта, который затем можно разбирать, то есть парсить. Для выполнения HTTP-запросов часто используется библиотека requests, с которой мы и поработаем в данном уроке.

Читать далее

Web-программирование \ Python

Парсинг на Python. Урок 1. Установка окружения и библиотек

От автора: парсинг данных – это одна из классических задач, с которыми сталкивается разработчик. И для решения подобной задачи идеально подходит Python. Это первый урок из цикла уроков по парсингу на Python.

Читать далее

Web-программирование \ Python

Аналитика данных — нефть для цифровой экономики

От автора: с каждой секундой информации и данных в мире становится все больше и больше. Данные собирают и небольшие магазины, и крупные порталы, и маркетплейсы, и банки, и платежные системы.

Читать далее

Web-программирование \ Python

Передача параметров в скрипт Python

От автора: если вы писали консольные скрипты на Python, тогда вы должны были сталкиваться с тем, что иногда в скрипт нужно передать какие-либо пользовательские параметры. Это можно сделать, к примеру, запросив пользовательский ввод через функцию input. Однако, есть и другой вариант передачи параметров. Из данного урока вы узнаете, как можно передать аргументы в скрипт при его запуске.

Читать далее

Web-программирование \ Python

HTTP Server на Python для верстальщика

От автора: данный урок предназначен в первую очередь для начинающих верстальщиков и здесь вы найдете один из инструментов, который позволит ускорить вашу работу. Речь идет об HTTP сервере на Python. Данный сервер позволяет не только вести верстку сайта, но и упрощает ее, отслеживая изменения в ваших файлах и автоматически перезагружая страницу в браузере, что ускоряет рабочий процесс.

Читать далее