Методы сбора и обработки данных из сети Интернет

Курс повышения квалификации или освоения программы с нуля по направлению Методы сбора и обработки данных из сети Интернет от онлайн-университета GeekBrains. Курсы, созданные практикующими экспертами компаний-партнеров. Индивидуальный график – вы сами выбирайте, когда и во сколько проходить программу обучения. После прохождения курса выдается сертификат и возможность пройти стажировку в лучших IT компаниях России. У каждого студента есть возможность пообщаться с преподавателем в режиме онлайн или задать вопрос в чат. Университет имеет государственную лицензию №040485 на право оказывать образовательные услуги.

Программа курса

Урок 1. Основы клиент-серверного взаимодействия. Парсинг API

• Узнаем основные принципы сбора данных.
  Как отправлять GET-запросы при помощи разных инструментов.
  Как работать с ответами от сервера и API, JSON

Урок 2. Парсинг HTML. BeautifulSoup, MongoDB

• Познакомимся с HTML-кодом страниц
  Изучим структуру DOM.
  Рассмотрим основы сбора данных с помощью инструмента Beautiful Soup.

Урок 3. Системы управления базами данных MongoDB и SQLite в Python

• Узнаем основные принципы работы с реляционными и нереляционными базами данных.
  Рассмотрим основные операции и методы для формирования запросов.
  Научимся работать с данными внутри баз.

Урок 4. Парсинг HTML. XPath

• Узнаем, что такое открытые данные, для чего они нужны и как используются.
  Научимся работать с CSV в Python и самостоятельно их создавать.

Урок 5. Scrapy

• Узнаем, что такое открытые данные, для чего они нужны и как используются.
  Научимся работать с CSV в Python и самостоятельно их создавать.

Урок 6. Scrapy. Парсинг фото и файлов

• Узнаем, что такое открытые данные, для чего они нужны и как используются.
  Научимся работать с CSV в Python и самостоятельно их создавать.

Урок 7. Selenium в Python

• Узнаем, что такое открытые данные, для чего они нужны и как используются.
  Научимся работать с CSV в Python и самостоятельно их создавать.

Урок 8. Работа с данными

• Узнаем, что такое открытые данные, для чего они нужны и как используются.
  Научимся работать с CSV в Python и самостоятельно их создавать.