Здесь представлен парсер для получения данных о аренде недвижимости c сайта Avito на Python.
Сначала происходит просмотр страницы с помощью библиотеки Selenium.Дальше,с помощью библиотеки Beautiful Soup 4, мы считываем необходимые данные(название объявления, цена,площадь и адрес места,а также ссылка на объявление). Все данные записываются в таблицу csv,где в дальнейшем проходит обработка данных.
Дальше необходимо преобразовать адрес в координаты.Для этого используется библиотека geopy.Благодаря ей и небольшой обработке данных можно преобразовать адрес в кооринаты:широту и долготу(latitude и longitude).
Дальше происходит подключение к базе данных и внесение данных в таблицу SQL из таблицу csv.Для этого используется PostgreSQL и Alchemy.
Ниже представлен пример работы парсера:
