Парсинг данных с сайта ati.su

Парсинг данных с сайта ati.su


Мы разработали сервис, позволяющий отслеживать появляющиеся обновления на интересующем сайте, скачивать их, и передавать заказчику. В создании сервиса мы применили особенность реализации потоков в Python, что значительно упрощает работу с потоками и дает определенную потокобезопасность.

Наша система обрабатывала задание и формировала результат. Полученные материалы были доступны в течении 4х минут после того как они появились на основном сайте. Результаты парсинга были доступны через интерфейс, а также, по просьбе клиента отправлялись на почту в формате, обозначенном клиентом.

Запрос - проверка на появление новой информации на основном сайте проводилась ежеминутно, а общий период сбора информации с сайта продолжался в течении 6 месяцев без остановок.