ВСЕ СТАТЬИ
Как мы загрузили историю 287 валютных пар с лимитом 8 запросов в минуту.
•
habr.com•технологии
Как мы загрузили историю 287 валютных пар с лимитом 8 запросов в минуту. Попробуйте найти исторические курсы для пар вроде «доллар к афгани» или «евро к таджикскому сомони». Данные либо платные, либо их просто нет в виде готового датасета. Мы решили эту проблему в рамках своего проекта, хотя единственный подходящий API диктовал суровые условия: 8 запросов в минуту и 5000 дней за раз. Получилось! Наш Python-скрипт аккуратно, чанк за чанком, собрал историю всех 287 пар за 4.5 часа, ни разу не превысив лимит. Теперь все эти данные — более миллиона строк — лежат в открыт...