import concurrent.futures
def fetch_page_range(start_page, end_page, page_size=50):
"""Busca múltiplas páginas em paralelo"""
def fetch_single_page(page):
return get_requests_page(page, page_size)
results = []
with concurrent.futures.ThreadPoolExecutor(max_workers=5) as executor:
# Submeter todas as páginas
future_to_page = {
executor.submit(fetch_single_page, page): page
for page in range(start_page, end_page + 1)
}
# Coletar resultados
for future in concurrent.futures.as_completed(future_to_page):
page_num = future_to_page[future]
try:
page_data = future.result()
if page_data:
results.append((page_num, page_data))
except Exception as e:
print(f"Erro na página {page_num}: {e}")
# Ordenar por número da página
results.sort(key=lambda x: x[0])
return [data for _, data in results]
# Buscar páginas 1-5 em paralelo
parallel_results = fetch_page_range(1, 5)