Takhle by to nefungovalo. Je to něco jako dvě stě paralelních vláken, který inteligentně plánujou, kdy udělat další požadavek + další procesy který mají zaručit, aby se toho stáhlo co nejvíc + fronta na download obrázků + runtime verifikace jestli jsou data vpořádku. Dohromady 3300 řádků scaly, 500 řádků php, nějaký to Go a pár SQL skriptů.