k47.cz
mastodon twitter RSS
bandcamp explorer 0xDEADBEEF
komentáře článku 

Jeden rok, 200 milionů postů a anomálie Chanmineru



Text komentáře


Filip Procházka (@HosipLan) (2012-04-25 18:21)
Takže celý chanminer je něco ve stylu while($i++) $db->save($curl->get($i)); ? Jenom jedeš IDčka jo? Zajimave.


kaja47 (2012-04-25 22:36)
Takhle by to nefungovalo. Je to něco jako dvě stě paralelních vláken, který inteligentně plánujou, kdy udělat další požadavek + další procesy který mají zaručit, aby se toho stáhlo co nejvíc + fronta na download obrázků + runtime verifikace jestli jsou data vpořádku. Dohromady 3300 řádků scaly, 500 řádků php, nějaký to Go a pár SQL skriptů.


píše k47, ascii@k47.cz