Sovremennyy skraping veb-saytov s pomoshch'yu Python. 2-e mezhd. izdanie (ePub)

"Esli programmirovanie napominaet volshebstvo, to veb-skraping - eto ochen' sil'noe koldunstvo. Napisav prostuyu avtomatizirovannuyu programmu, mozhno otpravlyat' zaprosy na veb-servery, zaprashivat' s nih dannye, a zatem analizirovat' ih i izvlekat' neobhodimuyu informaciyu. Novoe rasshirennoe izdanie knigi znakomit ne tol'ko s veb-skrapingom, no i pomozhet sobrat' lyubogo vida dannye v sovremennom Internete.
V chasti I osnovnoe vnimanie udeleno mekhanike veb-skrapinga: kak s pomoshch'yu Python zaprashivat' informaciyu s veb-servera, proizvodit' bazovuyu obrabotku servernogo otklika i organizovat' avtomatizirovannoe vzaimodeystvie s saytami. V chasti II issledovany bolee specifichnye instrumenty i prilozheniya, kotorye prigodyatsya pri lyubom scenarii veb-skrapinga.
- Razbirayte slozhnye HTML-stranicy.
- Razrabatyvayte poiskovye roboty s pomoshch'yu freymvorka Scrapy.
- Izuchayte metody hraneniya dannyh, poluchennyh s pomoshch'yu skrapinga.
- Schityvayte i izvlekayte dannye iz dokumentov.
- Ochishchayte i normalizuyte ploho otformatirovannye dannye.
- CHitayte i pishite informaciyu na estestvennyh yazykah.
- Osvoyte poisk po formam i loginam.
- Izuchite skraping JavaScript i rabotu s API.
- Ispol'zuyte i pishite programmy dlya preobrazovaniya izobrazheniy v tekst.
- Uchites' obhodit' skrapingovye lovushki i blokatory botov.
- Protestiruyte sobstvennyy sayt s pomoshch'yu skrapinga.

"