电子书：《python3网络爬虫开发实战》《python3网络爬虫开发实战》
111
内容简介：
崔庆才北京航空航天大学硕士.静觅博客(hts:/ cuiqungcal. com/)博主.爬虫博文访问量已过百万.喜欢钻研.热爱生活.乐于分享。欢迎关注个人微 信公众号“进击的coder”.二维码如下
ng图灵原创thon(3网络爬虫开发实战崔庆才著_代*_明影多人民邮电出版社北京
图书在版编目(cip)数据python3网络爬虫开发实战/崔庆才著.一北京人民邮电出版社.2018.4(图灵原创)isbn978-7-115-48034-7p…ⅱ.①崔…ⅲ.①软件工具一程序设计ⅳv.①tp311.561中guo版本图书馆cip数据核字(2018)第042370号本书介绍了如何利用 python3开发网络爬虫。书中首先详细介绍了环境配置过程和爬虫基础知识;然后讨论了urib、 requests等请求库. beautiful soup、 xpath、 query等解析库以及文本和各类数据库的存储方法;接着通过多个案例介绍了如何进行aax数据爬取.如何使用 selenium和 splash进行动态网站爬取再后介绍了爬虫的一些技巧.比如使用_代*_爬取和维护动态_代*_池的方法.adsl拨号_代*_的使用.图形极验、点触、宫格等各类验证码的_破_解_方法.模拟登.录网站爬取的方法及 cookies池的维护此外.本书还结合移动互联网的特点探讨了使用 charles. mitmdump、 apium等工具实现ap爬取的方法.紧接着介绍了 spider框架和 scrap框架的使用.以及分布式爬虫的知识.最后介绍了bloofilter效率优化、 docker和 scraped爬虫部署、 grapy爬虫管理等方面的知识本书适合 python程序员阅读◆著崔庆才责任编辑王军花责任印制周昇亮◆人民邮电出版社出版发行北京市丰台区成寿寺路11号邮编10064电子邮件[email protected]网址htpp-press.com.cn大厂聚鑫印刷有限责任公司印刷开本:800×10001/16印张:37.75字数:917千字印数:1-4000册2018年4月河北第1次印刷定价:99.00元读者服务热线01051095186转600印装质量热线010)81055316反盗版热线010)81055315广告经营许可证:京东工商广登字20170147号
序一人类社会已经进入大数据时代.大数据深刻改变着我们的工作和生活。随着互联网、移动互联网社交网络等的迅猛发展.各种数量庞大、种类繁多、随时随地产生和更新的大数据.蕴含着前所未有的社会价值和商业价值。大数据成为21世纪最为重要的经济资源之一。正如马云所言:未来最大的能源不是石油而是大数据。对大数据的获取、处理与分析.以及基于大数据的智能应用.已成为提高未来竞争力的关键要素。但如何获取这些宝贵数据呢?网络爬虫就是一种高效的信息采集利器.利用它可以快速、准确地采集我们想要的各种数据资源。因此.可以说.网络爬虫技术几乎已成为大数据时代t从业者的必修课程。我们需要采集的数据大多来源于互联网的各个网站。然而.不同的网站结构不一、布局复杂、渲染方式多样.有的网站还专门采取了一系列“反爬”的防范措施。因此.为准确高效地采集到需要的数据.我们需要采取具有针对性的反制措施。网络爬虫与反爬措施是矛与盾的关系.网络爬虫技术就是在这种针锋相对、见招拆招的不断斗争中.逐渐完善和发展起来的。本书介绍了利用 python3进行网络爬虫开发的各项技术.从环境配置、理论基础到进阶实战、分布式大规模采集.详细介绍了网络爬虫开发过程中需要了解的知识点.并通过多个案例介绍了不同场景下采用不同爬虫技术实现数据爬取的过程我坚信.每位读者学习和掌握了这些技术之后.成为一个爬虫高手将不再是梦想!李舟军.北京航空航天大学教授.博士生导师7年10月
序二众所周知.人工智能的这次浪潮和深度学习技术的突破密不可分.却很少有人会谈论另一位幕后英雄.即数据。如果不是网络上有如此多的图片.李飞飞教授也无法构建近千万的标注图片集合genet.从而成就深度学习技术在图像识别领域的突破。如果不是在网络上有了如此多的聊天数据小冰也不会学习到人类的情商.在聊天中带给人类惊喜、欢笑和抚慰。人工智能的进步离不开数据和算法的结合.人类无意间产生的数据却能够让机器学习到超乎想象的“智慧”.反过来服务人类在互联网时代.强大的爬虫技术造就了很多伟大的搜索引擎公司.让人类的记忆搜索能力得到巨大的延展。今天在移动互联网时代.爬虫技术仍然是支撑一些信息融合应用(如今ri头条)的关键技术。但是.今天爬虫技术面临着更大的挑战。与互联网的共享机制不同.很多资源只有在登.录之后才能访问.还采取了各种反爬虫措施.这就让爬虫不那么容易访问这些资源。无论是产品还是研究.都需要大量的优质数据来让机器更加智能。因此.在这个时代.大量的从业者急需一本全面介绍爬虫技术的书。如果你需要了解全面和前沿的爬虫技术.而且想迅速地上手实战.这本书就是首选。我很荣幸认识崔庆才先生.他目前还是一名北京航空航天大学在读研究生.正处在一个对技术狂热追求的年纪。我听他讲了一些修炼爬虫技术的故事.很有意思。他在本科的时候因为一个项目开始接触爬虫.之后他用爬虫竟然得到了所在学校同学的照片.还帮助他的哥们儿追其他系的女孩。我问他是否也是用这些信息找到了女友.他甩了下头发.酷酷地说:“需要吗?”崔庆才是个非常擅长学习的人.他玩什么都能玩到精通。他有一个很好的习惯.就是边学边写.他早期学习爬虫技术的时候.就开了博客.边学边分享他学到并实际操作过的经验.圈粉无数。我很受启发.这样的学习模式很高效.要教给别人之前自己必须弄得特别清楚。另一方面.互联网上的互动也给了他继续学习和精益求精的动力除了网络.图书是最成体系的经验分享。本书记录了崔庆才先生对爬虫实战技术最精华的部分。我已经迫不及待地想买一本.也一定会把它推荐给更多的朋友宋睿华.微软小冰首席科学家2017年10月
#############################################
