python网络爬虫实战 吕文翔-ag凯发k8国际

本书从原理到实践，循序渐进地讲述了使用python开发网络爬虫的核心技术。全书从逻辑上可分为基础篇、实战篇和爬虫框架篇三部分。基础篇主要介绍了编写网络爬虫所需的基础知识，包括网站分析、数据抓取、数据清洗和数据入库。网站分析讲述如何使用chrome和fiddler抓包工具对网站做全面分析；数据抓取介绍了python爬虫模块urllib和requests的基础知识；数据清洗主要介绍字符串操作、正则和beautifulsoup的使用；数据入库讲述了mysql和mongodb的操作，通过orm框架sqlalchemy实现数据持久化，进行企业级开发。实战篇深入讲解了分布式爬虫、爬虫软件的开发、12306抢票程序和微博爬取等。框架篇主要讲述流行的爬虫框架scrapy，并以scrapy与selenium、splash、redis结合的项目案例，让读者深层次了解scrapy的使用。此外，本书还介绍了爬虫的上线部署、如何自己动手开发一款爬虫框架、反爬虫技术的ag凯发k8国际的解决方案等内容。

本书使用python 3.x编写，技术先进，项目丰富，适合欲从事爬虫工程师和数据分析师岗位的初学者、大学生和研究生使用，也很适合有一些网络爬虫编写经验，但希望更加全面、深入理解python爬虫的开发人员使用。

总结

以上是ag凯发k8国际为你收集整理的python网络爬虫实战 吕文翔_实战python网络爬虫的全部内容，希望文章能够帮你解决所遇到的问题。

如果觉得ag凯发k8国际网站内容还不错，欢迎将ag凯发k8国际推荐给好友。