本书以Windows为主要平台，系统、全面地讲解Python网络爬虫的相关知识。本书的主要内容包括认识网络爬虫、网页请求原理、抓取静态网页数据、解析网页数据、抓取动态网页数据、提升网络爬虫速度、存储数据、文本混淆与验证码识别、初识网络爬虫框架Scrapy、Scrapy核心组件与CrawlSpider类、分布式网络爬虫Scrapy-Redis。
电子书
内容简介
本书以主流的Scrapy爬虫框架为例，运用了大量案例和实践，介绍了Python网络爬虫的组成、爬虫框架的使用以及分布式爬虫等内容。
章节目录
- 第1 章使用第三方库实现信息抓取
- 任务1 使用第三方库实现北京公交站点页面信息抓取
- 1.1.1 介绍爬虫
- 1.1.2 HTTP
- 1.1.3 HTML
- 1.1.4 使用第三方库实现爬虫功能
- 1.1.5 技能实训
- 任务2 使用第三方库实现北京公交站点详细信息抓取
- 1.2.1 lxml 库
- 1.2.2 第三方库数据抓取及保存
- 1.2.3 技能实训
- 本章小结
- 本章作业
- 第2 章初探Scrapy 爬虫框架
- 任务1 安装Scrapy 爬虫框架并创建爬虫工程
- 2.1.1 根据使用场景划分爬虫种类
- 2.1.2 开发基于Scrapy 爬虫框架的工程
- 任务2 学习并掌握Scrapy 爬虫框架各模块的功能
- 2.2.1 Scrapy 爬虫工程组成
- 2.2.2 Scrapy 爬虫框架架构
- 本章小结
- 本章作业
- 第3 章提取网页数据
- 任务1 使用Scrapy 的选择器提取豆瓣电影信息
- 3.1.1 Response 对象
- 3.1.2 css 选择器
- 3.1.3 多层级网页爬取
- 3.1.4 技能实训
- 任务2 使用正则表达式从电影介绍详情中提取指定信息
- 3.2.1 正则表达式
- 3.2.2 技能实训
- 本章小结
- 本章作业
- 第4 章Scrapy 数据保存（文件、MySQL、MongoDB）
- 任务1 使用Feed exports将爬取的电影信息保存到常见数据格式文件中
- 4.1.1 Feed exports
- 4.1.2 技能实训
- 任务2 使用pipeline 将爬取的电影信息数据保存到数据库中
- 4.2.1 Python 操作MySQL 数据库
- 4.2.2 pipeline 模块
- 4.2.3 将数据保存到MongoDB 中
- 4.2.4 技能实训
- 本章小结
- 本章作业
- 第5 章Scrapy 反反爬技术
- 任务1 学习反爬虫和反反爬虫策略
- 5.1.1 反爬虫方法和反反爬虫策略
- 5.1.2 Scrapy 设置实现反反爬
- 5.1.3 技能实训
- 任务2 学习Scrapy 框架中更多常用的设置
- 5.2.1 抓取需要登录的网站
- 5.2.2 Scrapy 常用扩展设置
- 本章小结
- 本章作业
- 第6 章Selenium+浏览器加载动态数据
- 任务1 使用Selenium和第三方浏览器驱动完成搜狐网页信息爬取
- 6.1.1 静态网页与动态网页
- 6.1.2 爬虫抓取动态网页的常用方法
- 6.1.3 Selenium+Chrome driver
- 6.1.4 技能实训
- 任务2 使用Selenium+Chrome+Scrapy完成京东商品信息爬取
- 6.2.1 Selenium 的使用
- 6.2.2 Selenium 提高效率的方法
- 6.2.3 技能实训
- 本章小结
- 本章作业
- 第7 章App 数据爬取
- 任务1 使用Scrapy 爬虫框架爬取雪球App 基金频道新闻列表数据
- 7.1.1 App 数据爬取介绍
- 7.1.2 App 数据接口分析方法
- 7.1.3 使用Scrapy 爬取App 数据
- 7.1.4 技能实训
- 任务2 使用Scrapy 爬虫框架爬取知乎App 推荐栏目列表数据
- 7.2.1 爬取使用证书校验技术的App 数据
- 7.2.2 技能实训
- 本章小结
- 本章作业
- 第8 章分布式爬虫Scrapy-Redis
- 任务1 搭建分布式爬虫运行环境
- 8.1.1 分布式爬虫框架介绍
- 8.1.2 搭建分布式爬虫运行环境
- 任务2 使用分布式爬虫完成对火车信息的爬取
- 8.2.1 Scrapy-Redis 分布式爬虫
- 8.2.2 技能实训
- 本章小结
- 本章作业
- 第9 章Python 数据分析
- 任务1 使用Pandas 统计招聘信息中城市名称出现的次数
- 9.1.1 Python 数据分析
- 9.1.2 NumPy
- 9.1.3 Pandas
- 9.1.4 技能实训
- 任务2 使用Matplotlib 实现招聘信息中城市名称出现次数的可视化展示
- 9.2.1 数据可视化
- 9.2.2 技能实训
- 本章小结
- 本章作业
- 第10 章项目实训——爬取招聘网站数据
- 10.1 项目准备
- 10.2 难点分析
- 10.3 项目实现思路
- 本章小结
- 本章作业
展开全部
Python网络爬虫（Scrapy框架）是2020年由人民邮电出版社出版,作者肖睿 陈磊。
温馨提示：
1.本电子书已获得正版授权，由出版社通过知传链发行。
2.该电子书为虚拟物品，付费之后概不接收任何理由退款。电子书内容仅支持在线阅读，不支持下载。
3.您在本站购买的阅读使用权仅限于您本人阅读使用，您不得/不能给任何第三方使用，由此造成的一切相关后果本平台保留向您追偿索赔的权利！版权所有，后果自负！
得书感谢您对《Python网络爬虫（Scrapy框架）》关注和支持，如本书内容有不良信息或侵权等情形的，请联系本网站。
电子书
电子书
本书的主旨是介绍如何结合Python进行网络爬虫程序的开发，从Python语言的基本特性入手，详细介绍了Python爬虫开发的各个方面，涉及包括HTTP、HTML、JavaScript、正则表达式、自然语言处理、数据科学等不同领域的内容。全书共分为15章，包括了Python基础知识、网站分析、网页解析、Python文件读写、Python与数据库、AJAX技术、模拟登录、文本与数据分析、网站测试、S
电子书
本书以项目为导向，以任务为驱动，较为全面地介绍了不同场景、不同平台使用Python爬取网络数据的方法，涉及静态网页、动态网页、登录后才能访问的网页、PC客户端、App客户端等。全书共7个项目，项目1介绍爬虫与反爬虫的基本概念，以及Python爬虫环境的配置；项目2介绍爬取过程中涉及的网页基础知识；项目3介绍在静态网页中爬取数据的过程；项目4介绍在动态网页中爬取数据的过程；项目5介绍对登录后才能访问
电子书
本书主要介绍如何使用Python语言进行网络爬虫程序的开发，从Python语言的基本特性入手，详细介绍Python网络爬虫开发的多个方面，涉及HTTP、HTML、正则表达式、JavaScript、自然语言处理、数据处理与科学计算等不同领域的内容。全书共12章，包括基础篇、进阶篇、提高篇和实战篇4个部分。基础篇包括第1、2、3章，分别为Python基础及网络爬虫、静态网页抓取、数据存储。进阶篇包括第
电子书
适读人群 ：本书既适合需要储备反爬虫知识的前端工程师和后端工程师阅读，也适合需要储备绕过知识的爬虫工程师、爬虫爱好者以及Python程序员阅读。
【人气推荐】《Python 3 网络爬虫开发实战》作者、微软小冰工程师崔庆才作序，腾讯、马蜂窝工程师倾力推荐。
【干货满满】爬虫工程师不可错过的“”，内容包括但不限于Cookie 反爬虫、WebSocket 反爬虫、字体反爬虫、WebDriver反爬虫、App 反爬虫、验证码反爬虫。
【反爬虫原理 爬虫实战】从实战出发，印证国内互联网企业内部加密原理，侧重讲解反爬虫的原理以及绕过方法。
【21个反爬虫示例】结合练习平台 Steamboat，帮助读者随时复现书中的 21个爬虫示例，巩固所学知识。
电子书
本书共5章，介绍了爬虫的基本结构及工作流程、抓包工具、模拟网络请求、网页解析、去重策略、常见反爬措施，以及大型商业爬虫框架Scrapy的应用，最后介绍了数据分析及可视化的相关基础知识。
电子书
本书分为三个部分。第一部分是原理篇，实现了MatrixSlow框架的核心基础设施，并基于此讲解了机器学习与深度学习的概念和原理。第二部分是模型篇，介绍了多种具有代表性的模型，包括逻辑回归、多层全连接神经网络、因子分解机、Wide&Deep、DeepFM、循环神经网络以及卷积神经网络，这部分除了着重介绍这些模型的原理、结构以及它们之间的联系外，还用MatrixSlow框架搭建并训练它们以解决实际问题
电子书
SSH即Struts2+Spring+Hibernate，是目前比较流行的Web应用开源框架。本书紧密结合SSH框架实际应用，利用经典案例进行说明和实践，提炼含金量十足的开发经验，为读者提供与实际开发项目接近的案例，让读者既学到知识又丰富项目经验。本书共11章。主要内容包括Oracle数据库入门，操作Oracle数据库，Hibernate初体验，HQL查询语言，配置Hibernate关联映射，HQ
