urllib库介绍请求&保存&编码-51CTO学堂-python爬虫库介绍

{{ interaction.likeNum == 0 ? (pageType === 'video' ? '抢首赞' : '点赞') : formatNumber(interaction.likeNum) }} {{ interaction.collectionNum == 0 ? '收藏' : formatNumber(interaction.collectionNum) }} {{ interaction.discussNum == 0 ? (pageType === 'video' ? '抢沙发' : '讨论') : formatNumber(interaction.discussNum) }}

提问 {{ interaction.noteNum > 0 ? interaction.noteNum + '篇笔记' : '记笔记' }} 离线观看

下载学堂APP

缓存视频离线看

报告问题离线观看

下载学堂APP

缓存视频离线看

课程介绍

讨论{{interaction.discussNum ? '(' + interaction.discussNum + ')' : ''}}

适合人群

python,python爬虫,python数据分析,大数据学习人员,数据分析员

你将会学到

本套视频采取每一个知识点配合一个经典案例，以重视解决实际问题为出发点，以项目结束方式形成完整爬虫知识

课程简介

本套视频采取一个知识点配合一个经典案例，以重视解决实际问题为出发点，是以项目结束方式从而形成一套完整爬虫知识体系。从基本urllib讲起，动态获取数据，然后逐渐到数据解析，请求requests，反爬体系使用和介绍，到用scrapy框架开发项目及scrapy_shell调试数据，并发编程，日志配置，scrapy-redis分布式等高阶技术，配合chrome开发人员和Fiddler抓包工具使用，轻松满足你应对网上爬取内容N种情况，助你一步一步成为互联网合格爬虫工程师。

（1）将学员培养成为合格的Python网络爬虫工程师，并能胜任相关工作；

（2）学完能够学习Python爬虫项目的编写，学习独立开发常见的爬虫项目；

（3）学完能够学习常见的反爬处理手段，比如验证码处理、浏览器伪装、代理IP池技术、用户代理池技术等；

（4）学习抓包技术，urllib，Scrapy框架，requests，Fiddler抓包工具使用。

备注：该阶段配套源码、软件、笔记等

展开更多

发布

置顶笔记