|
|
了解基本前端技术HTML、CSS、JavaScript,了解Linux、MySQL,Redis。课程主要学习Python网络编程详解、、Python网络爬虫的环境集成、Python网络爬虫的工作原理剖析、自动化爬中技术、异步网络爬虫框架Scrapy、数据爬取项目实战、分布式多线程爬虫实战、 反扒机制攻略。
* ?0 o8 R$ H$ n课程内容:& ?: o2 n& L" A2 S6 A
课时1 爬虫实战_课程介绍
- T2 A, I) u4 x$ ] 课时2 爬虫实战_ 认识爬虫
0 C1 Z, \% {. o5 m. O7 i) f0 T 课时3 requests库的安装与基本使用2
4 F0 D/ e& B% b 课时4 requests库中的User-Agent请求头$ {( Y- H/ ]" O
课时5 requests中的post请求5 n) w3 u7 E: ?# V# z7 b$ m7 C: p
课时6 了解cookie和session
! n7 D. Z, t- I0 y' u( {2 Q! \! z. h& s 课时7 requests中携带cookie信息
S: V7 I9 G: ?; e: Q. `; U 课时8 requests库中的session方法* n) t* @: t, T$ T
课时9 Xpath安装及基本操作
$ J/ V' f9 i% f 课时10 Xpath数据解析方法
3 C% A$ X( t! Y* [6 M L! l 课时11 Xpath实战学习猿地登录27 f* `$ k4 v- `& [9 l0 y
课时12 爬虫实战Xpath抓取猿著文章33 t. x* j& b) M: ]6 {4 r
课时13 bs4的安装与三种使用方式
" G/ r' r, B, M, n: w" ? 课时14 bs4实战-学习猿地-猿圈
e! R- {4 e" [$ A+ |8 \3 \+ J. p 课时15 bs4-实战猿圈-代码优化; O3 v6 B2 {: ?+ X: r) L7 K
课时16 re正则模块-介绍 A- r; _$ L- u5 b( E7 r8 ^
课时17 re模块相关函数-match与search
0 V; u* @3 N7 e8 Y 课时18 re模块相关函数-其它函数0 k# X. J1 V- [% y5 H% f
课时19 re模块-正则表达式的定义和规则-重点36 r- g) g' k3 T
课时20 re模块-正则实战-猿来如此
. [8 g7 j- L5 O! S1 @5 G- a, b * E. L: s$ G0 G- c* X( R% e" m+ k6 G
|
|