|
|
了解基本前端技术HTML、CSS、JavaScript,了解Linux、MySQL,Redis。课程主要学习Python网络编程详解、、Python网络爬虫的环境集成、Python网络爬虫的工作原理剖析、自动化爬中技术、异步网络爬虫框架Scrapy、数据爬取项目实战、分布式多线程爬虫实战、 反扒机制攻略。
+ J! ]2 @4 b0 q4 L/ U5 C3 j# p课程内容:
5 \8 y9 h# `8 p8 t1 B3 q 课时1 爬虫实战_课程介绍% H0 O- y! R. E* C, j8 z
课时2 爬虫实战_ 认识爬虫
+ f: w: R1 [! [; J$ O 课时3 requests库的安装与基本使用25 b3 F9 L: u/ {$ k; B7 z" l( n
课时4 requests库中的User-Agent请求头 _: ^) o0 @6 P; _6 Q1 N) A+ @6 D
课时5 requests中的post请求
+ L5 T( w: K, I0 h) ? 课时6 了解cookie和session* x) `& j1 z1 p/ s! t
课时7 requests中携带cookie信息
( t, p$ Q0 n4 U$ y 课时8 requests库中的session方法
* F3 E2 W& x$ G$ w 课时9 Xpath安装及基本操作
1 z+ t, d: q* p. Y1 D' m 课时10 Xpath数据解析方法- ?* Y w- R3 j* \6 q
课时11 Xpath实战学习猿地登录2
+ M( L$ i2 F( b# Y8 J U+ Q/ R 课时12 爬虫实战Xpath抓取猿著文章31 D- N# n, |/ U2 g5 F* `
课时13 bs4的安装与三种使用方式$ o) o2 `: m2 v6 Q) p6 h( L/ I
课时14 bs4实战-学习猿地-猿圈9 K# K* _$ k0 _2 E
课时15 bs4-实战猿圈-代码优化
* t" Z. G6 p7 D& r- g+ s 课时16 re正则模块-介绍
" ~5 O9 D4 l* Z+ G2 Q0 _8 u8 r' u 课时17 re模块相关函数-match与search- m3 @$ _& t9 c7 ?, | v/ F$ ~3 l
课时18 re模块相关函数-其它函数 ]2 |/ L$ B! {' p8 k
课时19 re模块-正则表达式的定义和规则-重点3% ]+ w/ Y$ J9 w9 p7 | m
课时20 re模块-正则实战-猿来如此
1 a; u* I2 s+ g 3 B5 A4 b) L7 @
|
|