|
学会火车头采集器的使用,实操教您自定义一些格式规则来采集,然后保存到word或者excel又或者html的形,帮助您提高效率。适合人群:具有一定网站知识基础的网站编辑、SEOER、想提高自己对数据采集、网络营销从业者,需要大量数据的、电话营销从业者、和合成效率的人。1 N! y5 g, q: r0 ]' t8 q: a
课程目录:: g3 f6 [( P7 e3 Y8 z- ?* Y' q4 z4 |
1.1- 火车头采集器的安装和功能简介
+ ]2 E' a/ |$ Q2 \0 q4 | 1.2 - 火车头采集器的相关术语/ ~6 s; [3 F, B% g0 X( d
1.3 - 火车头采集器的学习建议. {$ X. |- ?2 N& _
2.1 - 如何添加需要采集的单条网址" k8 [( k5 l2 r& w
2.2 - 如何添加批量和多页网址" ?- K( @0 }3 A+ t! a( b
2.3 - 如何导入txt网址到开始采集地址' p, R, @4 ^ [$ ]4 |' V
2.4 - 如何获取Rss地址中的网址作为起始网址
4 e) b) O, L1 e% z$ k2 ^ 2.5 - 如何自定义一些网址的格式来采集新的数据6 c- e5 S; Z, S! t+ M5 C( d4 u) K; S
2.6 - 多级网址采集规则之从页面自动分析得到地址链接
5 A: ]4 g$ @3 n: y 2.7- 多级网址采集规则之手动填写链接地址规则8 r: L+ R* ~0 u) l) p9 v
2.8 - 多级网址采集规则之使用Xpath方式获取网址 O; d6 d/ D) N* q
2.9 - 如何判断Http请求方式?是get还是post?( b3 t+ _/ X9 q4 [9 |) l
2.10 - 多级网址采集规则之列表分页获取的方式% J4 `/ b# w* B+ g, G+ K: x+ G/ Y
2.11 - 多级网址采集规则之附加参数是什么意思?' k+ W& l' k1 P! F
3.1 - 提取数据方式有哪些. v+ d7 z. Q7 P8 ]
3.2 - 数据处理之内容替换$ c3 Q& |3 m2 t* v/ ^" X% R
3.3 - 数据处理之Html标签过滤如何使用
- ?% `! o9 `2 I/ O K- ~1 l8 Y, |. d 3.4 - 数据处理之字符截取
& B0 `' E5 V4 i5 E 3.5 - 数据处理之纯正则替换如何使用0 J- y6 j$ E6 N5 v X
3.6 - 数据处理之数据转换
# W' w9 Q: K2 e 3.7 - 数据处理之自动摘要. _" G8 z$ Q' F1 @" H; E5 d4 H9 \
3.8 - 数据处理之自动分词0 ]" b- S' a6 S) r9 H
3.9 - 数据处理之字符编码和解码
* F8 [( K8 r. F" q/ g4 q 3.10 - 数据处理之同义词替换
. |, Q4 h6 _% ` 3.11 - 数据处理之提取文章中的第一张图片. L6 ]0 g8 P9 `: c9 R& I
3.12 - 数据处理之空内容缺省值: s4 b! m7 L% n$ q( |" M
3.13 - 数据处理之内容前后缀
7 T; m. C' _4 V8 K 3.14 - 数据处理之随机插入+ V2 J. R( W- Y! T3 k5 |
3.15- 数据处理之OCR图片识别
* t& I3 C! Z( z 3.16 - 数据处理之对单网址进行补全
) R* @( f8 Y9 P; x 3.17 - 数据处理之文件下载的设置方法! }' Z" Q( p3 T2 i& _/ Z4 u
3.18 - 数据处理之内容过滤相关设置
0 {" H4 R, N; C0 Z: k$ }4 O. V 3.19 - 自定义固定格式的数据
! j; B# L+ @- ?3 f/ B% ? 3.20- 如何循环采集一些数据0 y! k7 Q4 t/ |4 g
3.21 - 如何采集网址中的数据
( o$ [( a* A/ u; G4 J, Y1 K 4.1 - Web在线发布到网址的设置方式9 r9 \ `+ |8 m# p% `- V
4.2 - 将采集到的数据保存为本地TXT文件形式 L$ v6 V# Q3 _) l) p z
4.3 - 将采集到的数据保存为本地Word文件形式1 l7 i; E& x. \/ h! \% ~
4.4 - 将采集到的数据保存为本地Excel文件形式2 C. d L# G+ \5 k
4.5- 将采集到的数据保存为本地Html文件形式
$ i, W/ p7 n9 P! k6 d8 [ 4.6 - 将采集到的数据保存为本地Csv文件形式
/ t0 i# Q3 ~3 T3 R 4.7 - 将采集到的数据导入到自定义数据库
: d& p( B! S) a1 S- R7 [* x1 x 4.8 - 发布数据完成之后可以对数据进行哪些操作
- @, D! w2 [) ?5 G4 y+ U 4.9 - 如何控制每次发布的数据的条数+ x2 ?2 I8 T* x/ S& w+ {
5.1 - 任务运行时线程设置的讲解8 o$ ~+ `2 y; }9 L
5.2 - 文件下载设置的相关注意事项
# J6 m, J1 T$ R, Q# q 5.3 - FTP同步文件上传如何设置
) N% n% i" B# L6 I/ y3 Z 5.4 - 如何给采集到的图片加上水印, D3 t1 G) e8 J2 F3 @' b1 Z* A
m, N! j9 L/ m. b0 ~2 m
|
|