情景描述
ONLYstore_name+AdWord
基础表数据表 BASE_TABLE
AdWord food drink
1w1 1f1 1d1
2w2 2f_ 2d_
3w1 3f_ 3d_
4w_ 4f99 4d_
三个字段,联合起来具有唯一性
_标识任意数字
抓取数据结果表 DATA_TABLE
url pageLEFT pageRIGHT
1w1 1f1 1d1
2w1 2f2 2d1
3w1 3f3 3d1
4w2 4f21 4d21
5w3 5f31 5d31
5w3 5f32 5d32
抓取规则
url = SAMEstore_name+DISTINCT_AdWord 为一个抓取周期中的单次抓取,单次抓取中,左侧区处理为一个字符串(商品列表),而右侧区域处理
为多个字符串(商品列表拆散),由此在数据库抓取数据结果表 DATA_TABLE中存入多行