爬虫实战 | 揭秘古风系列商品,避免踩坑(14)
总结:
在淘宝里的古风商品,服装、佩饰价格都普遍处于相对便宜的位置,如:佩饰价格普遍分布在0-50元,服装普遍分布在50-150元,这都是我们可以接受的范围。所以在生活中,买件古风装,圆个江湖梦的成本还是不算太高。^_^
不足:
1、抓取的速度方面可以优化,反爬方面可以准备更多尝试,因为在抓取到100多页后还是意料之内的被forbid,后续可以考虑建立更多的ip,和模拟账号登录。
2、仅对普通的淘宝店铺进行了抓取,未对天猫商家的数据进行抓取,后续技术提高后可以尝试增加天猫这一块的样本,毕竟常识来看同款商品天猫的价位比普通的淘宝店铺偏高,并且对于商品有最低和最高价的商品仅选择了最低价,综合来说,总体的价格结论可能会稍微偏低。
3、将关键词作为商品的分类,可能会有类型重叠部分,后续可以通过搜索类别+关键词作为依据。
- “东方—2018”战略演习:中方参演官兵话实战
- 中国首艘自主建造极地科考破冰船今下水 揭秘亮点
- 爱美食、爱学习 大数据揭秘原来他们是这样的老师
- 揭秘电子烟灰色销售链!暴利背后已有多起罪案发生
- 常喝酒的江西人一定得知道,茅台镇女孩揭秘白酒行业潜规则!
- 油烟机技术迎来新突破 格兰仕智能洗功能大揭秘
- 新总理7000万豪宅曝光!揭秘过往总理私密住宅,竟然过得这么…
- 倒计时!揭秘A股终极底部仅剩24小时
- 记者卧底写手群揭秘代写论文江湖 本科包过只需800元
- 美国人存款大揭秘:人均17万美元,超一半人零存款!中国呢?