1、字节长度设置少了（解决方式：varchar(250)）

2、中文字段写入问题（解决方式： character set = utf8）

3、特殊符号的词处理（解决方式：replace将特殊符号替换为空白）

二、撰写爬虫：

流程：（仅选取部分代码）

1、用户代理池，ip代理池的建立（池越多越好，越深越赞，本次仅采用了3个ip切换）

2、设定要抓取的目标，对抓取的网站进行分析，

3、构建一级页面的抓取并获得详情页面的Link以及详情页面的对应信息

4、进行抓包分析（可以利用fiddle工具实施）

5、循环抓取，对程序错误进行试调，有错误的地方用try-except进行处理

• “东方—2018”战略演习：中方参演官兵话实战
• 中国首艘自主建造极地科考破冰船今下水 揭秘亮点
• 爱美食、爱学习 大数据揭秘原来他们是这样的老师
• 揭秘电子烟灰色销售链！暴利背后已有多起罪案发生
• 常喝酒的江西人一定得知道，茅台镇女孩揭秘白酒行业潜规则！
• 油烟机技术迎来新突破 格兰仕智能洗功能大揭秘
• 新总理7000万豪宅曝光！揭秘过往总理私密住宅，竟然过得这么…
• 倒计时！揭秘A股终极底部仅剩24小时
• 记者卧底写手群揭秘代写论文江湖 本科包过只需800元
• 美国人存款大揭秘：人均17万美元，超一半人零存款！中国呢？