写的一个爬虫脚本,给一些有规则的页面发送get请求,然后用beautifulsoup来解析网页。为了让抓取速度加快,所以开了十几个线程来同时进行抓取工作。
在抓取过程中突然出现Segmentation Fault错误,无其他任何提示,抓取终止。
请教。碰到这种错误如何解决。python Segmentation Fault出现的原因有哪些?
写的一个爬虫脚本,给一些有规则的页面发送get请求,然后用beautifulsoup来解析网页。为了让抓取速度加快,所以开了十几个线程来同时进行抓取工作。
在抓取过程中突然出现Segmentation Fault错误,无其他任何提示,抓取终止。
请教。碰到这种错误如何解决。python Segmentation Fault出现的原因有哪些?
4 回答4.4k 阅读✓ 已解决
1 回答3.1k 阅读✓ 已解决
4 回答3.8k 阅读✓ 已解决
3 回答2.2k 阅读✓ 已解决
1 回答4.4k 阅读✓ 已解决
1 回答3.9k 阅读✓ 已解决
1 回答2.8k 阅读✓ 已解决
一般是内存错误吧,用pdb调试
http://blog.csdn.net/magicbreaker/art...