写的一个爬虫脚本,给一些有规则的页面发送get请求,然后用beautifulsoup来解析网页。为了让抓取速度加快,所以开了十几个线程来同时进行抓取工作。
在抓取过程中突然出现Segmentation Fault错误,无其他任何提示,抓取终止。
请教。碰到这种错误如何解决。python Segmentation Fault出现的原因有哪些?
一般是内存错误吧,用pdb调试
http://blog.csdn.net/magicbreaker/art…
建议把coredump打开。然后gdb一下看挂在哪里了。
正文完