问网络爬虫一次爬我多少网页？
我是1G的vps，每次爬虫来都把我vps爬死了，出现HTTP/1.1 新建会话失败

想问一次，我网页能放一些什么样的标本，告诉网络爬虫，一次不要爬我并非不要爬我太多，只需要爬一次完成后再爬第二次，不要一次并非爬我啊？

------解决方案--------------------
还有呢，我想，一个让爬虫都能爬死的网站，肯定是那种很差劲很小很小的空间啦什么的，自己不会删的话，让空间商帮你吧。