1. 爱易网页
  2. Java教程
  3. java 网站测试版怎样阻止搜索引擎蜘蛛

java 网站测试版怎样阻止搜索引擎蜘蛛

日期：2014-05-17　 浏览次数：21158 次

求助：java 网站测试版怎样阻止搜索引擎蜘蛛
如题：
公司项目完成，要挂公网测试，怎样防止搜索引擎蜘蛛！！

------解决方案--------------------
robots.txt
------解决方案--------------------
探讨

robots.txt

相关资料更多>

  1. 公司强制参加工作以外的文化活动？大家如何避免的
  2. SSH整合例子（仅用到ss处理登录demo）出现错误
  3. 关于网络爬虫，爬取Google相关页面错误有关问题
  4. 求大佬们指点迷津啊（都不知道是不是在这板块发帖）解决方法
  5. 困扰两天了，希望能得到帮助，多谢：There is no Action mapped for namespace
  6. eclipse debug的时候，各个variable颜色是什么意思？该怎么处理
  7. 一个静态方法能够将另一个静态方法作为参数吗？该怎么处理
  8. mina框架 长连接 解析失败 or 丢包 ？解决思路
  9. java 复制远路linux上的文件