开发者社区> 问答> 正文

大家的OSS,有没有蜘蛛去爬?

或者说,要不要设置一下,防止 蜘蛛去爬?上面就只放一些图片什么 的。

展开
收起
cbiz100 2014-02-26 15:24:28 5446 0
5 条回答
写回答
取消 提交回答
  • LT是个伪程序员
    2014-04-28 23:56:11
    赞同 展开评论 打赏
  • 没有防止的必要性
    2014-03-09 17:19:56
    赞同 展开评论 打赏
  • Re大家的OSS,有没有蜘蛛去爬?
    不被蜘蛛爬,你怎么升排名?
    2014-03-09 11:08:07
    赞同 展开评论 打赏
  • 我的就被百度的去爬了,只是放一些附件什么的东东,
    2014-02-27 02:05:11
    赞同 展开评论 打赏
  • 回楼主cbiz100的帖子
    在oss根目录新增一个robots.txt文件.里面填写如下即可:
    User-agent: *
    Disallow: /
    2014-02-26 20:43:56
    赞同 展开评论 打赏
问答分类:
问答地址:
问答排行榜
最热
最新

相关电子书

更多
低代码开发师(初级)实战教程 立即下载
冬季实战营第三期:MySQL数据库进阶实战 立即下载
阿里巴巴DevOps 最佳实践手册 立即下载

相关实验场景

更多