• 出租车司机涉嫌猥亵女乘客 乐山警方:拘留10日 2019-06-21
  • 公众论坛官方网站首页·南方都市报·南方报业传媒集团 2019-06-21
  • 昔日本土最佳中锋终破门 激活他国家队俱乐部都受益 2019-06-19
  • 反俄毒招!世界杯遇尴尬:假球票1万余张,涉案金额1亿美金! 2019-06-14
  • 萨拉赫,你再不上 埃及队就要回家啦 2019-06-14
  • 中外学者齐聚拉萨 首届中国西藏拉萨阿里象雄文化国际学术研讨会召开 2019-06-09
  • 一语惊坛(5月22日):精忠报国是每一个热血青年的夙愿! 2019-06-06
  • 世界是动态发展与平衡的,不会静止不变,指导社会的理论也是不断发展完善的,由相对真理向绝对真理发展接近,这话不是我臆造的,来自学的大学课本根据马克思著作编写... 2019-06-06
  • 重庆 民俗文化进校园(我们的节日·端午) 2019-06-04
  • 太阳是宇宙加油站?不明物体多次靠近“加油”,看清后屏住呼吸 2019-06-04
  • 代理加盟 2019全新代理计划 赚钱+省钱双管齐下,独立平台,丰厚利润!

    您现在的位置: 波西亚时光ns > 站长学院 > SEO资讯 >

    腾讯版波西亚时光mod:别让网站的robots成为最大的安全漏洞

    来源:未知 发布时间:2019-03-31热度: ℃我要评论
    你的网站信息安全吗?树大招风,一些公司往往再收到攻击之后,才想起网站安全。网站注册的个人信息能被黑客们轻易的拿下,对用户造成的损失无法估量。没有100%安全而完美的系统,黑客们乐此不彼的研究着这些网站的安全漏洞,总有一天会被攻破。 网站根目录下的robots.t...

    波西亚时光ns www.1y2c.com

           你的网站信息安全吗?树大招风,一些公司往往再收到攻击之后,才想起网站安全。网站注册的个人信息能被黑客们轻易的拿下,对用户造成的损失无法估量。没有100%安全而完美的系统,黑客们乐此不彼的研究着这些网站的安全漏洞,总有一天会被攻破。

           网站根目录下的robots.txt文件告诉搜索引擎的访问范围,使用方法很简单,但是搜索引擎还是个人来说都是可以访问的, 很多新人不知道这个文件的重要性,对于渗透测试人员或黑客,可以通过robots.txt文件发现敏感信息,比如猜测这是什么后台用什么数据库等,意味着自己的网站是真空上阵。

    网站robots网络信息安全盾牌

    如何防止别人访问呢?

           网上有人这么做:在IIS中,选中robots.txt,右键属性里,选中重定向到URL,输入任意一个非本站的URL路径,勾选“上面准确的URL”以及“资源的永久重定向”,有点基础的童鞋知道,访问 //域名/robots.txt 时,是自动跳转到指定的那个非本站URL路径。 这个方法在Apache环境中可以借助.htaccess达到这个重定向的目的。

           但是对于蜘蛛来说,这样的跳转意味着站内不存在这个文件,那蜘蛛就不会遵守这个规则,把能发现的URL都抓了。

           为防止别人利用robots文件泄露了网站的结构,做其他手脚,站长们是绞尽脑汁。不让搜索引擎来抓这个文件,那就不遵从抓取范围,都会放进索引库,对不想让搜索引擎建立索引的方法参考:页面不让搜索引擎建立索引。

    实用的防护措施,推荐采用通配符(*)替换敏感文件或文件夹

          比如某个重要文件夹为admin,可以这样写robots

    User-agent:
    Disallow:/a*/

           意思是禁止所有搜索引擎索引根目录下a开头的目录,一般的网站的比较通用的命名有admin,include,templets,plus等,这些都是重要的文件夹,可以修改文件名,但是其他关联一并修改,否则系统会出错。

    用.htaccess禁止垃圾蜘蛛访问

    一搜YisouSpider   #无视robots规则
    宜搜EasouSpider   #无视robots规则
    易查   #无视robots规则
    MSNmsnbot-media
    有道youdao
    必应bingbot

           当然你也要看流量来源,如果有,那就不要屏蔽,实在是少得很有每天很勤快的来访的话,可以屏蔽。

    robots屏蔽蜘蛛

    User-agent: YisouSpider
    Disallow: /
    User-agent: EasouSpider
    Disallow: /
    User-agent: msnbot-media
    Disallow: /
    User-agent: YoudaoBot
    Disallow: /
    User-agent: bingbot
    Disallow: /

    .htaccess屏蔽蜘蛛

    SetEnvIfNoCase User-Agent "^Yisou" bad_bot
    SetEnvIfNoCase User-Agent "^Easou" bad_bot
    SetEnvIfNoCase User-Agent "^Youdao" bad_bot
    SetEnvIfNoCase User-Agent "^msn" bad_bot
    Deny from env=bad_bot 

           或者如下写法,中间加就行了

    RewriteCond %{HTTP_USER_AGENT} (jikeSpider|easouSpider|YisouSpider|bingbot|YoudaoBot|) [NC]

    本文地址://www.1y2c.com/seo/1580.html

      责任编辑:波西亚时光ns

      发表评论

      评论列表(条)

      • 出租车司机涉嫌猥亵女乘客 乐山警方:拘留10日 2019-06-21
      • 公众论坛官方网站首页·南方都市报·南方报业传媒集团 2019-06-21
      • 昔日本土最佳中锋终破门 激活他国家队俱乐部都受益 2019-06-19
      • 反俄毒招!世界杯遇尴尬:假球票1万余张,涉案金额1亿美金! 2019-06-14
      • 萨拉赫,你再不上 埃及队就要回家啦 2019-06-14
      • 中外学者齐聚拉萨 首届中国西藏拉萨阿里象雄文化国际学术研讨会召开 2019-06-09
      • 一语惊坛(5月22日):精忠报国是每一个热血青年的夙愿! 2019-06-06
      • 世界是动态发展与平衡的,不会静止不变,指导社会的理论也是不断发展完善的,由相对真理向绝对真理发展接近,这话不是我臆造的,来自学的大学课本根据马克思著作编写... 2019-06-06
      • 重庆 民俗文化进校园(我们的节日·端午) 2019-06-04
      • 太阳是宇宙加油站?不明物体多次靠近“加油”,看清后屏住呼吸 2019-06-04
      • 活塞vs尼克斯 穿越火线活动中心 雷鸟送彩金 昨天篮球让分胜负推荐全中 广东好彩1分布图 新剑侠情缘2单机版地图 澳洲幸运10网站 孙悟空返水 qq飞车植树节活动 布莱顿p枪机在哪刷 青海快3走势图综合指标 3D号码分析器 新吃鸡手游《和平精英》 猎鱼达人外挂辅助 快船vs森林狼 拜仁对沃尔夫斯堡队