<font id="zqva1"></font>
<rt id="zqva1"></rt>
  • <tt id="zqva1"></tt>
    <cite id="zqva1"></cite>

    <cite id="zqva1"><noscript id="zqva1"></noscript></cite>
      <rp id="zqva1"><meter id="zqva1"></meter></rp>

        <cite id="zqva1"></cite>
          <b id="zqva1"></b>
          <rp id="zqva1"></rp>
          <cite id="zqva1"></cite>

          <rt id="zqva1"></rt>

        1. <rp id="zqva1"></rp>

          防止百度,360等搜索引擎抓取/收錄網站的方法總匯

          時間:?2017-12-26閱讀:?1565標簽:?方法

          搜索引擎的蜘蛛spider會不斷爬行互聯網數據,如果網站沒有做出防止搜索引擎抓取的操作,就很容易被搜索引擎收錄,這篇文章主要講解如何防止百度,360等搜索引擎收錄網站內容。


          方法一:robots.txt

          搜索引擎的蜘蛛spider在訪問網站的時候,首先會檢查該網站的根域下是否存在有 robots.txt的純文本文件,這個文件的作用是用來告訴spider在您網站上的抓取范圍。
          User-agent:*表示和所有搜索引擎協議適用;
          Disallow:/表示禁止抓取收錄全站。  

          禁止所有內容:

          User-agent: *
          Disallow: /

          禁止訪問網站的所有部分:

          User-agent: *
          Disallow: /css/
          Disallow: /js/
          Disallow: /admin/

          禁止所有的搜索引擎訪問css、js、admin目錄。如果您的網站設置了robots.txt文件,如果在搜索結果中出現您網站的相關信息,那搜索結果中展示的一般是其他網站對您相關網頁的描述。


          方法二:網頁代碼方法

          <head>與</head>之間設置meta:

          <meta name="robots" content="noarchive">

          通過這樣設置就可以禁止搜索引擎抓取網站并顯示網頁快照。要允許其他搜索引擎顯示快照,但僅防止百度顯示,請使用以下標記:

          <meta name="Baiduspider" content="noarchive">


          方法三:判斷訪問來源

          在服務器端判斷訪問來源,如果是蜘蛛的IP直接404或者阻止它訪問即可。  


          備注:

          如果后面加了禁止代碼,但是搜索引擎還可以搜索出來,因為搜索引擎索引數據庫的更新需要時間。雖然Baiduspider已經停止訪問您網站上的網頁,但百度搜索引擎數據庫中已經建立的網頁索引信息,可能需要數月時間才會清除。  

          站長推薦

          1.阿里云: 本站目前使用的是阿里云主機,安全/可靠/穩定。點擊領取2000元代金券、了解最新阿里云產品的各種優惠活動點擊進入

          2.騰訊云: 提供云服務器、云數據庫、云存儲、視頻與CDN、域名等服務。騰訊云各類產品的最新活動,優惠券領取點擊進入

          3.廣告聯盟: 整理了目前主流的廣告聯盟平臺,如果你有流量,可以作為參考選擇適合你的平臺點擊進入

          鏈接: http://www.modern-decoration.com.cn/article/detial/283

          Javascript中 toFixed

          簡單來說就是:四舍六入五考慮,五后非零就進一,五后為零看奇偶,五前為偶應舍去,五前為奇要進一。但是不論引入toFixed解決浮點數計算精度缺失的問題也好,它有沒有使用銀行家舍入法也罷,都是為了解決精度的問題

          Javascript有重寫嗎?

          JavaScript中有重寫。有時子類并不想原封不動地繼承父類的方法,而是想作一定的修改,這就需要采用方法的重寫。方法重寫又稱方法覆蓋。

          javascript中的split方法怎么用?

          split()方法可以利用字符串的子字符串的作為分隔符將字符串分割為字符串數組,并返回此數組,本文給大家介紹javascript split 方法。split() 方法用于把一個字符串分割成字符串數組。

          JavaScript中Array.find()方法如何使用?

          find()方法返回通過測試(函數內判斷)的數組的第一個元素的值。當數組中的元素在測試條件時返回 true 時, find()返回符合條件的元素,之后的值不會再調用執行函數。如果沒有符合條件的元素返回undefined。

          自定義Buffer方法

          Buffer類,是用來創建一個專門存放二進制數據的緩存區。每當需要處理二進制數據時,就有可能使用到Buffer類。Buffer存在于全局對象上,是必須要了解和掌握的知識。

          javascript中怎么定義靜態方法?

          JavaScript中直接定義在構造函數上的方法和屬性是靜態的, 定義在構造函數的原型和實例上的方法和屬性是非靜態的。

          什么是javascript的私有方法?

          私有方法是只有父類可以訪問的方法和屬性,他與靜態方法一致,只是表現形式不一樣。構造器中的var變量和參數都是私有方法。私有成員由構造函數生成。構造函數的普通變量和參數成為私有成員。

          node事件驅動events提供哪些方法?

          nodejs是基于事件驅動和非阻塞I/O的方式來設計運行的,那么作為實現事件驅動的核心模塊Events就成了深入學習node.js的關鍵。在node中大部分的模塊的實現都繼承了Events類。 比如,文件操作中的fs事件流,網絡編程所用到的tcp,http模塊等

          Js的string.search()方法怎么用?

          string.search()是JavaScript中的一個內置方法,用于搜索正則表達式和給定字符串對象之間的匹配。返回值:返回正則表達式與給定字符串對象之間的第一個匹配的索引,如果未找到匹配項則返回-1。

          js常用擴展方法

          在日常的開發過程中,經常會碰到javaScript原生對象方法不夠用的情況,所以經常會對javaScript原生方法進行擴展。下面就是在實際工作時,經常使用的一些方法,做一下記錄,有需要的可以拿去。

          內容以共享、參考、研究為目的,不存在任何商業目的。其版權屬原作者所有,如有侵權或違規,請與小編聯系!情況屬實本人將予以刪除!

          文章投稿關于web前端網站點搜索站長推薦網站地圖站長QQ:522607023

          小程序專欄: 土味情話心理測試腦筋急轉彎幽默笑話段子句子語錄成語大全運營推廣

          国产精品高清视频免费 - 视频 - 在线观看 - 影视资讯 - 唯爱网