<ul id="g60s4"><pre id="g60s4"></pre></ul>
<strong id="g60s4"><nav id="g60s4"></nav></strong>
<ul id="g60s4"></ul>
    • 

    <tr id="g60s4"></tr>
    • 

  • 


    

    




    
    

    


    


    
    
    
    
    
        
    
            
        
    
        
        
        
        
    
    

    

    或者
    

    

    

    

        

    





    
    
    
        
        
    
            
            
    
                
    
                    
    robots文件
    
                    
    
                        作者：數風流人物
                        瀏覽：727次
                        發布時間：2017-10-24
                    
    
                    
    
                        編輯
                        分享
                        評論
                        贊0
                    
    
                
    
                
    
                    
    
                        
    在網站建設過程中我們會有一部分內容不希望被搜索引擎抓取到或者不希望其在互聯網中出現，那么要怎么辦呢？我要怎么跟搜索引擎說你不要抓取我的網站內容呢？這時候robots就派上用場了。
    Robots.txt是存放于網站根目錄下用于規定搜索引擎對網站內容抓取范圍的文本文件，就這么一句話可以解釋robots.txt是什么，但是我們需要注意的幾點：
    1.robots.txt必須存放在網站的根目錄下。
    2.其命名必須為robots.txt
    3.Robots.txt是搜索引擎訪問網站的第一個頁面
    4.Robots.txt中必須指明user-agent

    
                    
    
                    
                
    
            
    
            
            
    
                
                
                
    
                    
    
                        評論(0人參與，0條評論)
                    
    
                    
    
                        
                        
    發布評論
    
                    
    
                    
    最新評論
    
                    
      
                        
                    
    
                    
    
                        
    
                            
                            
    
                                
                                
                            
    
                                
                        
    
                    
    
                
    
            
    
        
    
        
        
    
            
            
    
                
    詞條統計
    
                
    
                        
  • 瀏覽次數：727次
    • 
                        
  • 編輯次數：0次歷史版本
    • 
                        
  • 最近更新：2017-10-24
    • 
                        
  • 創建者：數風流人物
    • 
                
    
            
    

            
            
    
                
    相關詞條
    
                
      
                    
        
                    
      
                
    
            
    


    
    
    相關問答
    
    
      
            
    

    

    
    
    相關百科
    
    
      
            
    

    

    
    
    相關資訊
    
    
      
            
    

            
    
    
    

    

    



        
        

    


    




    

    





91一区二区在线观看精品|
国内大量偷窥精品视频|
精品久久久无码中字|
亚洲精品第五页中文字幕|
久久无码国产专区精品|
日韩精品在线一区二区|
无码精品一区二区三区免费视频
|
少妇人妻偷人精品视蜜桃|
亚洲va精品中文字幕|
麻豆亚洲AV永久无码精品久久|
精品久久久中文字幕二区|
色一乱一伦一图一区二区精品|
日韩精品一区二区三区视频|
久久精品无码一区二区日韩AV|
国产精品久久久久久福利漫画|
国产成人亚洲综合无码精品|
亚洲无线观看国产精品|
精品人妻伦九区久久AAA片69|
vvvv99日韩精品亚洲|
国产午夜久久精品|
国产麻豆va精品视频|
国产精品美女流白浆视频|
国内精品久久久久久久久蜜桃|
国产精品久久久久鬼色|
久久久久人妻精品一区蜜桃|
久久九九有精品国产23百花影院|
国产成人精品久久综合|
成人精品一区二区三区电影|
久久久久国产精品熟女影院
|
www亚洲精品久久久乳|
中文精品一卡2卡3卡4卡|
99精品一区二区三区无码吞精|
人妻精品久久久久中文字幕|
国产精品1区2区3区在线播放|
久久精品中文字幕久久|
日本久久久精品中文字幕|
九九精品免视看国产成人|
日本精品久久久中文字幕|
久久精品丝袜高跟鞋|
99精品热女视频专线|
久久精品青青草原伊人|