日韩免费看-日韩免费精品一级毛片-日韩免费精品视频-日韩免费精品-日韩免费观看一级毛片看看-日韩免费观看视频

企億推信息網
專注網絡推廣服務

robots文件的相關知識點您了解多少呢?

網站優化的時候,優化師會為網站添加上robots文件,robots文件是做什么用的?robots文件是告訴搜索引擎蜘蛛這個地址是網站地圖,如果我們有網站隱私文件要屏蔽搜索引擎蜘蛛不讓其抓取時,可以在robots.txt中寫上路徑地址,并且我們可以在robots文件中添加Sitemap網址,幫助網站的抓取機會。

robots文件示例:

User-agent: *

Disallow: /bin/

Sitemap: https://www.zhongtao.net/sitemap.xml

有頁面不想被搜索引擎收錄我們可以是用robots meta標簽來解決,robots.txt文件主要是限制整個站點或者目錄的蜘蛛訪問,而robots meta標簽則主要是針對某個具體的頁面,此標簽放在頁面中,專門用來告訴搜索引擎蜘蛛如何抓取該頁的內容。

我們接下來看看robots meta標簽有幾種使用方式:

1.在content部分robots meta標簽有4個指令選項,分別是:index、follow、noindex、nofollow。

follow 指令表示搜索引擎蜘蛛可以爬行該頁面上的鏈接。

notollow 指令與 follow指令相反,表示搜索引擎蜘蛛不可以爬行該頁面上的鏈接。

index 指令告訴搜索引擎蜘蛛可以抓取該頁面。

noindex 指令與index指令相反,表示搜索引擎蜘蛛不可以抓取該頁面。

2. robots meta標簽中,name="robots"表示所有的搜索引擎,也可以針對某個具體的搜索引擎。

robots文件的相關知識點您了解多少呢?(圖1)

未經允許不得轉載:啟新網站SEO優化 » robots文件的相關知識點您了解多少呢?
分享到: 更多 (0)
加載中~
主站蜘蛛池模板: 亚洲第一色区 | 国产免费一区二区 | 欧美亚洲一区二区三区 | 母爱成瘾在线观看 | 网址在线观看你懂我意思吧免费的 | 亚欧毛片基地国产毛片基地 | 我的年轻漂亮继坶三级 | 久久全国免费久久青青小草 | a级精品九九九大片免费看 a级动漫 | 日本高清免费中文字幕不卡 | 国产精品天天在线 | 久久性综合亚洲精品电影网 | 亚洲精品第二页 | 亚洲精品国产精品精 | 国产精品自拍一区 | 日本一在线中文字幕天堂 | 亚洲+欧美+国产+综合 | 欧美成人tv在线观看免费 | 欧美肥胖bb | 亚洲高清中文字幕一区二区三区 | 四虎影视在线看 | 99久久国产综合精品网成人影院 | 日韩欧美中文字幕出 | 男人在女人下面狂躁 | 精品视频一区二区 | 亚洲v成人天堂影视 | 洗濯屋し在线观看 | 日本粉色视频 | 久草草在线视视频 | 日日操天天射 | 免费网站看v片在线成人国产系列 | 国产精品一级香蕉一区 | 日本精品一区二区三区 | 激情综合站| 动漫美女隐私尿口图片 | 欧美三级免费观看 | 国产女同精品 | chinesexxxxhd人妖 chinesespanking调教 | 999久久免费高清热精品 | 日韩丝袜在线观看 | 91亚洲视频在线观看 |