国产成人精品999视频&日本一区二区亚洲人妻精品&久久久精品国产99久久精&99热这里只有成人精品国产&精品国产剧情av一区二区&成人亚洲精品久久久久app&国产精品美女高潮抽搐A片

Categories


Tags


robots.txt:如何讓搜索引擎不要抓取沒用的頁(yè)面

| 什么是robots文件?

Robots是站點(diǎn)與spider溝通的重要渠道,是網(wǎng)站與搜索引擎爬蟲之間的協(xié)議,告知哪些可抓取哪些不允許。

| 為什么要做robots文件?

網(wǎng)站上總有一些頁(yè)面是禁止蜘蛛抓取的。例如:搜索頁(yè)面、篩選頁(yè)面、后臺(tái)登錄地址等。

| 如何制作 robots文件?

編寫robots.txt文件并上傳到網(wǎng)站根目錄。

| 制作 robots.txt注意事項(xiàng)

● 所有搜索引擎則用星號(hào)表示

● Allow(允許)和Disallow(不允許)優(yōu)先級(jí)

● 至少屏蔽一個(gè),可以屏蔽:搜索結(jié)果頁(yè)面/404頁(yè)面

● 記得將sitemap放到Robots文件中

● 可以陸續(xù)放入更多,而不是一次性決定所有

● 網(wǎng)站后臺(tái)地址/圖片地址/下載文件地址/錯(cuò)誤鏈接(搜外網(wǎng))


Public @ 2019-03-13 16:09:27

Canonical標(biāo)簽的作用是什么?SEO詳細(xì)解讀!

如果網(wǎng)站中有不同的url能訪問(wèn)到同一個(gè)頁(yè)面,那么從網(wǎng)站seo優(yōu)化的角度來(lái)看,是有問(wèn)題的。不同的網(wǎng)址都可以訪問(wèn)同樣內(nèi)容的頁(yè)面,會(huì)給有可能引起搜索引擎的誤判。Canonical標(biāo)簽的出現(xiàn),就是來(lái)解決這一問(wèn)題的。什么是canonical標(biāo)簽canonical標(biāo)簽是在html網(wǎng)頁(yè)中head頭部標(biāo)簽中l(wèi)ink標(biāo)簽的一種屬性;最早由谷歌搜索引擎提出,目的是為了解決網(wǎng)址規(guī)范性問(wèn)題。簡(jiǎn)單來(lái)說(shuō)就是當(dāng)網(wǎng)頁(yè)中有多個(gè)網(wǎng)址

Public @ 2016-10-20 16:11:19

360搜索站長(zhǎng)平臺(tái)Sitemap提交流程

360搜索站長(zhǎng)平臺(tái)Sitemap提交流程如下: 1. 登錄360搜索站長(zhǎng)平臺(tái),進(jìn)入站長(zhǎng)工具頁(yè)面。 2. 在左側(cè)菜單欄中選擇“站點(diǎn)管理”,然后點(diǎn)擊頁(yè)面中央的“添加站點(diǎn)”按鈕。 3. 在彈出的新頁(yè)面中,填寫您的網(wǎng)站信息,包括網(wǎng)站名稱、網(wǎng)站地址、網(wǎng)站分類等內(nèi)容,然后點(diǎn)擊“立即添加”按鈕。 4. 成功添加站點(diǎn)后,返回站長(zhǎng)工具頁(yè)面,點(diǎn)擊左側(cè)菜單欄中的“站點(diǎn)管理”,找到您剛剛添加的網(wǎng)站,點(diǎn)擊“管理”,

Public @ 2023-05-28 09:00:17

360搜索對(duì)Robots協(xié)議的擴(kuò)展

360搜索對(duì)Robots協(xié)議進(jìn)行了擴(kuò)展,增加了以下幾個(gè)指令: 1. User-Agent:用于指定搜索引擎訪問(wèn)網(wǎng)站時(shí)使用的用戶代理字符串,可以設(shè)置多個(gè)User-Agent。 2. Crawl-delay:用于指定搜索引擎訪問(wèn)網(wǎng)站時(shí)的延遲時(shí)間,單位為秒??梢栽O(shè)置針對(duì)不同的User-Agent的延遲時(shí)間。 3. Sitemap:用于指定網(wǎng)站的sitemap文件的地址,搜索引擎將通過(guò)該文件獲取站點(diǎn)

Public @ 2023-05-29 17:00:21

更多您感興趣的搜索

0.465510s