国产成人精品999视频&日本一区二区亚洲人妻精品&久久久精品国产99久久精&99热这里只有成人精品国产&精品国产剧情av一区二区&成人亚洲精品久久久久app&国产精品美女高潮抽搐A片

Categories


Tags


頭條搜索Robots匹配說明

匹配方式

分兩部分:1.path部分,2.參數(shù)部分

匹配支持?*$?兩種通配符

?*? 表示任何有效字符的 0 個或多個個案。

?$? 表示網(wǎng)址結束。

path部分

與google匹配方式保持一致,也就是只有/或是*開頭的規(guī)則才有機會匹配上

?/?

匹配根目錄以及任何下級網(wǎng)址

?/fish?

?/fish?開頭的

匹配項

* ?/fish?

* ?/fish.html?

* ?/fish/salmon.html?

* ?/fishheads?

* ?/fishheads/yummy.html?

* ?/fish.php?id=anything?

不匹配項

* ?/Fish.asp?

* ?/catfish?

* ?/?id=fish?

?/fish\*?

等同于 ?/fish?。結尾的通配符會被忽略。

匹配項:

* ?/fish?

* ?/fish.html?

* ?/fish/salmon.html?

* ?/fishheads?

* ?/fishheads/yummy.html?

* ?/fish.php?id=anything?

不匹配項:

* ?/Fish.asp?

* ?/catfish?

* ?/?id=fish?

?/fish/?

結尾的斜杠表示此項與此文件夾中的任何內(nèi)容均匹配。

匹配項:

* ?/fish/?

* ?/fish/?id=anything?

* ?/fish/salmon.htm?

不匹配項:

* ?/fish?

* ?/fish.html?

* ?/Fish/Salmon.asp?

?/\*.php?

匹配項:

* ?/filename.php?

* ?/folder/filename.php?

* ?/folder/filename.php?parameters?

* ?/folder/any.php.file.html?

* ?/filename.php/?

不匹配項:

* ?/?(即使其映射到 /index.php)

* ?/windows.PHP?

?/\*.php$?

匹配項:

* ?/filename.php?

* ?/folder/filename.php?

不匹配項:

* ?/filename.php?parameters?

* ?/filename.php/?

* ?/filename.php5?

* ?/windows.PHP?

?/fish\*.php?

匹配項:

* ?/fish.php?

* ?/fishheads/catfish.php?parameters?

不匹配項: ?/Fish.PHP?

?\*/ `` fish `` /?

包含/fish/的path

匹配項:

* ?/search/fish/filename.php?parameters?

* ?/fish/filename.php?parameters?

不匹配項:

* ?/Fish.PHP?

?.htm$?

錯誤寫法,不能與.htm結尾的url匹配

參數(shù)部分

支持參數(shù)無序匹配,參數(shù)key value均支持?\*?通配符

?/home.php?mod=?

value可以是任意值

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&mod=xxx?

不匹配項

* ?/home.php?c=0&smod=939?

* ?/home.php?c=0&mods=939?

?/home.php?mod=\*?

value可以是任意值,等同于?/home.php?mod=?

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&mod=xxx?

不匹配項

* ?/home.php?c=0&smod=939?

* ?/home.php?c=0&mods=939?

?/home.php?mod=9?

參數(shù)值要求完全相對才匹配

匹配項

* ?/home.php?c=0&mod=9?

不匹配項

* ?/home.php?c=0&mod=939?

?/home.php?mod=9\*?

value以9開頭的

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&mod=9xx?

* ?/home.php?c=0&mod=9?

不匹配項

* ?/home.php?c=0&mod=3xx?

* ?/home.php?c=0&mod=39x?

?/home.php?mod=\*9?

value以9結尾

匹配項

* ?/home.php?c=0&mod=xx9?

不匹配項

* ?/home.php?c=0&mod=34?

* ?/home.php?c=0&mods=9?

* ?/home.php?c=0&mod=93?

?/home.php?mod=\*39?

value以39結尾的

匹配項

* ?/home.php?c=0&mod=939?

不匹配項

* ?/home.php?c=0&mod=9319?

?/home.php?\*mod=939?

key以mod結尾的

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&smod=939?

不匹配項

* ?/home.php?c=0&mods=939?

?/home.php?mod\*=939?

key以mod開頭的

匹配項

* ?/home.php?c=0&mods=939?

* ?/home.php?c=0&mod=939?

不匹配項

* ?/home.php?c=0&smod=939?

?/home.php?\*mod\*=939?

key包含mod字符串

匹配項

* ?/home.php?c=0&smods=939?

* ?/home.php?c=0&mods=939?

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&smod=939?

不匹配項

* ?/home.php?c=0&msod=939?

?/home.php?\*mod\*=\*39\*?

key 包括mod字符串,value包含39字符串

匹配項

* ?/home.php?c=0&smods=939?

* ?/home.php?c=0&smod=39?

* ?/home.php?c=0&mod=939?

不匹配項

* ?/home.php?c=0&msod=93?

?/home.php?mod?

參數(shù)部分采用前綴匹配

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&mods=939?

不匹配

* ?/home.php?c=0&smod=939?

?/home.php?mod\*?

匹配項

* ?/home.php?c=0&mod=939?

* ?/home.php?c=0&mods=939?

不匹配項

* ?/home.php?c=0&smod=34

來源:頭條搜索站長平臺


Public @ 2011-09-27 16:09:01

360搜索對Robots協(xié)議的支持

360搜索支持Robots協(xié)議的主要命令,以下為具體說明:1. user-agent360搜索各產(chǎn)品的爬蟲user-agent為:- 網(wǎng)頁搜索 360Spider- 圖片搜索 360Spider-Image- 視頻搜索 360Spider-Video2. Allow站長可通過Allow命令指定建議收錄的文件、目錄 。3. Disallow站長可通過Disallow命令指定不建議收錄的文件、目錄。

Public @ 2019-06-30 16:09:34

robots.txt文件的格式

User-agent: [robot名稱] Disallow: [禁止存取的目錄或檔案] Allow: [允許存取的目錄或檔案] Sitemap: [網(wǎng)站地圖檔案位置] 注意事項: - User-agent:要設定的是區(qū)分搜索引擎的機器人,可設定多個。若不加此欄位,則視為通用設定。 - Disallow:機器人不可存取的目錄或檔案,在此設定時,要注意目錄名稱或檔案名稱是完整的,不

Public @ 2023-06-17 03:50:39

robot.txt在SEO中的作用

在進行網(wǎng)站優(yōu)化的時候,經(jīng)常會使用robots文件把一些內(nèi)容不想讓蜘蛛抓取,以前寫過一篇網(wǎng)站優(yōu)化robots.txt文件的運用 現(xiàn)在寫這篇文章在補充一點點知識!什么是robots.txt文件搜索引擎通過一種爬蟲spider程序(又稱搜索蜘蛛、robot、搜索機器人等),自動搜集互聯(lián)網(wǎng)上的網(wǎng)頁并獲取相關信息。鑒于網(wǎng)絡安全與隱私的考慮,搜索引擎遵循robots.txt協(xié)議。通過根目錄中創(chuàng)建的純文本文件r

Public @ 2020-01-26 16:09:04

更多您感興趣的搜索

0.511707s