標(biāo)題: [求助] 請教管理我這個禁止搜索引擎訪問的方法是否正確和可行 [打印本頁]
作者: leleshe 時間: 2013-6-18 22:49 標(biāo)題: 請教管理我這個禁止搜索引擎訪問的方法是否正確和可行
本帖最后由 leleshe 于 2013-6-18 22:54 編輯
說明 Robots工具 robots.txt可以告訴搜索引擎您的網(wǎng)站哪些頁面可以被收錄，哪些頁面不可以被收錄，如果您不想讓搜索引擎收錄您網(wǎng)站的某些內(nèi)容，請用robots.txt文件指定搜索引擎在您網(wǎng)站上的抓取范圍。該工具可以檢測您的網(wǎng)站是否有robots.txt文件，及robots.txt文件內(nèi)容，并能按照您的需求生成正確的robots.txt文件。
下載 (7.89 KB)
2013-6-18 22:47
我在百度上看到這個robots工具 所以我就想讓搜索引擎不抓取 /linux下的目錄創(chuàng)建規(guī)則如下
然后生成robot.txt文件下載下來
下載 (3.1 KB)
2013-6-18 22:51
我吧它放在了www下
下載 (5.98 KB)
2013-6-18 22:49
請問管理這樣可行么？行了的話方的地方對不對？ 請教
這是禁止所有搜索引擎抓取的代碼規(guī)則
圖片附件: 4.png (2013-6-18 22:47, 7.89 KB) / 下載次數(shù) 10518
http://cd-genova.com/bbs/attachment.php?aid=3102&k=4618c131afcf81814a02566283bc9f98&t=1745224582&sid=orhOH9
圖片附件: 7.png (2013-6-18 22:49, 5.98 KB) / 下載次數(shù) 10507
http://cd-genova.com/bbs/attachment.php?aid=3104&k=590a6af8331089a38408df1cd6262f87&t=1745224582&sid=orhOH9
圖片附件: 5.png (2013-6-18 22:51, 3.1 KB) / 下載次數(shù) 10559
http://cd-genova.com/bbs/attachment.php?aid=3105&k=dc7d086383593a3685ad321dcb20dc00&t=1745224582&sid=orhOH9
作者: leleshe 時間: 2013-6-18 22:54
本帖最后由 leleshe 于 2013-6-18 22:56 編輯
這是百度站長工具里面的 大家可以去看看
另外請管理幫忙看看這個帖子的問題謝謝
http://cd-genova.com/bbs/thread-6217-1-1.html
作者: admin 時間: 2013-6-19 08:30
這個是放在網(wǎng)站的根目錄下
作者: leleshe 時間: 2013-6-19 11:28
回復(fù) 3# admin
是要放在wdlinux下面么？
作者: hwzaw88 時間: 2013-6-19 16:54
robots 僅是對你網(wǎng)站目錄起作用，應(yīng)該放在你的目錄下。路徑必須可以訪問
作者: leleshe 時間: 2013-6-19 19:45
回復(fù) 5# hwzaw88
額 那就是說這個對后臺控制面板沒有作用了呀，郁悶
作者: admin 時間: 2013-6-19 23:15
不明白
| 歡迎光臨 WDlinux官方論壇 (http://cd-genova.com/bbs/) |
Powered by Discuz! 7.2 |