99精品国产综合久久久久五月天,免费观看欧美大片毛片不用播放器 ,AV无码理论片在线观看免费网站,国产精品国产成人国产三级

標(biāo)題: [提問] wdCP云主機(jī)linux服務(wù)器控制面板如果屏蔽，高手進(jìn)！ [打印本頁]

作者: jiyongfei 時間: 2016-11-15 15:45 標(biāo)題: wdCP云主機(jī)linux服務(wù)器控制面板如果屏蔽，高手進(jìn)！

百度這個頁面自動抓取了，我想禁止抓取，修改了，/wdcp/html/用 robots.txt禁止抓取，還是直接在wdcp里面放robots.txt

圖片附件: 3745.jpg (2016-11-15 15:44, 101.92 KB) / 下載次數(shù) 12472
http://fudaan.com/bbs/attachment.php?aid=6834&k=659128f94cf41ba3a87e540189f7bb63&t=1745322432&sid=CMMi0r

作者: admin 時間: 2016-11-16 10:03

修改端口，或限制本地域名或IP訪問

作者: chysyan 時間: 2016-11-21 19:32

文件目錄 /www/wdlinux/wdcp/html/

robots.txt 文件內(nèi)容禁止抓取的內(nèi)容

User-agent: *
Disallow: /

復(fù)制代碼

歡迎光臨 WDlinux官方論壇 (http://fudaan.com/bbs/)