中文字幕日韩精品一区二区免费_精品一区二区三区国产精品无卡在_国精品无码专区一区二区三区_国产αv三级中文在线

robots.txt使用時(shí)的注意事項(xiàng)

2022-06-02    分類: 網(wǎng)站建設(shè)

robots.txt文件同時(shí)也有一定的風(fēng)險(xiǎn),里面的隱私文檔最好不要寫在里面,否則的話容易給攻擊者指明了網(wǎng)站的目錄結(jié)構(gòu)和私密數(shù)據(jù)所在的位置。設(shè)置訪問(wèn)權(quán)限,對(duì)您的隱私內(nèi)容實(shí)施密碼保護(hù),這樣,攻擊者便無(wú)從進(jìn)入。

  1)robots.txt必須放置在站點(diǎn)的根目錄下,而且文件名必須全部小寫。

  2)不要在robots.txt文件中設(shè)置所有的文件都可以被搜索蜘蛛抓取。

  3)為安全考慮,建議很重要的文件夾不要寫在robots.txt文件中。

  常見搜索引擎蜘蛛Robots名字:

  百度Baiduspider :http://www.baidu.com

  360搜索360Spider:https://www.so.com/

  SOSOSosospider:https://www.sogou.com/

  有道YoudaoBot/YodaoBot:http://www.yodao.com/

  搜狗Sogou News Spider:https://www.sogou.com/

  MSNmsnbot/msnbot-media:http://www.msn.com/zh-cn

  谷歌Googlebot :http://www.google.com

  雅虎Inktomi Slurp :http://www.yahoo.com

  必應(yīng)MSNBOT :http://search.msn.com

分享標(biāo)題:robots.txt使用時(shí)的注意事項(xiàng)
網(wǎng)頁(yè)路徑:http://www.rwnh.cn/news/162557.html

成都網(wǎng)站建設(shè)公司_創(chuàng)新互聯(lián),為您提供網(wǎng)站內(nèi)鏈搜索引擎優(yōu)化、企業(yè)建站軟件開發(fā)、企業(yè)網(wǎng)站制作微信小程序

廣告

聲明:本網(wǎng)站發(fā)布的內(nèi)容(圖片、視頻和文字)以用戶投稿、用戶轉(zhuǎn)載內(nèi)容為主,如果涉及侵權(quán)請(qǐng)盡快告知,我們將會(huì)在第一時(shí)間刪除。文章觀點(diǎn)不代表本網(wǎng)站立場(chǎng),如需處理請(qǐng)聯(lián)系客服。電話:028-86922220;郵箱:631063699@qq.com。內(nèi)容未經(jīng)允許不得轉(zhuǎn)載,或轉(zhuǎn)載時(shí)需注明來(lái)源: 創(chuàng)新互聯(lián)

營(yíng)銷型網(wǎng)站建設(shè)
盱眙县| 防城港市| 江北区| 临夏县| 博客| 平罗县| 女性| 金沙县| 乌兰浩特市| 盘山县| 潜江市| 富裕县| 娄底市| 沾化县| 淮北市| 绍兴县| 青阳县| 双鸭山市| 枣阳市| 民县| 弥勒县| 威宁| 南皮县| 彭水| 永新县| 台东县| 嘉峪关市| 无为县| 奉贤区| 平邑县| 廊坊市| 汾西县| 兖州市| 遂昌县| 阳曲县| 灌阳县| 澄迈县| 长沙市| 洪湖市| 和林格尔县| 怀来县|