Discuz! Board

 找回密码
 立即注册
查看: 3|回复: 0

robots文件是否支持中文目录?

[复制链接]

主题

帖子

5

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
5
发表于 2024-10-7 16:28:48 | 显示全部楼层 |阅读模式
一个关于robots的问题:我们有个站点的目录结构使用的是中文,这样式儿的:123.html,那在制作robots文件和sitemap文件的时候,可以直接使用中文吗?百度能获取到吗?在实际操作中我们发现,sitemap中有文件是可以生效的,但robots封禁貌似没有反应,所以想确认一下:robots文件是否支持中文?
    工程师解答:Baiduspider目前(2016年10月)在robots里是不支持中文的。
    同学追问:那我们进行UrlEncode编码会不会支持呢?比如这种:
    工程师解答:robots文件支持这种写法。但是否生效,还要取决于当时BaiduSpider抓取的是哪种形式结构的链接,如果是UrlEncode编码就可以生效,如果是中文就非常不幸了。
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

Archiver|手机版|小黑屋|编程匠人社区

GMT+8, 2024-11-24 03:33 , Processed in 0.043359 second(s), 19 queries .

Powered by Discuz! X3.4

Copyright © 2001-2020, Tencent Cloud.

快速回复 返回顶部 返回列表