企业网站建设robots.txt文件是否支持中文目录设置？

         日常企业网站建站在优化SEO相关问题的时候都离不开robots文件的设置，很多公司的域名设置可能是这样的www.abc.com/产品/123.html，其实这种在制作网站robots和sitemap文件的时候，可以直接使用中文吗？以我们的实际工作经验研究发现，sitemap中文件是可以生效的，但是robots是没有效果的。为了搞懂这个问题，我们也特地去百度搜索相关的社区提问了解。

        最终通过百度搜索相关工程师解答在robots中设置是不支持中文的。如果采用URLEncode编码，robots是支持这种写法的，但是是否生效还取决于蜘蛛抓取时的形式结构连接。

        对于以上问题，我们从多年的工作经验中分析得出，避免在企业网站路径路径中避免使用任何中文，尽可能使用语义化英文。这样会对优化效果更好。