#注解
#robots.txt
#禁止搜索引擎收录
#指定搜索引擎
User-agent: * 
#指定路径或文件

Disallow: /public/keyword/SetKeyword.aspx 
Disallow: /test.html