#进行注解"robots.txt"文件包含一条或更多的记录,这些记录通过空行分开(以CR,CR/NL, or NL作为结束符), User-agent: * Disallow: /PR Disallow: /down Disallow: /database Disallow: /UploadFile Disallow: /robots-mode-pattern.txt