单项选择题

robots文件中,()用于指定网络爬虫禁止访问的目录。

A.allow
B.user-agent
C.disallow
D.sitemap