问答题
每抓取一个页面就休息若干秒，或者限制每天抓取的页面数量。
请简述使用网络爬虫的好处。
问答题请简述使用网络爬虫的好处。
什么是网络爬虫？
问答题什么是网络爬虫？
请简述robots.txt 文件的作用。
问答题请简述robots.txt 文件的作用。
