在robots.txt文件中,可以使用Cookie-directive指令来指定爬虫处理Cookie的方式。例如,”Cookie-directive: ignore”将告诉爬虫忽略Cookie的处理。
请查询相关 FAQ 或提交 联系工单。