网络爬虫 – 我应该阻止Googleusercontent.com吗?

我收到了来自不同用户代理的这个域的许多请求,我是否应该将它们全部阻塞在一起,否则可能会产生影响? 最佳答案 根据
this文章,此CDN将您的内容保存在世界各地的不同服务器上,以便用户从离他更近的服务器加载网页的内容.这将减少用户的加载时间.因此,一个后果可能是访问者的加载时间更长.

点赞