标签:百度

教程

Nignx网站屏蔽指定路径的百度爬虫

Nginx 搭建的网站,想要屏蔽指定路径下的爬虫。 第一种方法,使用 if 和 Location 指令 可以使用Ningx 的 if 指令和 location 指令实现。 看一个实例, 比如我们希望当请求的路径以 hot 开头时爬虫访问返回403。 可以参考如下配置: { ...

shanhuhai 3年前 (2020-12-09) 1892℃ 0喜欢