日期归档:2020年6月 查看全部博客

Nginx禁止某些User Agent抓取网站

Linux   2020-06-20   阅读(282)   评论(0)   点赞(0)

大家都知道网络上的爬虫非常多,爬虫有利也有弊,爬虫可以让我们的网站容易被其他人搜到,比如百度蜘蛛(Baiduspider) 问题是有些爬虫不遵循robots规则对服务器造成压力,或者是恶意爬取网页、采集数据。不好的爬虫会耗费大量的服务器资源 影响正常的用户使用。有些服务器是按流量计费,被爬虫耗费很多流量要交这些额外产生的费用,比如:七牛 ...

Python之虚拟运行环境Virtualenv

Python   2020-06-10   阅读(289)   评论(0)   点赞(0)

虚拟环境 它是一个虚拟化的从计算机独立开辟出来的环境。通俗来讲, 虚拟环境就是把一部分内容独立出来,我们把这部分独立出来的东西称作“虚拟运行环境”,在这个虚拟运行环境中,我们可以只安装我们需要的依赖包,各个虚拟运行环境之间互相隔离互不影响。譬如,部署Django博客项目时需要用到Django,我们可以做一个Django的虚...

Python+Requests之urlencode编码与解码

Requests   2020-06-04   阅读(614)   评论(0)   点赞(0)

URL编码 URL编码是一种浏览器用来打包表单输入的格式; 浏览器从表单中获取所有的name和其中的值, 将它们以name/value参数编码(移去那些不能传送的字符, 将数据排行等等) 作为URL的一部分或者分离地发给服务器 为什么需要urlencode编码 原因:如果一样东西需要编码, 说明其并不适合直接传输。原因多种多样, ...

Jmeter之常用定时器(二)

Jmeter   2020-06-02   阅读(401)   评论(0)   点赞(0)

统一随机定时器(Uniform Random Timer) 统一随机定时器和高斯随机定时器的作用差异不大,区别在于延时时间在指定范围内且每个时间的取值概率相同,每个时间间 隔都有相同的概率发生,总的延迟时间就是随机值和偏移值之和。该定时器可以在请求之间设置一个随机延时,每个随机延时 有相同的发生概率。总的延时 = 随机延时时间 + 固...

  • 1

共有4篇博客, 当前第1页,共1页

返回顶部

建议反馈

1. 可在博文底部留言评论

2. 发邮件到i_suichuan@163.com