计算机产生的的只是“伪随机数”，不会产生绝对的随机数（是一种理想随机数）。实际上，伪随机数和理想随机数也是相对的概念，例如伪随机数在1万万亿亿亿年内也无法重复，算是理想随机数么？

作为一款强力工具，curl支持包括HTTP、HTTPS、FTP等众多协议，还支持 GET、POST、cookies、认证、从指定偏移处下载部分文件、用户代理字符串、限速、文件大小、进度条等特征，还可以做网页处理流程和数据检索自动化。

我们米扑科技的业务遍布全球，有时国外的客户无法访问我们搭建在国内的服务，这就要求我们在国外服务器上搭建一个代理转发服务，用户请求国外服务器的域名，然后代理转发到国内，处理请求后返回结果给国外的客户。Nginx 不仅可以实现负载均衡，还可以实现反向代理转发，非常适合我们的使用场景，因此我们米扑科技采用 Ng...

科技博客很多，但质量高的不多，发现质量高的，但又记不住，所以索性把它们都记下来。 米扑博客，深耕写博客近十年，总结了许多好博客，主要偏向互联网、科技资讯、技术分享 本文原文，来自于米扑博客分享：IT，互联网，科技，技术博客网站推荐 国内科技博客 极客公园 PingWest 爱范儿 36Kr 月光博客 米扑博客 虎嗅网 雷...

我们米扑科技的业务遍布全球，有时国外的客户无法访问我们搭建在国内的服务，这就要求我们在国外服务器上搭建一个代理转发服务，用户请求国外服务器的域名，然后代理转发到国内，处理请求后返回结果给国外的客户。Nginx 不仅可以实现负载均衡，还可以实现反向代理转发，非常适合我们的使用场景，因此我们米扑科技采用 Ng...

米扑科技，是一家专注互联网金融和大数据挖掘的初创互联网公司，正式注册成立于2016年9月，总部位于北京市海淀区中关村核心功能区。 米扑团队，成员来自百度、小米、阿里、创新工场等一线互联网公司，核心技术研发，实战经验丰富，具有浓厚的极客精神和精益的工匠品质。 米扑代理，是米扑科技旗下的一款用于网页抓取、数...

当一个用户想要下载一个主页（如米扑科技：[链接]）时，可以向Squid 发出一个申请，让Squid 代替其进行下载，然后Squid 连接所申请网站并请求该主页，接着把该主页传给用户同时保留一个备份，当别的用户申请同样的页面时，Squid 把保存的备份立即传给用户，使用户觉得速度相当快。Squid 可以代理HTTP、FTP、GOPHER、SSL...

Go语言中变量的声明和JavaScript很像，使用var关键字，变量的声明、定义有好几种形式 1. 变量和常量 // 声明并初始化一个变量 var m int = 10 // 声明初始化多个变量 var i, j, k = 1, 2, 3 // 多个变量的声明(注意小括号的使用) var( no int name string) // 声明时不指明类型，通过初始化值来推导 var b = true // boo...

Requests 是用Python语言编写HTTP客户端库，跟urllib、urllib2类似，基于 urllib，但比 urllib 更加方便，可以节约我们大量的工作，完全满足 HTTP 测试需求，编写爬虫和测试服务器响应数据时经常会用到。Requests 的哲学是以 PEP 20 的习语为中心开发的，所以它比 urllib 更加 Pythoner，更重要的一点是它支持 Python3 B...

PySpider是一个国人编写的强大的网络爬虫系统并带有强大的WebUI。采用Python语言编写，分布式架构，支持多种数据库后端，强大的WebUI支持脚本编辑器、任务监视器，项目管理器以及结果查看器。PySpider 来源于以前做的一个垂直搜索引擎使用的爬虫后端。我们需要从200个站点（由于站点失效，不是都同时啦，同时有100+在跑...