找到约 8495 条结果
  • 乐趣Python——动态网页与测试:浏览器的操纵者
    朋友们,今天我们来学习一个非常有趣的魔法——Selenium,它就像是我们的魔法棒,可以帮助我们在网络世界里自由地驾驭浏览器,进行各种冒险活动。让我们一步步揭开这项魔法的神秘面纱吧!
    2024-04-12
  • 爬虫实战-手把手教你爬豆瓣电影 | 附详细源码和讲解
    点赞再看,养成好习惯Python版本3.8.0,开发工具:Pycharm写在前面的话目前为止,你应该已经了解爬虫的三个基本小节:爬虫的原理和流程爬虫的两种实现方式通过 BeautifulSoup 解析网页源码如果上面三小节还有问题,可以点回去再复习一下。作为基础内容并不是要求大家一定都掌握,特别是第三小节,网页解析用法特别多,一...
    2019-12-16
  • 从输入URL到页面加载发生了什么
    从输入URL到页面加载发生了什么,之前百度前端写过这篇文章,里面讲解的非常的详细。 总体来说分为以下几个过程: DNS解析 TCP连接 发送HTTP请求 服务器处理请求并返回HTTP报文 浏览器解析渲染页面 连接结束 DNS解析 DNS解析的过程就是寻找哪台机器上有你需要资源的过程。当你在浏览器中输入一个地址时,例如www.baidu.c...
    2017-05-31
  • JSONP跨域
    如果两个页面的协议,端口和域名都相同,则两个页面具有相同的源,这就是同源。http://www.example.com/dir/page.html这个网址,协议是http://,域名是www.example.com,端口是80(默认端口可以省略)。它的同源情况如下。
    2018-04-15
  • 关于前嗅Forespider爬虫的常见问题答疑
    奋战在一线为客户答疑的狗蛋儿给小编提供了很多客户经常会问到的问题的素材,小编帮大家整理了一些,快来看看是不是都用的上吧! 一、采集预览没有链接或数据? (1)查看文档详情 ①需要写脚本:检查文档详情。文档中HTML标签中没有所需的数据信息,是JavaScript脚本生成的。 ②被封ip:文档详情404或者*错误等 ③需要开启...
    2018-01-11
  • nvm管理多版本node踩坑
    Windows10 本机环境:win10未安装node,安装了nvm工具,尝试使用nvm安装我开发环境的node版本(10.9.0 or later) 根据上面的截图看,应该是npm下载失败了,需要手动安装,我们使用命令查看node安装情况 {代码...} node安装没问题,尝试安装单独的npm包的时候出问题了,上述的网站已经移植更改到 [链接] 然而这个网址很...
    2019-07-25
  • 啥?修改下 URL 就能高速下载网盘资源和百度文库?
    下载百度资源和百度文库资料是大家常有的需求,不过多数方法都需要下载些软件什么的才能实现。 今天给大家介绍一个简单方法,修改下 URL 就能直接在浏览器中高速下载网盘资源和百度文库资料。 【下载百度网盘资源】 首先,我们打开一个百度网盘资源,正常情况下这个无法直接下载得启动网盘才行: 接着只需要在网址中 bai...
    2019-08-20
  • 连续 3 天霸榜狂增 9500 Star,1 秒钟就可以在 VS Code 中阅读 GitHub 代码
    Github 是全世界程序员最活跃的社区,因为上面有着许多开源、优秀的项目,Github 对程序员来说就是一个宝藏库。通常在 Github 上看代码都是直接在网页上点点点,或者是将代码 clone 到本地,再使用代码编辑器打开。
    2021-02-22
  • Z-library 稳定访问指南
    近期,常用 Z-library 的各位应该都知晓,Z-library 近期被美国执法机构查封,基本上之前的访问地址都被停掉了(现在也算回归了,但是门槛高了起来,有必要探索更多的访问形式)。
    2023-02-26
  • 记一次奇妙的某个edu渗透测试
    进入登录发现只需要姓名加学工号就能成功登录,通过googlehack的语法成功找到学生姓名和学号,想直接找老师的工号发现无果,信息收集到此为止
    2024-04-16
  • 【一】PHP实用自定义函数
    我清楚的记得,是谁在我耳边说:“PHP是世界上最好的语言”,反正我可没说哈(理不直气还壮),我就听过这种言论,毕竟我胆小,哪里敢在公众场合说这种话,关于“谁是最好语言的言论”,很早之前,就在IT界掀起过多场血雨腥风的争论都无果,咱们就不要再搞事了,老老实实搬砖……
    2020-05-12
  • hadoop:伪分布模式启动步骤分解!
    1、格式化HDFS 在运行伪分布式前,需先对NameNode进行格式化,在命令行中输入 hdfs namenode -format          # 格式化hdfs 若出现successfully formatted字样,则说明格式化成功 2、启动hadoop 然后启动hadoop集群 start-all.sh # 一次性启动所有服务 或使用以下命令单独启动各项服务 start-dfs.sh      #启动hdfs sta...
    2020-05-27
  • IP地址HTTPS证书
    IP地址HTTPS证书是一种专为绑定IP地址(而非域名)的服务器设计的SSL/TLS证书,用于在客户端与服务器之间建立加密连接,确保数据传输的安全性。
    2025-04-15
  • 答面试官问:如何设计短url服务
    短url, 顾名思义,就是将长网址缩短到一个很短的网址,用户访问这个短网址可以重定向到原本的长网址(还原)。这样可以达到易于记忆、转换的目的,还有隐藏链接参数,利于短信推广的作用,常用于有字数限制的短信、微博、二维码等场景。
    2020-09-09
  • (30 hackdays day 22) Import.io - 最简单好用的网页爬虫服务
    anyway,import.io是我用过最简单的爬虫,没有之一。简单到...只要输入一个网址(当然其实它可以更简单到不用输入http://),就可以获得一个该页面对应的API。更牛逼的是,这是一个我想寻找付费服务却寻觅不得的产品!
    2014-11-01
    4
  • HTTP的请求与响应以及使用Chrome的查看方式
    HTTP 的作用就是指导浏览器和服务器如何进行沟通。今天,我们就HTTP的请求与响应,做出简短的介绍。 HTTP 请求 这里使用 curl 命令来实现请求 请求示例1: {代码...} 其中 -H "TEST: test" 可以删除。我们可以看一下请求结果。 请求示例2: {代码...} 该请求可以将 '1234567890' 字符串请求上传至服务器。我们可以看一下...
    2018-12-05
  • Spring Boot&STS的使用
    现在软件市场已经形成一定的规模,系统架构的复杂度也越来越高(例如有单体架构,分布式架构,微服务架构)。软件的整个架构体系正在发生很大变化,在这种变化中,企业现在更注重技术的开箱即用,更注重技术在生态圈中的深度融合,更注重轻量级的运维。由此spring boot诞生。说明:学技术一定要了解技术发展史,并对技术...
    2020-08-25