踩坑者日常

2

Squid+SSH Tunnel实现加密代理

rockswang 5 天前发布
1 收藏

工具和资料 QQ群 - Javascript高级爬虫 - 作者自建群，欢迎加入！中国商标网加密接口 - 仅作演示 awesome-java-crawler - 作者收集的爬虫相关工具和资料前言今天研究了一下如何在CentOS上部署Squid代理服务器...

17

如何避免Puppeteer被前端JS检测

rockswang 6月20日发布
11 收藏

工具和资料 QQ群 - Javascript高级爬虫 - 作者自建群，欢迎加入！中国商标网加密接口 - 仅作演示 awesome-java-crawler - 作者收集的爬虫相关工具和资料前言这两天开始看puppeteer，发现居然也能被某数的前端j...

0

CentOS上安装node.js二进制发布包

rockswang 5月6日发布
收藏

先度娘了一下，发现网上的文章是从源码编译，需要挺长时间，可是官网上明明有现成的二进制发布包，然后在官网下载页面下面找到了二进制包的正确打开方式。整理如下：

7

nodejs中request库使用HTTPS代理

rockswang 4月29日发布
7 收藏

正在尝试改用NodeJS编写爬虫，http请求库选择了request，用起来还是挺简单的。现在有个需求，需要用Fiddler抓包我发出去的请求，以便和浏览器发出去的包进行对比。因为需要在Fiddler中解密HTTPS报文，需要让node...

22

注入eval, Function等系统函数，截获动态代码

rockswang 4月2日发布
13 收藏

现在很多网站都上了各种前端反爬手段，无论手段如何，最重要的是要把包含反爬手段的前端javascript代码加密隐藏起来，然后在运行时实时解密动态执行。动态执行js代码无非两种方法，即eval和Function。那么，不管...

10

某数加密的流程与原理简析

rockswang 2月26日发布
8 收藏

啃了这么长时间，基本上已经把某数的套路摸了个八九不离十，不愧是中国反爬界的集大成者，感觉收获满满，这里就简单记录一下分析成果。注意：某数在不同的网站上有不同的版本，其流程也略有不同，这里的流程不一...

0

在Chrome控制台注入npm模块

rockswang 1月11日发布
收藏

上次研究了如何在java内置javascript解释器nashorn中加载npm模块，这两天手头又有一个需求，要在Chrome浏览器的开发者控制台中加载同样的npm模块，以便在控制台中验证一些想法。因为对前端开发不算熟悉，不知道有...

21

某网站高度加密混淆的javascript的分析

rockswang 2018年12月27日发布
10 收藏

对某网站加密混淆后的javascript代码也算分析了一段时间了，虽然还没搞出来，但多少有些心得，这里记录一下。

0

java中调用npm模块

rockswang 2018年12月17日发布
收藏

一些小的javascript片段可以很方便的直接使用ScriptEngine.eval()直接导入，但是如何使用require方法导入使用npm下载的javascript模块呢？

8

某网站破解备忘

rockswang 2018年12月06日发布
2 收藏

前言某网站采用了多种反破解手段，特此开贴记录分析破解过程。工具和参考 QQ群 - Javascript高级爬虫 - 作者自建群，欢迎加入！ awesome-java-crawler - 我收集的爬虫相关工具和资料 java-curl - 本人写的java ...

1

自用Java爬虫工具JAVA-CURL已开源

rockswang 2018年11月20日发布
1 收藏

CUrl类是以命令行工具CUrl为参考，使用标准Java的HttpURLConnection实现的Http工具类。

3

记一次完整的Maven中央仓库发布过程

rockswang 2018年11月16日发布
3 收藏

Maven中央仓库是由Sonatype维护的，因此需要到他们的JIRA系统，用类似报Bug的方式创建新项目

1

抓包分析安卓手机的HTTPS请求

rockswang 2018年11月16日发布
1 收藏

工具和资料 QQ群 - Javascript高级爬虫 - 作者自建群，欢迎加入！ awesome-java-crawler - 作者收集的爬虫相关工具和资料 HTTP抓包流程为了实现对安卓手机或模拟器的网络请求抓包，简单流程为：电脑上安装Fiddl...

1

小程序填坑实录

rockswang 2018年06月07日发布
2 收藏

设置成 { display: block; overflow: hidden; } 就可以正常设置样式了，包括圆形头像等

3

GraphQL java工程化实践

rockswang 2018年05月11日发布
3 收藏

因为自己写过基于react的前端应用，因此一看到GraphQL就被深深吸引，真是直击痛点啊！服务端开发一直是基于java, Spring的，因此开始研究如何在现有工程框架下加入graphql的支持。本文属于随笔性质，学到哪里，用...