jouypub.com

0

Python使用selenium + headless chrome获取网页内容

JouyPub 10月16日发布
收藏

使用python写爬虫时，优选selenium，由于PhantomJS因内部原因已经停止更新，最新版的selenium已经使用headless chrome替换掉了PhantomJS，所以建议将selenium更新到最新版，使用selenium + headless chrome

0

hexo title中有特殊字符报错

JouyPub 9月29日发布
收藏

问题：在使用hexo写文章时，如果文章的title中包含双引号"abc"、&dollar;符号时会编译出错，文章无法渲染。由于这里的写法是yml语法，"、&dollar;这些都是特殊符号，执行hexo -s时到编译title这里就会出...

0

Shell中$i $() ${}的区别

JouyPub 9月10日发布
收藏

shell中奇葩写法不仅仅是(.)、{.}、((.))等等写法，还有各种奇怪的写法和细节需要注意，一个不留神就发现结果和预期不一样

0

Shell生成连续的数字

JouyPub 8月20日发布
收藏

使用场景：需要生成连续的日期 date -d "${i} days ago" +"%Y-%m-%d 生成连续的目录方法一 {代码...} 方法二 {代码...} 方法三 {代码...} 欢迎订阅「K叔区块链」 - 专注于区块链技术学习博客地址：[链接]简书...

0

Python定时任务随机时间执行

JouyPub 8月13日发布
收藏

背景：有一个爬虫服务，需要定时从公开网站上拉取一些数据，为了避免被识别为爬虫（防爬虫的识别需要根据很多特征，时间仅仅是其中一个维度），需要在指定的时间内，随机生成一个时间爬取

0

spring boot添加启动参数

JouyPub 7月30日发布
收藏

背景：业务中需要使用一个外部服务，考虑到外部服务可能会存在不稳定的情况，尽管设置了超时，但是在高并发的情况，大量的超时还是会对服务造成影响，同时该服务对核心业务流程没有太大影响，所以在spring boot配...

0

Nginx配置中的if判断

JouyPub 7月24日发布
收藏

当rewrite的重写规则满足不了需求时，比如需要判断当文件不存在时、当路径包含xx时等条件，则需要用到if

0

Nginx rewrite配置规则

JouyPub 7月9日发布
收藏

1、规则：可以是字符串或者正则来表示想匹配的目标url2、定向路径：表示匹配到规则后要定向的路径，如果规则里有正则，则可以使用$index来表示正则里的捕获分组3、重写类型：

3

Nginx location匹配规则

JouyPub 7月2日发布
3 收藏

= 开头表示精确匹配^~ 开头表示uri以某个常规字符串开头，理解为匹配 url路径即可~ 表示区分大小写的正则匹配~* 表示不区分大小写的正则匹配!~和!~* 分别为区分大小写不匹配及不区分大小写不匹配的正则/ 通用匹...

0

Shell截取字符串

JouyPub 6月25日发布
收藏

非贪婪模式：echo ${var#*/} 或 echo ${var%*/}执行结果：删除左侧的http:/，为/www.jouypub.com

0

presto中不同类型的字段关联问题

JouyPub 6月18日发布
收藏

今天在使用presto查数据时，遇到一个诡异的问题，相同的sql，每次查询的结果确不一样，sql如下

1

NodeJs生成sitemap站点地图

JouyPub 6月11日发布
1 收藏

如果博客是使用Hexo管理的，sitemap可以使用插件来生成。但对于一个内容管理网站，后端可能是express、koa之类的框架，这时sitemap就需要自己来生成了

0

hive报错：Both left and right aliases encountered in JOIN

JouyPub 6月4日发布
收藏

错误原因：两个表join的时候，不支持两个表的字段的非相等操作。解决办法：1、把不相等条件拿到where语句中 {代码...} 可以改写成 {代码...} 2、如果第一中方法不适用，可以在select字段中判断 {代码...} 欢迎...

1

MySQL复制表结构和数据

JouyPub 5月29日发布
收藏

mysql复制表有两种方式，create table as和create table like，这两者还是有差别，需要根据不同的使用场景去选择1、create table as，可以复制表结构，但不能复制索引；可以在复制表结构的同时复制数据复制表结构

0

Linux文件锁-flock

JouyPub 5月22日发布
收藏

背景：在使用crontab管理定时脚本时，如果设定的脚本执行时间间隔较短，例如5分钟执行一次，正常情况下，脚本执行耗时1分钟，在非正常情况下（如服务器压力较大的情况下，或数据量突然增大），脚本执行时间超过5...

0

Please read 'Security' ... to find out how to run mysqld as root

JouyPub 5月14日发布
收藏

错误信息：[ERROR] Fatal error: Please read "Security" section of the manual to find out how to run mysqld as root!

0

数据同步系统需要解决的问题

JouyPub 5月6日发布
收藏

数据同步的方式：直连同步：通过ODBC/JDBC等接口直连数据库，对源系统性能影响较大。数据文件同步：简单，实用，松耦合，可加密、可压缩。数据库日志解析同步：比如oracle的ogg，对源系统影响小。数据同步需...

2

美团DSP广告策略实践

JouyPub 4月16日发布
2 收藏

近年来，在线广告在整个广告行业的比重越来越高。在线广告中实时竞价的广告由于其良好的转化效果，占有的比重逐年升高。DSP（Demand-Side Platform）作为需求方平台，通过广告交易平台（AdExchange）对每次曝光进...

0

PageHelper插件一对多查询时的分页问题

JouyPub 4月10日发布
收藏

项目中经常会使用到一对多的查询场景，但是PageHelper对这种嵌套查询的支持不够，如果是一对多的列表查询，返回的分页结果是不对的参考Github上的说明：[链接]

5

MySQL编码utf8升级utf8mb4

JouyPub 3月25日发布
5 收藏

utf8升级utf8mb4具体步骤：首先将我们数据库默认字符集由utf8更改为utf8mb4，然后将表默认字符集也更改为utf8mb4，最后再把存储表情的字段默认字符集也做相应的调整。