更新HTTPS过期证书

2020-10-20
阅读 1 分钟
1.7k
最近https证书过期,看到aliyun有free证书,操作流程如下[链接]缺点是只能保护1个主域名或1个子域名的网站安全部署教程[链接]

hive 拉链表 实现全量数据 增量更新

2020-05-29
阅读 2 分钟
5.7k
数据表字段有IP,IP省份,IP城市,最新访问时间,假如目前一共有100W的IP我第一次初始化的时候完成初始化表插入,然后每天都有5W左右的IP活跃,然后我要更新这5W个IP的记录到初始化的表,他的IP省份如果有变更也要更新保留最新的数据,更新最新的访问时间等。

安装docker版本的davinci

2020-03-24
阅读 1 分钟
3.3k
[链接] 安装部署参考README.md 注意点:修改邮箱配置即可,mysql相关信息保持默认 {代码...} {代码...} 其他命令: docker-compose --verbose up --force-recreate 该命令十分强大,它将尝试自动完成包括构建镜像,(重新)创建服务,启动服务,并关联服务相关容器的一系列操作。--force-recreate 强制重新创建容器,不...

git lfs 上传文件有2G大小限制

2020-01-17
阅读 1 分钟
7.7k
怎么上传大于100MB的文件到github上,可以用git lfs(实际上有配额限制,很坑) 敏感数据可以申请github私人仓库,免费使用 坑:git lfs 上传文件大小有2G大小限制,更大的坑,github上也有限制,关于配额说明[链接] 也就是只能解决大于100MB和小于2G的文件上传 如果需要在2个服务器之间传输,下载的服务器也需要安装git l...

sqoop 增量导入,数据重复问题

2020-01-16
阅读 3 分钟
4.7k
原文连接:[链接]根据自增ID导入数据时重复,可以使用下列方法图片来源[链接]下面是官网文档手册[链接]7.2.10. Incremental ImportsSqoop provides an incremental import mode which can be used to retrieve only rows newer than some previously-imported set of rows.Sqoop提供了一种增量导入模式,该模式可用于仅...

Kerberos 常用命令

2019-09-29
阅读 1 分钟
5.7k
-k [ -i | -t keytab_file ]请求从本地主机的密钥表中的密钥获得的票证。密钥表的位置可以通过-t keytab_file选项指定,也可以通过-i选项来指定默认客户端密钥表的使用。否则,将使用默认的密钥表。默认情况下,请求本地主机的主机票证,但可以指定任何主体。在KDC上,特殊的密钥表位置KDB:可用于指示kinit应该打开KDC...

docker 假死 僵尸状态

2019-01-28
阅读 1 分钟
8.4k
某日在调试superset docker容器里面的一个程序后,容器突然假死 {代码...} 求助朋友后,朋友说是不是僵尸进程然后用top命令查看,发现有 zombie 3个进程 {代码...} 继续使用命令查看具体信息 {代码...} 跟进PPID查看父进程发现是刚好是对应CONTAINER_ID的进程 {代码...} 最后kill -9 82248 后 zombie 也变成0 一切恢复正...

superset 性能优化1-已经使用中的superset更改默认数据源sqlite到mysql

2019-01-28
阅读 1 分钟
5.8k
1.提取sqlite db(由于当前使用 docker 需要到宿主)docker cp CONTAINER_NAME:/var/lib/superset/superset.db /opt

superset 配置 redis

2018-10-23
阅读 1 分钟
5.3k
安装 redis 应用就不说了 1.pip 安装 python-redis 2.修改配置 superset 的 config.py 头部引入 import redis CACHE_REDIS_URL 如果是有密码的可以用下列格式链接 redis://:password@hostname:port/db_number 参考链接:[链接][链接]

superset 连接 hive 教程

2018-09-28
阅读 1 分钟
8.9k
正常操作pip 安装 pyhive [链接] 正确 SQLAlchemy URI hive://localhost:10000/default?auth=NONE //localhost需要改成相应的IP 一开始使用 hive://localhost:10000/default?auth=NOSASL 出现错误ERROR: {"error": "Connection failed!nnThe error message returned was:ncannot import name 'constants'"} google下需要...

虚拟机centos7全新安装 elasticsearch 6.3

2018-07-18
阅读 4 分钟
3.3k
{代码...} {代码...} 喜欢可以收藏或者点赞,有疑问可以留言谢谢。 参考链接[链接][链接][链接][链接][链接]

zabbix CPU Utilization load jumps 性能监控

2018-07-05
阅读 1 分钟
15.9k
CPU jumps:就是Process(Thread)的切换,如果切换过多,会让CPU忙于切换,也会导致影响吞吐量,值越高说明等待共享资源的线程数越多。