Java Maven 打包相关(qbit)

2020-05-17
阅读 1 分钟
1.9k
跳过测试 跳过测试代码运行,不跳过测试代码编译 {代码...} 跳过测试代码编译和运行 {代码...} war Web Archive file Java之Maven打包本地jar到war中 导出 pom.xml 依赖 {代码...} 中央仓库 Apache {代码...} Maven {代码...} 阿里云 {代码...} 本文出自 qbit snap

jvisualvm 监控 tomcat 实例(qbit)

2020-05-13
阅读 3 分钟
2.7k
打开 jvisualvm,qbit 的路径是 C:\Program Files\Java\jdk1.8.0_162\bin\jvisualvm.exe

JVM 参数调优(qbit)

2020-05-11
阅读 5 分钟
6.9k
前言JVM 的参数有好几百个,听着有点吓人,好在最常用的参数只有两个,其他绝大多数参数都无需调整。可以参考廖雪峰的文章: JVM调优的正确姿势 {代码...} 特别说明 -Xmn 在绝大多数情况下并不需要配置,详见后文Oracle 对 JVM 参数的说明文档打印 JVM 参数打印 JVM 参数初始值 {代码...} 打印 JVM 参数最终值 {代码...}...

Elasticsearch 7.x 的 JVM 内存配置(qbit)

2020-05-08
阅读 5 分钟
9k
官方文档摘要jvm.options一般情况下并不需要更改 JVM 的配置项。最可能更改的 JVM 配置是堆大小(heap size)可以使用 jvm.options 配置文件或 ES_JAVA_OPTS 环境变量更改 JVM 配置首选通过 jvm.options 更改配置heap sizeElasticsearch 通过 jvm.options 中的 Xms 和 Xmx 设置堆的大小应该讲 Xms 和 Xmx 设为相同的值 {...

Elasticsearch 7.x 学习路线图

2020-05-07
阅读 1 分钟
2.5k
ElasticSearch 架构解析与最佳实践 推荐学习阮一鸣《Elasticsearch 核心技术与实战》 本文出自 qbit snap

图书馆相关知识(qbit)

2020-05-05
阅读 1 分钟
1.5k
专家视频 索传军 {代码...} 由数字馆藏到数据馆藏—大数据时代我们的价值 {代码...} 智能图书馆的资源组织模式—基于情景和语义的知识组织 {代码...} 知识图谱在图书馆的应用—智能图书馆的基础 {代码...} 邵波 {代码...} 新一代服务平台环境下的数据管理和服务研究 {代码...} 文献资料 电子版ISBN/ISSN/ISSN-L及BIBFRAME用...

Spark 权威指南——Spark 是什么?(qbit)

2020-04-26
阅读 2 分钟
2.6k
第 II 部分 结构化 API——DataFrame、SQL和Dataset第4章 结构化API概述第5章 基本的结构化操作第6章 处理不同的数据类型第7章 聚合操作第8章 连接操作第9章 数据源第10章 Spark SQL第11章 Dataset

MARC 数据解析(qbit)

2020-04-22
阅读 7 分钟
5.1k
MARC 是 Machine Readable Catalog(ue) 的缩写,意即“机器可读目录”,即以代码形式和特定结构记录在计算机存储载体上的、用计算机识别与阅读的目录。

MongoDB 插入时间与更新时间(create_time/update_time)

2020-04-22
阅读 3 分钟
19.8k
MongoDB 在数据库层面不能像 MySQL 一样设置自动创建 create_time/update_time,自动更新 update_time

rsync tips(qbit)

2020-04-17
阅读 2 分钟
3.1k
简介rsync 是一款高效远程数据同步工具。rsync 能同步更新两处计算机的文件与目录,并适当利用差分编码以减少数据传输量。(增量同步)rsync 中的一项同类软件不常见的重要特性是每个目标的镜像只需发送一次。rsync 可以拷贝/显示目录内容,以及拷贝文件,并可选压缩以及递归拷贝。rsync 命令中,一个冒号走 ssh 协议,...

Ubuntu APT(qbit)

2020-04-15
阅读 3 分钟
2.2k
apt 与 apt-getAPT: Advanced Packaging Toolapt 命令不是 apt-get 的简写apt 整合了 apt-get、apt-cache 和 apt-config 中的常用命令可以将 apt 看作 apt-get 的升级版常用命令对比apt 命令示例取代的命令命令的功能apt installapt install unzipapt-get install安装软件包apt removeapt remove unzipapt-get remove移...

Spark GraphX 三大算法(qbit)

2020-04-14
阅读 1 分钟
3.3k
前言 本文是 qbit 对“Spark GraphX 三大算法”的信息收录。 三大算法指:PageRank、连通分量和三角计数 qbit 对原理认识有限(为什么?) qbit 对应用很感兴趣(怎么用?) 本文希望做一些通俗解释,不是学术化的精准描述。 网页排名(PageRank) TODO 连通分量(Connected Components) TODO 相关链接 基于Spark GraphX...

正向代理相关(qbit)

2020-04-11
阅读 3 分钟
5.2k
正向代理(Forward Proxy)是指是一个位于客户端和原始服务器之间的服务器,为了从原始服务器取得内容, 客户端向代理发送一个请求并指定目标(原始服务器),然后代理向原始服务器转交请求并将获得的内容返回给客户端。客户端才能使用正向代理。

Linux 版本查看(qbit)

2020-04-10
阅读 1 分钟
2.1k
以 Ubuntu 18.04 LTS 为例发行版本 {代码...} 内核版本 {代码...} 同时查看 {代码...} 本文出自 qbit snap

ip rule/route 配置策略路由实例(qbit)

2020-04-10
阅读 1 分钟
9.2k
环境 操作系统版本 {代码...} iproute2 版本 {代码...} iptables 版本 {代码...} 需求 针对 192.168.0.36 主机配置 HTTP 协议(80 端口)流量走 192.168.0.3 路由 其余流量走 192.168.0.1 路由 示意图如下 配置 {代码...} 相关链接 Linux系列—策略路由、ip rule、ip route 本文出自 qbit snap

iproute2 tips(qbit)

2020-04-09
阅读 2 分钟
2.2k
组件对比用途net-toolsiproute2地址和链路配置ifconfigip addr, ip link路由routeip routeARParpip neighVLANvconfigip link隧道iptunnelip tunnel组播ipmaddrip maddr统计netstatss

MongoDB 权限管理(qbit)

2020-04-09
阅读 2 分钟
1.1k
前言 本文对 MongoDB 4.2.x 适用 本文对 Ubuntu 18.04 LTS 适用 实例 创建 root 用户 {代码...} 给 admin 用户授予/取消 root 权限 {代码...} 编辑配置文件(/etc/mongod.conf),开启认证 {代码...} 重启 mongodb 服务 {代码...} 创建其他用户 {代码...} 本文出自 qbit snap

qbit 的 vim 基本配置(vimrc)

2020-04-02
阅读 2 分钟
8.7k
本文内容在 Ubuntu 18.04/20.04 上有效 在用户 home 目录下创建 .vimrc {代码...} 在 .vimrc 中写入以下内容 {代码...} 本文出自 qbit snap

[转]Windows下使用任务计划程序实现宽带断线自动重连

2020-04-01
阅读 1 分钟
2.1k
转自Windows下使用任务计划程序实现宽带开机自动拨号和断线自动重连首先打开任务计划,创建任务填入名称选择触发器,新建然后填入下图内容选择操作,新建填入下图内容最后确定,运行任务即可

Spark 内存相关(qbit)

2020-03-29
阅读 1 分钟
1.5k
前言 本文对 spark 2.1.x 适用 executor 内存模型 堆内内存与堆外内存 堆内内存 堆外内存 动态资源分配 基本参数设置 {代码...} Dynamic Allocation 相关链接 线程瓜分 executor 内存: 如何设置Spark Executor Memory的大小 对 spark ui 显示内存数值的算账: Spark内存管理之堆内/堆外内存原理详解 本文出自 qbit sanp

airflow 1.x 分布式部署实战(qbit)

2020-03-25
阅读 8 分钟
5.2k
前言airflow 是 DAG(有向无环图)的任务管理系统,简单的理解就是一个高级版的 crontab。airflow 解决了 crontab 无法解决的任务依赖问题。环境与组件Ubuntu 18.04MySQL 5.7Python 3.6.9airflow 1.10.10celery 4.4.2RabbitMQ 3.6.10实战步骤基本步骤安装 Python3 的 pip {代码...} 安装 MySQL 开发包 {代码...} 在 3 台 a...

iptables tips(qbit)

2020-03-24
阅读 4 分钟
5.2k
前言本文对 iptables 1.6.x 适用iptables 下载(版本列表/历史版本):iptables Release of the netfilter/iptables project表、链、规则iptables 有四张表 {代码...} iptables 命令在不显式指定表时,默认 filter 表iptables 3 种数据包经过的链(chain) iptables 数据包详细走向图iptables 常见 target {代码...} ipt...

Amazon DynamoDB 学习笔记(qbit)

2020-03-18
阅读 1 分钟
1.6k
基本概念 表(Tables) 类似关系型数据库的表 项目(Items) 类似关系型数据库的行(Row) 每个项目的属性的累计大小必须在 DynamoDB 项目大小上限 (400 KB) 以内 Amazon DynamoDB 压缩大型属性值 MongoDB 的单个文档大小限制为 16 MB 属性(Attributes) 类似关系型数据库的列/字段(Column/Field) 主键(Primary Key...

Python3 map/reduce/filter 示例(qbit)

2020-03-06
阅读 1 分钟
1.5k
运行环境 {代码...} 示例 原料 {代码...} 筛正数(filter) {代码...} output {代码...} 翻倍(map) {代码...} output {代码...} 求和(reduce) {代码...} output {代码...} 筛正数 + 翻倍 + 求和 {代码...} output {代码...} 本文出自 qbit snap

JupyterLab 桌面版快速配置(qbit)

2020-03-04
阅读 2 分钟
4.5k
前言qbit 对 Jupyter Notebook 并不满意qbit 不喜欢编辑器是浏览器的一个标签页qbit 以前用 Python3 Jupyter QtConsoleJupyterLab 的 Chrome 应用模式让 qbit 觉得比 Jupyter QtConsole 更舒适纯本地版 {代码...} 环境 {代码...} 步骤安装 JupyterLab {代码...} 生成配置文件 {代码...} 编辑配置文件 {代码...} 创建启动...

Windows 下查看网络连接

2020-03-04
阅读 1 分钟
4.1k
实例 根据进程ID(PID)查看某进程的所有 TCP 连接 {代码...} 根据 PID 查看某进程的所有 TCP 连接,并按创建时间排序 {代码...} {代码...} 本文出自 qbit snap

常用网络命令(Windows/Linux)

2020-03-04
阅读 1 分钟
2.3k
常用命令 Linux ping {代码...} traceroute {代码...} mtr(my traceroute) {代码...} nslookup {代码...} route {代码...} iptables {代码...} netstat Windows ping {代码...} tracert {代码...} BestTrace {代码...} pathping {代码...} nslookup {代码...} route {代码...} netsh {代码...} netstat 本文出自 qbit ...

函数式编程相关概念(qbit)

2020-02-26
阅读 5 分钟
1.9k
前言 本文是 qbit 对“lambda、闭包、函数式编程、链式调用”等概念的信息收录。 qbit 对原理认识有限(为什么?) qbit 对应用很感兴趣(怎么用?) 本文是通俗解释(最好是一句话),不是学术化的精准描述。 qbit 认为:用高阶函数编程就算是函数式编程。 lambda、头等函数和高阶函数 lambda 表达式 lambda 表达式就是匿...

MongoDB 聚合查询

2020-02-23
阅读 2 分钟
3.4k
前言 本文是 qbit 在 TJ《MongoDB 高手课》的学习笔记 Aggregation 官方文档: [链接] 本文对 MongoDB 4.2.x 适用 什么是 MongoDB 聚合框架 MongoDB 聚合框架(Aggregation Framework)是一个计算框架,它可以: {代码...} 从效果而言,聚合框架相当于 SQL 查询中的: {代码...} 管道(Pipeline)和步骤(Stage) 整个聚...

TJ 对成为 MongoDB 专家的学习建议

2020-02-22
阅读 1 分钟
1.8k
TJ 其人 唐建法,技术社区里称其为 TJ。 前 MongoDB 大中华区首席架构师。 MongoDB 中文社区主席 Tapdata CTO MongoDB 学习建议 去 MongoDB 网络大学注册学习,并通过认证考试 通过官方文档学习。 MongoDB 中文社区收集了很多 MongoDB 专家的精华文章和案例分享。 MongoDB 高手课 课程介绍 《MongoDB 高手课》基于 Mongo...