CDH6 离线安装

2022-02-27
阅读 7 分钟
3.3k
Cloudera Manager是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具,使得安装集群从几天的时间缩短在几个小时内,运维人员从数十人降低到几人以内,极大的提高集群管理的效率。

在 Python 中保存和加载机器学习模型

2021-09-23
阅读 3 分钟
5.9k
在这篇文章中,您将了解如何使用 scikit-learn 在 Python 中保存和加载您的机器学习模型。一、教程概述本教程分为3部分,它们是:1、用pickle保存你的模型2、使用 joblib 保存您的模型3、保存模型的提示二、用pickle保存模型Pickle 是 Python 中序列化对象的标准方法。您可以使用 pickle 操作序列化您的机器学习算法并将...

Airflow 从入门到精通-03-完整 ETL 实例

2021-09-07
阅读 17 分钟
7.8k
本节将讲述使用 Connection、MyqLOperator、XComs 来实现一个完整的airflow ETL。一、将数据存入数据库的原始方法1、创建表 {代码...} 二、使用 airflow Connection 管理数据库连接信息在上一节代码的基础上,将保存到文件的数据转存到数据库中,V2版本的代码如下:download_stock_price_v2.py2.1 传统连接方法 {代码......

DDD 领域驱动战略篇 (6) 菱形对称架构

2021-08-18
阅读 5 分钟
7.8k
领域驱动设计中,对于架构风格有一个指导思想:不同的限界上下文,根据其领域模型和业务特征,可以选用不同的架构风格。在传统的分层架构与领域驱动理念相结合的过程中,产生了多种架构风格:六边型架构、整洁架构、微服务架构等。本文是根据对对IT文艺工作者张逸老师的相关Chat阅读和思考整理而得。

大数据之 Hadoop-10-Kafka

2021-07-29
阅读 10 分钟
2.2k
(1)Producer :消息生产者,就是向kafka broker发消息的客户端;(2)Consumer :消息消费者,向kafka broker取消息的客户端;(3)Consumer Group (CG):消费者组,由多个consumer组成。消费者组内每个消费者负责消费不同分区的数据,一个分区只能由一个消费者消费;消费者组之间互不影响。所有的消费者都属于某个...

大数据之 Hadoop-5-HDFS

2021-07-13
阅读 6 分钟
2.6k
HDFS(Hadoop Distributed File System)是Hadoop 项目的核心子项目,在大数据开发中通过分布式计算对海量数据进行存储与管理。

springCould整合feign出现required a bean of type xxx not be found

2021-05-23
阅读 4 分钟
8.4k
springCould整合feign提示required a bean of type xxx that could not be found

Swagger2启动出现Unable to scan documentation context default解决方法

2021-05-21
阅读 9 分钟
19k
一、问题本地项目做了Swagger2的配置,在启动时报如下错误: {代码...} 测试的Controller文件: {代码...} Swagger2配置/config/swagger/SwaggerProperties.java {代码...} /config/swagger/SwaggerAutoConfiguration.java {代码...} 注意这里的apis(RequestHandlerSelectors.basePackage(swaggerProperties.getBasePack...

Docker环境下Nacos使用MySQL存储

2021-05-10
阅读 3 分钟
8k
1、Docker下载镜像 {代码...} 笔者下载时已经到1.3.2 其中mysqljar已经更新至8.0.162、创建数据库 {代码...} [链接]复制sql并执行3、创建Nacos容器 {代码...} 4、修改容器 {代码...} {代码...} 相关文章:DOCKER内部署单机NACOS使用MYSQL8.0存储SpringCloud Alibaba之Nacos集群、持久化

MLOps简介

2021-05-07
阅读 9 分钟
7.7k
机器学习操作 (MLOps) 基于可提高工作流效率的 DevOps 原理和做法。 例如持续集成、持续交付和持续部署。 MLOps 将这些原理应用到机器学习过程,其目标是:

Airflow快速学习入门

2021-04-29
阅读 9 分钟
22.2k
Airflow 是通过 DAG(Directed acyclic graph 有向无环图)来管理任务流程的任务调度工具,不需要知道业务数据的具体内容,设置任务的依赖关系即可实现任务调度。

SpringSecurity登录授权出现This object has not been built问题解决

2021-04-14
阅读 3 分钟
4.6k
在使用SpringSecurity做登录授权时,出现了这样的异常:java.lang.IllegalStateException: This object has not been built

Linux下python3.6环境安装talib过程

2021-03-13
阅读 2 分钟
7.3k
如果在安装时出现这样的错误,请安装编译器先:configure: error: no acceptable C compiler found in $PATH 错误主要是没有C编译器.

基于 DDD 的微服务设计和开发实战

2021-01-19
阅读 6 分钟
5.7k
你是否还在为微服务应该拆多小而争论不休?到底如何才能设计出收放自如的微服务?怎样才能保证业务领域模型与代码模型的一致性?或许本文能帮你找到答案。

用于软件架构的 C4 模型

2021-01-19
阅读 3 分钟
2.5k
C4 模型由一系列分层的软件架构图组成,这些架构图用于描述上下文、容器、组件和代码。C4 图的层次结构提供了不同的抽象级别,每种抽象级别都与不同的受众有关。

LDAP和SSO一样吗?

2021-01-05
阅读 2 分钟
4.6k
LDAP(Lightweight Directory Access Protocol)即轻量目录访问协议,是一个开放、广泛被使用的工业标准(IEFT、RFC),在1993年就被提出。企业级软件也通常具备"支持LDAP"的功能,比如Jira, Confluence, openVPN等,企业也经常采用LDAP服务器来作为企业的认证源和数据源。但是大家比较常见的认识误区是,可以使用LDAP来...

MinIO 文件存储服务快速入门

2020-12-30
阅读 3 分钟
5.7k
MinIO是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口,非常适合于存储大容量非结构化的数据,例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等,而一个对象文件可以是任意大小,从几kb到最大5T不等。

Springboot2.1.6集成 activiti7 出现登录验证

2020-12-27
阅读 6 分钟
4.5k
一、问题Spring2.1.5集成activiti7.1.24时访问要输入用户名和密码。 {代码...} 在单元测试中测试Activiti框架,出现如下的异常: {代码...} 其余的方式大家如果试过成功就可以了,如果不行,可试下这个:取消登录验证如下: {代码...} 这是我在别人那找来的,困了我好长时间,知道看到这个东西。二、新版验证其实这个都...

如何画好IT项目中的各种架构图

2020-12-22
阅读 1 分钟
27k
在日常软件项目开发与实施中,经常会涉及到各种架构图,如应用架构、技术架构、安全架构、部署架构。今天特意将这些架构图整理如下,提供给大家进行学习参考。

程序员架构修炼:架构设计概要、业务、应用、技术、数据架构

2020-12-22
阅读 4 分钟
19.6k
架构设计是从业务需求到系统实现的一个转换,是对需求进一步深入分析的过程,用于确定系统中实体与实体的关系,以及实体的形式与功能。架构可根据从业务需求到系统实现的不同需要分为:业务架构、应用架构、数据架构、技术架构。下面以电商系统为例进行架构设计。

PowerDesigner数据库建模工具的使用

2020-12-21
阅读 2 分钟
4.3k
一、安装PowerDesigner1、下载需要下载以下3个文件,我直接把下面3个文件放到百度网盘中。如果网盘链接有失效,请评论区留言或Q上直接联系我!1、PowerDesigner.exe:安装文件2、pdflm16.dll:破解文件3、PowerDesigner汉化文件下载地址:1、安装文件 链接: [链接] 密码: spk42、破解文件 链接: [链接] 密码: 24xv3、汉...

Activiti7实战笔记

2020-12-20
阅读 18 分钟
9.7k
说明,本项目案例参考 [链接] 开源项目。一、Activiti流程部署当定义好流程之后,第一步就是要进行流程的部署操作,主要是采取读取bpmn资源文件的方法。上传的流程定义:查看流程图详情: {代码...} 流程部署涉及到主要表:act_ge_bytearray 二进制数据表act_re_deployment 部署信息表act_re_procdef 流程定义数据表act_...

Activiti工作流引擎学习

2020-12-06
阅读 6 分钟
4.6k
在没有专门的工作流引擎之前,我们之前为了实现流程控制,通常的做法就是采用状态字段的值来跟踪流程的变化情况。这样不用角色的用户,通过状态字段的取值来决定记录是否显示。比如说员工请假申请流程:员工申请---部门经理---总经理---人事存档

IDEA 接口方法不能跳转到实体类实现方法的问题

2020-11-27
阅读 1 分钟
14.2k
IDEA 接口突然不能跳转到实现类具体方法,报 No implementation found 提示,而且在IDEA 左侧栏也不显示 I+向下的箭头,这个问题很诡异,之前还是好好的。

完整SIP/SDP媒体协商概论-SDP协商模式详解

2020-11-25
阅读 3 分钟
5.2k
当我们讨论SIP或者SDP的一些技术话题时,SDP的协商是一个绕不过的话题。具体的协商机制涉及了多个方面的内容。在我们的讨论中,笔者将会针对两个比较重要的话题进行讨论,一个是SDP offer/answer 模式,另外一个是在NAT场景中的SDP offer/answer交互模式拓展ICE。在本章节中,我们将首先讨论SDP offer/answer交互模式,...

Java内功心法之设计模式学习(三)-桥接、适配器模式

2020-11-22
阅读 2 分钟
2.4k
桥接(Bridge)是用于把抽象化与实现化解耦,使得二者可以独立变化。这种类型的设计模式属于结构型模式,它通过提供抽象化和实现化之间的桥接结构,来实现二者的解耦。

java中字符串和JSON对象、Bean之间的相互转换

2020-11-18
阅读 5 分钟
15.5k
JSON格式用于数据传输、bean用于封装数据信息、String用于展示封装信息、json格式的内容用json工具或者之间在json.cn展示比较清晰。

Java内功心法之设计模式学习-单例及三种工厂模式(二)

2020-11-15
阅读 10 分钟
2.4k
在上一篇文章简单的讲解了设计模式的七大原则和UML类图的使用,这篇文章开始学习23种设计模式。一、设计模式类型设计模式分为三种类型,共 23 种1) 创建型模式:单例模式、抽象工厂模式、原型模式、建造者模式、工厂模式。2) 结构型模式:适配器模式、桥接模式、装饰模式、组合模式、外观模式、享元模式、代理模式。3) ...

Java内功心法之设计模式学习(一)

2020-11-15
阅读 6 分钟
2k
编写软件过程中,程序员面临着来自 耦合性,内聚性以及可维护性,可扩展性,重用性,灵活性 等多方面的挑战,设计模式是为了让程序(软件),具有更好

WebRTC点对点通信的有趣故事

2020-11-12
阅读 5 分钟
1.9k
WebRTC给我们带来了浏览器中的视频、音频聊天体验。但个人认为,它最实用的特性莫过于DataChannel——在浏览器之间建立一个点对点的数据通道。在DataChannel之前,浏览器到浏览器的数据传递通常是这样一个流程:浏览器1发送数据给服务器,服务器处理,服务器再转发给浏览器2。这三个过程都会带来相应的消耗,占用服务器带...