大数据的文章 - SegmentFault 思否

大数据（Big Data）又称为巨量资料，指需要新处理模式才能具有更强的决策力、洞察力和流程优化能力的海量、高增长率和多样化的信息资产。“大数据”概念最早由维克托·迈尔·舍恩伯格和肯尼斯·库克耶在编写《大数据时...[ 百科 ]

HBase/TiDB都在用的数据结构：LSM Tree，不得了解一下？

Monica2333 8月11日发布于 self.文章
收藏

LSM Tree（Log-structured merge-tree）广泛应用在HBase，TiDB等诸多数据库和存储引擎上，我们先来看一下它的一些应用：这么牛X的名单，你不想了解下LSM Tree吗？装X之前，我们先来了解一些基本概念。

Kafka2.6.0发布——性能大幅提升

实时计算 8月11日发布于 self.文章
收藏

近日Kafka2.6版本发布，距离2.5.0发布只过去了不到四个月的时间。Kafka 2.6.0包含许多重要的新功能。以下是一些重要更改的摘要：默认情况下，已为Java 11或更高版本启用TLSv1.3性能显着提高，尤其是当代理具有大...

【赵强老师】Redis的RDB持久化

赵强老师 8月10日发布于赵强老师技术分享圈
收藏

AOF （Append-only file）持久化记录服务器执行的所有写操作命令，并在服务器启动时，通过重新执行这些命令来还原数据集。 AOF 文件中的命令全部以 Redis 协议的格式来保存，新命令会被追加到文件的末尾。 Redis ...

白话数据仓库

何赞 8月8日发布于 self.文章
收藏

交易，技术上对应的术语叫联机事务处理（OLTP online transaction processing），数据是交易系统中流淌的血液，他可以对应你在电商上的一个订单、一件商品、一笔支付流水，通常使用数据库进行数据管理

万字详解TDengine 2.0整体架构设计思路

涛思数据 8月7日发布于 self.文章
收藏

导读：涛思数据8月3日将TDengine 的集群功能开源，TDengine具有超强的性能和功能，为什么能做到？它到底有哪些技术创新？今将TDengine的整体设计文档分享出来。

搞大数据，Java 工程师需要掌握哪些知识？

沉默王二 8月6日发布于 self.文章
收藏

先看再点赞，给自己一点思考的时间，微信搜索【沉默王二】关注这个有颜值却假装靠才华苟且的程序员。本文 GitHub github.com/itwanger 已收录，里面还有一线大厂整理的面试题，以及我的系列文章。

Spark Streaming——Spark第一代实时计算引擎

实时计算 8月6日发布于 self.文章
收藏

虽然SparkStreaming已经停止更新，Spark的重点也放到了 Structured Streaming ，但由于Spark版本过低或者其他技术选型问题，可能还是会选择SparkStreaming。SparkStreaming对于时间窗口，事件时间虽然支撑较少，...

挑战年薪50万不是梦，你要的高级架构师课程来袭！

同一片蓝天下 8月5日发布于 self.文章
收藏

乐字节教育是集线上教育与线下培训于一体的全栈式教育机构，致力于研发高端IT技术，培养高端IT人才，让更多的人接受更好的教育是乐字节的教学理念。

提高幸福感的一些方法

Monica2333 8月5日发布于 self.文章
收藏

最近233酱其实忙坏了。开发重构一个长达3个多月的项目，拉上一个从不加班的小伙伴和我一起天天加班，大概1095 —10105的加班节奏。他说最近基本是在我司两年多来加班最频繁的时候了。

IOTA架构下的数据采集

易观大数据 8月5日发布于 self.文章
收藏

IOTA架构是基于IOTA和AI时代背景下的大数据架构模式，其整体技术结构的核心是贯穿于整体业务始终的数据模型，具有提高整体的预算效率的作用。IOTA架构这一概念由易观首次提出，并将其应用于最新研发的精细化运营...

数据库实践丨MySQL多表join分析

华为云开发者社区 8月5日发布于开发者之家
3 收藏

摘要：在数据库查询中,往往会需要查询多个表的数据,比如查询会员信息同时查询关于这个会员的订单信息,如果分语句查询的话,效率会很低,就需要用到join关键字来连表查询了。

DataX Web数据增量同步配置说明

微野 8月5日发布于 self.文章
1 收藏

一、根据日期进行增量数据抽取1.页面任务配置打开菜单任务管理页面，选择添加任务按下图中5个步骤进行配置1.任务类型选DataX任务2.辅助参数选择时间自增3.增量开始时间选择，即sql中查询时间的开始时间，用户使用...

Apache DolphinScheduler 诞生记

dailidong 8月3日发布于 self.文章
收藏

DolphinScheduler，简称”DS”, 中文名 “小海豚调度”（海豚聪明、人性化，又左右脑可互相换班，终生不用睡觉）。希望 DolphinScheduler 就像它的名字一样，成为一个“开箱即用”的灵活易用的调度系统。

Why HTAP Matters

PingCAP 8月3日发布于开源分布式关系型数据库 TiDB
1 收藏

说到 Why HTAP Matters，其实包含两部分，一部分是说为什么我们叫 HTAP，另外一部分是说 TiDB 怎样在 HTAP 架构下发挥它的优势。

浅谈树形结构的特性和应用（上）:多叉树，红黑树，堆，Trie树，B树，B+树...

Monica2333 8月1日发布于 self.文章
1 收藏

上篇文章我们主要介绍了线性数据结构，本篇233酱带大家康康无所不在的非线性数据结构之一：树形结构的特点和应用。树形结构，是指：数据元素之间的关系像一颗树的数据结构。我们看图说话：它具有以下特点：每个...