重磅嘉宾、最全议程新鲜出炉,2022网易数字+大会精彩抢先看!

2022-09-16
阅读 1 分钟
1.7k
经济发展、数字化加速的今天企业数字化转型仍旧面临不少困惑:转型目标与可落地的价值之间相距甚远?拥抱云原生,新架构下如何推动业务创新?海量数据如何转化为业务资产?发展岔路之下,怎样找到变革增效最优解?
封面图

不到十天,这个智能答题系统搭建完成…低代码为数字政府按下“加速键”

2022-09-09
阅读 2 分钟
1.2k
9月1日-9月15日,由杭州市数据资源管理局(以下简称市数据资源局)主办的《浙江省公共数据条例》有奖知识竞赛活动正式启动。该活动旨在加强公共数据管理,促进公共数据应用创新,保障数字化改革,深化数智杭州建设,活动一经发布,便受到广大市民的关注。该线上活动平台正是杭州市数据资源管理局联手网易数帆共同搭建的...
封面图

Apache Hudi X Apache Kyuubi,中国移动云湖仓一体的探索与实践

2022-09-06
阅读 8 分钟
1.2k
导读:在云原生 + 大数据的时代,随着业务数据量的爆炸式增长以及对高时效性的要求,云原生大数据分析技术,经历了从传统数仓到数据湖,再到湖仓一体的演进。本文主要介绍移动云云原生大数据分析 LakeHouse 的整体架构、核心功能、关键技术点,以及在公有云 / 私有云的应用场景。

Apache Kyuubi 在小米大数据平台的应用实践

2022-09-02
阅读 9 分钟
2k
导读:今天分享的主题是《Kyuubi 在小米大数据平台的应用实践》,主要分为四部分内容:Kyuubi 在小米的落地过程 打造易用和高可用的 Kyuubi 服务 基于 kyuubi 的改进kyuubi 的一些新特性在业务场景的应用01 Kyuubi 在小米的落地过程第一个主题:关于 Kyuubi 在小米的大数据平台落地过程和实施路径的分享。背景介绍先介绍...

ArchSummit回顾:从云原生到实时数据湖,架构如何支撑业务发展

2022-08-25
阅读 3 分钟
756
数字化、自动化、智能化的主旋律下,架构的进化也在提速。在近日举办的ArchSummit全球架构师峰会上,网易数帆高级技术专家、资深架构师裴斐和网易数帆高级技术专家周劲松分别分享了云原生业务改造和数据湖实时化的最新架构实践。
封面图

基于 Impala 的高性能数仓建设实践之虚拟数仓

2022-08-19
阅读 5 分钟
982
【点击了解更多大数据干货】导读:本文主要介绍网易数帆 NDH 在 Impala 上实现的虚拟数仓特性,包括资源分组、水平扩展、混合分组和分时复用等功能,可以灵活配置集群资源、均衡节点负载、提高查询并发,并充分利用节点资源。

福利!网易数帆参编中国信通院《低代码发展白皮书(2022年)》

2022-08-19
阅读 2 分钟
886
【限时发放中!免费领取白皮书】近日,由中国信息通信研究院(以下简称“中国信通院”)和中国通信标准化协会联合主办的“2022数字化转型发展高峰论坛”在京召开。大会以 “数字原生、产业新生、价值共生”为主题,共同探讨数字化转型的最新趋势,分享数字化转型创新成果,树立行业发展风向标,并发布多项低代码领域的研究成果...
封面图

开源流式湖仓服务 Arctic 详解:并非另一套 Table Format

2022-08-18
阅读 12 分钟
1.3k
【点击了解更多大数据】本文根据作者于 Arctic 开源发布会演讲内容整理(略有删减),系统解读 Arctic 项目研发初衷、生态定位、核心特性、性能表现及未来规划。

技术专家说 | 如何基于 Spark 和 Z-Order 实现企业级离线数仓降本提效?

2022-08-18
阅读 4 分钟
1.3k
【点击了解更多数仓知识】市场的变幻,政策的完善,技术的革新……种种因素让我们面对太多的挑战,这仍需我们不断探索、克服。今年,网易数帆将持续推出新栏目「金融专家说」「技术专家说」「产品专家说」等,聚集数帆及合作伙伴的数字化转型专家天团,聚焦大数据、云原生、人工智能等科创领域,带来深度技术解读及其在各...
封面图

从 Delta 2.0 开始聊聊我们需要怎样的数据湖

2022-08-11
阅读 12 分钟
834
盘点行业内近期发生的大事,Delta 2.0 的开源是最让人津津乐道的,尤其在 Databricks 官宣 delta2.0 时抛出了下面这张性能对比,颇有些引战的味道。虽然 Databricks 的工程师反复强调性能测试来自第三方 Databeans,并且他们没有主动要求 Databeans 做这项测试,但如果全程看完 delta2.0 发布会,会发现在 delta2.0 即将...

Arctic开源!网易数帆×华泰证券,推动湖仓一体落地

2022-08-11
阅读 3 分钟
1.2k
数字化转型趋势下,各行业对数据生产力的探索与追求逐步进入深水区。现实的问题是,企业数据仓库存储、数据湖多种技术并存的局面将长期存在,如何才能摆脱技术协同的内耗,让大数据直通生产力的彼岸?

QCon 回顾 | Data Fabric:逻辑统一、物理分散

2022-08-08
阅读 3 分钟
881
Data Fabric(数据编织),自 2019 年开始就在 Gartner 年度技术趋势榜单上安家,并在 2022 年被列为数据分析领域十大技术趋势之首,它究竟有哪些价值?又如何在企业落地?

数据治理体系演进简介

2022-08-05
阅读 9 分钟
600
网易内部如严选、云音乐、传媒等数据团队对数据内容体系的治理思路都是将治理规范融入到开发过程中,将治理的动作提前,这其实就是“开发治理一体化”;事后依赖数据资产健康评估和治理工具进行数据的治理,建立事前加事后的数据治理体系。

直播预约丨流式湖仓服务,大数据的终结?这场开源发布会为你揭晓!

2022-08-05
阅读 2 分钟
970
【点击立刻报名】8月11日,网易数帆将举办“企业级流式湖仓服务 Arctic 开源发布会”,邀请网易数帆大数据产品线及合作伙伴相关负责人联袂解读对数据技术演进及 Arctic 开源的思考,介绍 Arctic 项目进展、未来发展及社区规划,分享企业湖仓一体实践成果与心得。数据基础设施发展的脚步从未停歇,当前风头正盛的是湖仓一体...
封面图

入选爱分析·银行数字化厂商全景报告,网易数帆助力金融数字化场景落地

2022-08-05
阅读 2 分钟
1k
【点击即可免费获取完整报告】近日,国内领先的产业数字化研究与咨询机构爱分析发布《2022·爱分析银行数字化厂商全景报告》。网易数帆凭借全面领先的产品实力与丰富多样的实践经验,分别在BI商业智能、数据治理、数据中台、通用低代码平台四大数字化领域作为银行代表厂商强势入选。报告指出,在自主可控的背景下,银行信...
封面图

有数大数据基础平台之智能运维平台EasyEagle介绍:集群队列篇

2022-07-22
阅读 4 分钟
1.9k
集群资源水位如何,利用率如何,是否需要扩容?队列为什么最近大量任务出现pending,什么原因造成?哪些任务占用了队列的大部分资源,是否合理,能否优化?任务运行为什么这么慢,哪里出现了问题?任务是否能优化,加快产出?任务或服务出现异常,能否自动运维处理?... ...

国产开源存储之光:Curve 通过信创认证

2022-07-15
阅读 2 分钟
1.4k
Curve 是一款高性能、易运维、云原生的分布式存储系统,由网易数帆存储团队发起开源,现为 CNCF 沙箱项目。国家工业信息安全发展研究中心测试结果显示,Curve 在文件存储与块存储的功能性、性能效率、可靠性、维护性等方面 49 个测试用例全部通过。

Curve 替换 Ceph 在网易云音乐的实践

2022-06-28
阅读 4 分钟
1.3k
网易云音乐是中国领先的在线音乐平台之一,为音乐爱好者提供互动的内容社区。网易云音乐打造了一个大型、富有活力且坚固、快速成长的业态,为用户提供以社区为中心的在线音乐服务及社交娱乐服务。其标志性重点产品包括 “网易云音乐” 及附属的社交娱乐产品,如 “LOOK 直播”、“声波” 及 “音街”,通过科技驱动的工具让音乐...

云原生时代,中间件应该如何 “进化”?

2022-06-17
阅读 9 分钟
1.5k
云原生热度持续攀升,这一趋势也延伸了到中间件领域。借助云原生技术,中间件正在解决了自身的弹性、韧性、运维、交付等问题。同时,开发者使用中间件方式也越来越云原生化。

Curve 进入 CNCF Sandbox,完善统一云原生开源存储拼图

2022-06-15
阅读 2 分钟
1.4k
2022 年 6 月 15 日,云原生计算基金会 (CNCF) 宣布,分布式存储系统 Curve 被正式接纳为 CNCF 沙箱(Sandbox)项目。Curve 由网易数帆开源,提供块存储和文件存储能力,旨在以网易分布式架构和云原生实践经验反哺社区,填补高性能、易运维、云原生的开源分布式存储的空白。

定档615 | 数字化基础软件自主创新分享周即将来袭,点击获取“通关密钥”!

2022-06-01
阅读 1 分钟
940
“科技自立自强”在党的十九届五中全会已上升至国家发展中的战略支撑地位。近年来,随着信息产业自主创新相关政策、技术路线和实践路径的逐步明晰,自主创新落地的难点也逐渐凸显,如核心能力起步晚,全栈系统经验少,应用迁移挑战多等。而基础软件作为一个难度高,差距大,周期长的领域,如何加快实现自主创新更是成为全...

网易数帆 Envoy Gateway 实践之旅:坚守 6 年,峥嵘渐显

2022-05-27
阅读 4 分钟
2k
服务网格成熟度不断提升,云原生环境下流量处理愈发重要, Envoy Gateway 项目于近日宣布开源,“旨在大幅降低将 Envoy 作为 API 网关的使用门槛”,引发了业界关注。2018 年 11 月,Envoy 成为 CNCF 毕业项目,开始作为一款高性能数据和服务代理软件为从业者所知,但此后两三年,国内 API 网关实践中,选型 Envoy 仍是一...
封面图

IstioCon 回顾 | 网易数帆的 Istio 推送性能优化经验

2022-05-24
阅读 8 分钟
1.6k
在 IstioCon2022 上,网易数帆资深架构师方志恒从企业生产落地实践的视角分享了多年 Istio 实践经验,介绍了 Istio 数据模型,xDS 和 Istio 推送的关系,网易数帆遇到的性能问题和优化的经验,以及一些相关的 Tips。

Loggie Geek Camp 火热启动,社区大牛带你玩开源

2022-05-17
阅读 3 分钟
1.1k
由开源构建的协作模式,正成为描绘数字蓝图、创造美好未来的主航道,中国工商银行、阿里云等组织已经在网易数帆“架构开发、内核开源”理念中与后者达成合作,来自华为、阿里云、中国移动、eBay、T3出行、丁香园等公司的从业者已经参与到我们的开源社区建设。但你可知道,繁荣的开源社区需要的,不仅仅是代码的建设?
封面图

有数BI大规模报告稳定性保障实践

2022-05-16
阅读 3 分钟
1.1k
随着数据化管理思维的逐渐深入人心,无论是网易集团内部用户还是外部商业化客户,越来越多的人在大规模使用有数BI。以严选为例,日常有访问量的报告有5w+,这些报告覆盖了用户、商品、渠道、流量、营销、仓储、供应商、财务等几乎所有业务板块,有些报告嵌入在管理层用的app中,有些报告用在了业务周会或复盘会,有些报...
封面图

新升级!网易数帆轻舟中间件推出运维稳定性管控服务

2022-05-12
阅读 2 分钟
938
企业常常会遇到这样的困扰:伴随着业务的高速增长,IT系统的压力与日俱增,当服务器“不堪重负”时,常常会卡顿、宕机,可能带来数据丢失、服务中断、业务受损等一系列问题。

2022 开源之夏 | Curve 邀你与中国存储软件共成长,赢万元奖金

2022-05-12
阅读 3 分钟
1.3k
2022 年,Curve 社区再次加入系列高校开源活动 —— 开源之夏第三届。开源之夏是由中国科学院软件研究所 “开源软件供应链点亮计划” 发起并长期支持的一项暑期开源活动,旨在鼓励在校学生积极参与开源软件的开发维护,促进优秀开源软件社区的蓬勃发展,培养和发掘更多优秀的开发者。

数据标准在网易的实践

2022-05-11
阅读 12 分钟
1.9k
在生活中,标准与我们息息相关,吃的食品需要满足国家标准才能食用,汽车排放达标才能够上路行驶,电脑接口得满足统一的标准才能够与外设对接等等。而在数据的世界,数据标准也同等重要。我们期望将数据标准真正应用到实践中去,帮助客户解决资产化不足、数据质量难以提升、数据开发效率低等问题,于是网易开始了数据标...

AI驱动音乐创新,网易数帆X云音乐刷新MIREX世界纪录

2022-05-09
阅读 3 分钟
1.1k
在近期揭榜的2021国际音频检索评测大赛(MIREX)上,网易数帆易智语音团队携手网易云音乐音视频实验室,凭借生产级AI技术创新能力,在歌词识别和歌单识别两个赛道大幅打破世界纪录夺得冠军。

Curve 基于 Raft 的写时延优化

2022-04-27
阅读 6 分钟
1.3k
Curve([链接] )是网易数帆自主设计研发的高性能、易运维、全场景支持的云原生软件定义存储系统,旨满足Ceph本身架构难以支撑的一些场景的需求,于2020年7月正式开源。当前由CurveBS和CurveFS两个子项目构成,分别提供分布式块存储和分布式文件存储两种能力。其中CurveBS已经成为开源云原生数据库PolarDB for PostgreSQ...