重新定义容器化 Serverless 应用的数据访问

2022-08-17
阅读 9 分钟
简介: 本文首先聚焦到 AI 和大数据等应用 Serverless 化的最大挑战:计算和存储分离架构带来的数据访问延迟和远程拉取数据带宽巨大的挑战。尤其在 GPU 深度学习训练场景中,迭代式的远程读取大量训练数据方法会严重拖慢 GPU 计算效率。作者:车漾、刘奖、景奇 随着 IT 基础设施从物理机到虚拟机,再到以 Kubernetes 为...

EasyNLP集成K-BERT算法,借助知识图谱实现更优Finetune

2022-08-17
阅读 6 分钟
导读知识图谱(Knowledge Graph)的概念⾸次出现2012年,由Google提出,它作为⼀种⼤规模语义⽹络, 准确地描述了实体以及实体之间的关系。知识图谱最早应⽤于搜索引擎,⽤于准备返回⽤户所需的知识。随着预训练语⾔模型的不断发展,将知识图谱中的知识三元组融⼊预训练模型,对提升模型的效果有重要的作⽤。经典的知识...

模型代码联动难? BizWorks来助力

2022-08-17
阅读 5 分钟
简介: 本文介绍了业务模型设计和实现保持一致的重要性以及实际落地可能遇到的问题,以及BizWorks如何设计并提供一种双向联动能力, 通过BizWorks Toolkit(IDE 插件) 来解决和优化双向联动过程中的一系列问题。业务模型设计和沉淀是企业数字化转型过程中非常重要的一个环节,  日趋复杂的业务场景和协作模式给建模的有效...

全链路灰度新功能:MSE上线配置标签推送

2022-08-16
阅读 4 分钟
简介: 微服务场景下,全链路灰度作为一种低成本的新功能验证方式,得到了越来越广泛的应用。除了微服务实例和流量的灰度,微服务应用中的配置项也应该具备相应的灰度能力,以应对灰度应用对特殊配置的诉求。为什么需要配置标签推送从全链路灰度谈起在微服务场景中,应用的灰度发布迎来了新的挑战。不同于单体架构中将应...

阿里云解决方案架构师张平:云原生数字化安全生产的体系建设

2022-08-16
阅读 10 分钟
简介: 企业要做安全生产建设的话,核心分为两大部分:一部分是技术体系建设,一部分是服务体系建设。 关于今天的分享主题——“安全生产”,内容主要分为三大部分: 第一部分是安全生产的背景,以及我们对于安全生产这个领域的理解; 第二部分主要介绍阿里巴巴集团的安全生产工作到底是怎么开展的,借此给各位有作为参考和...

前端智能化实践——可微编程

2022-08-16
阅读 17 分钟
简介: 研究者表示,由于广泛的科学计算和机器学习领域在底层结构上都需要线性代数的支持,因此有可能以可微编程的形式,创造一种新的编程思想。下面,我们就一起进入这个全新的领域。 什么是可微编程通过动画、动效增加 UI 表现力,作为前端或多或少都做过。这里以弹性阻尼动画的函数为例:函数在时是效果最好的。最终...

在阿里做前端程序员,我是这样规划的

2022-08-16
阅读 5 分钟
简介: 许多前端工程师工作超过了3年之后会遇到一个迷茫期,我跟很多前端从业人也聊过,有一部分人说想做开源项目推广出去(类似react,vue)变成前端网红。有些说想去创业。往往更长远的职业发展规划考虑的很少。我希望把自己工作经历和在阿里学到的东西分享给大家,作为一个案例解答有关职业发展的困扰。前端程序员常...

操作系统的“冷板凳”要坐多久?万字长文解读16年开源老兵的坚持

2022-08-16
阅读 9 分钟
简介: 想知道内核研发是怎样的体验?操作系统的“冷板凳”得坐多久才有春天?本文对话龙蜥社区理事长马涛,畅所欲言聊开源,一起来看看那些开源润物细无声背后的故事以及龙蜥社区运营的道法术。作者 | 马涛来源 | 阿里开发者公众号想知道内核研发是怎样的体验?操作系统的“冷板凳”得坐多久才有春天?本文对话龙蜥社区理事...

三端一体计算方案:Unify SQL Engine

2022-08-15
阅读 7 分钟
简介: 本文将介绍数仓建设过程中面对三种计算模式,较低的研发效率、不可控的数据质量,以及臃肿数据接口服务的困境的解决方案。背景在漫长的数仓建设过程中,实时数仓与离线数仓分别由不同的团队进行独立建设,有大而广的离线数仓体系,也有需要追求业务时效,需要建设实时数仓。然而,业务数据需求和数据产品需求中,...

如何可视化编写和编排你的 K8s 任务

2022-08-15
阅读 8 分钟
简介: 通过任务调度 SchedulerX 来调度你的 K8s 任务,能够降低学习成本,加快开发效率,让你的任务失败可报警,出问题可排查,打造云原生可观测体系下的可视化 K8s 任务。作者:学仁 简介 K8s Job 是 Kubernetes 中的一种资源,用来处理短周期的 Pod,相当于一次性任务,跑完就会把 Pod 销毁,不会一直占用资源,可以...

阿里云丁宇:以领先的云原生技术,激活应用构建新范式

2022-08-15
阅读 4 分钟
简介: 2022 阿里云飞天技术峰会在深圳举行,会上阿里云重磅发布 Serverless 应用中心:海量场景化模板,让 Serverless 应用全生命周期管理更简单。8 月 11 日,2022 阿里云飞天技术峰会在深圳举行,会上阿里云提出云原生激活应用构建三大范式,并发布最新的产品与解决方案。基于分布式云容器平台 ACK One,实现多地域分...

Kruise Rollout:灵活可插拔的渐进式发布框架

2022-08-15
阅读 5 分钟
简介: Kruise Rollout 是 OpenKruise 社区开源的渐进式交付框架。Kruise Rollout 支持配合流量和实例灰度的金丝雀发布、蓝绿发布、A/B Testing 发布,以及发布过程能够基于 Prometheus Metrics 指标自动化分批与暂停,并提供旁路的无感对接、兼容已有的多种工作负载(Deployment、CloneSet、DaemonSet)。近期也在《202...

1 分钟在 Serverless 上部署现代化 Deno Web 应用

2022-08-15
阅读 4 分钟
简介: 利用 Serverless 的水平扩展与按量付费优势, 结合自定义运行时, 实现 Web 应用的快速迁移。作者 | 连喆人(掌上乾坤公司)本文选自 “Serverless 函数计算征集令" 征文 利用 Serverless 的水平扩展与按量付费优势, 结合自定义运行时, 实现 Web 应用的快速迁移。而 Deno 运行时是新一代的 JS 运行时, 使用阿里云 Se...

解析 RocketMQ 业务消息——“事务消息”

2022-08-12
阅读 6 分钟
简介: 本篇文章通过拆解 RocketMQ 事务消息的使用场景、基本原理、实现细节和实战使用,帮助大家更好的理解和使用 RocketMQ 的事务消息。作者:合伯 引言:在分布式系统调用场景中存在这样一个通用问题,即在执行一个核心业务逻辑的同时,还需要调用多个下游做业务处理,而且要求多个下游业务和当前核心业务必须同时成...

云原生事件驱动引擎(RocketMQ-EventBridge)应用场景与技术解析

2022-08-12
阅读 11 分钟
简介: RocketMQ 给人最大的印象一直是一个消息引擎。那什么是事件驱动引擎?为什么我们这次要推出事件驱动引擎这个产品?他有哪些应用场景,以及对应的技术方案是什么?本文我们就一起来看下。作者:罗静 在刚刚过去的 RocketMQ Summit 2022 全球开发者峰会上,我们对外正式开源了我们的新产品 RocketMQ-Eventbridge 事...

淘系数据模型治理最佳实践

2022-08-12
阅读 6 分钟
简介: 本次分享题目为淘系数据模型治理,主要介绍过去一年淘系数据治理工作的一些总结。导读:本次分享题目为淘系数据模型治理,主要介绍过去一年淘系数据治理工作的一些总结。具体将围绕以下4部分展开模型背景&问题2问题分析3治理方案4未来规划▌模型背景&问题1.整体情况首先介绍一下淘系的整体数据背景。淘系的数据中...

用了那么久的Lombok,你知道它的原理么?

2022-08-12
阅读 7 分钟
简介: 在写Java代码的时候,最烦写setter/getter方法,自从有了Lombok插件不用再写那些方法之后,感觉再也回不去了,那你们是否好奇过Lombok是怎么把setter/getter方法给你加上去的呢?有的同学说我们Java引入Lombok之后会污染依赖包,那我们可不可以自己写一个工具来代替Lombok呢?作者 | 王再军(曦峰)来源 | 阿里开发...

地址标准化服务AI深度学习模型推理优化实践

2022-08-12
阅读 10 分钟
简介: 深度学习已在面向自然语言处理等领域的实际业务场景中广泛落地,对它的推理性能优化成为了部署环节中重要的一环。推理性能的提升:一方面,可以充分发挥部署硬件的能力,降低用户响应时间,同时节省成本;另一方面,可以在保持响应时间不变的前提下,使用结构更为复杂的深度学习模型,进而提升业务精度指标。导读...

友邦人寿可观测体系设计与落地

2022-08-11
阅读 5 分钟
简介: 面对微服务化、容器化改造,访问链路和部署复杂度的提升,如何更好地观测应用成为了无法回避的挑战。不妨看看友邦人寿如何进行可观测性建设规划与落地。作者:沈斌、右京 业务场景与挑战 友邦保险是香港联合交易所上市的人寿保险集团,覆盖 18 个市场。截至 2021 年 12 月 31 号,总资产 3400 亿美元。 友邦保险...

ModelScope初探:一行代码调用成熟AI模型。

2022-08-11
阅读 2 分钟
简介: 如何用一行代码调用成熟AI模型?试试ModelScope,让AI开发者解放生产力!ModelScope是阿里推出的下一代开源的模型即服务共享平台,为泛AI开发者提供灵活、易用、低成本的一站式模型服务产品,其开发目标为让模型应用更简单。ModelScope希望在汇集行业领先的预训练模型,减少开发者的重复研发成本,提供更加绿色环...

一文剖析PolarDB HTAP的列存数据压缩

2022-08-11
阅读 11 分钟
简介: PolarDB MySQL是阿里云自研的云原生数据库,主要处理在线事务负载(OLTP, OnLine Transactional Processing),深受企业用户的青睐。前言数据库迁移上云是大数据时代的一大趋势,PolarDB MySQL是阿里云自研的云原生数据库,主要处理在线事务负载(OLTP, OnLine Transactional Processing),深受企业用户的青睐。当下...

MSE 治理中心重磅升级-流量治理、数据库治理、同 AZ 优先

2022-08-11
阅读 6 分钟
简介: 本次 MSE 治理中心在限流降级、数据库治理及同 AZ 优先方面进行了重磅升级,对微服务治理的弹性、依赖中间件的稳定性及流量调度的性能进行全面增强,致力于打造云原生时代的微服务治理平台。作者:流士 本次 MSE 治理中心在限流降级、数据库治理及同 AZ 优先方面进行了重磅升级,对微服务治理的弹性、依赖中间件...

RocketMQ 消息集成:多类型业务消息——定时消息

2022-08-11
阅读 6 分钟
简介: 本篇将继续业务消息集成的场景,从使用场景、应用案例、功能原理以及最佳实践等角度介绍 RocketMQ 的定时消息功能。作者:凯易、明锻 引言 Apache RocketMQ 诞生至今,历经十余年大规模业务稳定性打磨,服务了 100% 阿里集团内部业务以及阿里云数以万计的企业客户。作为金融级可靠的业务消息方案,RocketMQ 从创...

浅谈数据仓库架构设计

2022-08-10
阅读 4 分钟
简介: 简单的比较了一下数据中台架构与数据仓库、BI、DSS之间的关系,并对比了一下Bill Inmon和Ralph Kimball架构的差异。1. 数据中台与DW/BI/DSS   个人认为数据中台本质上是一种新的适配大数据技术发展的新的“数据仓库-决策支持(商业智能)”架构。这个架构是构建在传统的架构基础之上,对传统架构的一种新的发展。  ...

一文读懂 BizDevOps:数字化转型下的技术破局

2022-08-10
阅读 8 分钟
简介: 目标、方法与实践。我们正迈向数字经济时代,数字化转型成为普遍行动。未来绝大多数业务都将运行在数字基座之上,软件系统成为业务创新和发展的核心引擎。在这一趋势下,产品研发的交付能力面临巨大挑战,产品研发的交付实践和方法亟待变革。 BizDevOps 将是这一变革的主题,是数字化时代的技术破局之道。本文将...

Ingress Nginx 接连披露高危安全漏洞,是否有更好的选择?

2022-08-10
阅读 6 分钟
简介: 在《K8s 网关选型初判:Nginx 还是 Envoy》一文中,我们已经给出了这个新的选项:MSE 云原生网关。本文继续展开分析,为何 MSE 云原生网关有更好的安全性保障。作者:澄潭 今年 K8s Ingress Nginx 项目接连披露了三个高危安全漏洞(CVE-2021-25745[1], CVE-2021-25746[2], CVE-2021-25748[3]),该项目也在近期宣...

为什么我要迁移 SpringBoot 到函数计算

2022-08-10
阅读 3 分钟
简介: 面对流量洪峰,我们再也不会手忙脚乱了,函数计算自动会帮我们扩容!很好的解决了我们的 API 场景和不定时执行各种不同任务的场景。作者:榴莲 为什么要迁移? 我们的业务有很多对外提供服务的 RESTful API,并且要执行很多不同的任务,例如同步连锁 ERP 中的商品信息到美团/饿了么等平台,在线开发票等。由于各...

数据库治理利器:动态读写分离

2022-08-10
阅读 4 分钟
简介: 本文详细描述了 MSE 即将推出的数据库治理能力矩阵中关于动态读写分离能力的介绍。通过 MSE 提供的 SQL 洞察能力,结合我们对业务的理解,我们可以快速定位划分接口请求为弱请求。将对主库性能以及稳定性影响大的读操作,分流至 RDS 只读库,可以有效降低主库的读写压力,进一步提升微服务应用的稳定性。作者:十...

一文详解用eBPF观测HTTP

2022-08-09
阅读 10 分钟
简介: 随着eBPF推出,由于具有高性能、高扩展、安全性等优势,目前已经在网络、安全、可观察等领域广泛应用,同时也诞生了许多优秀的开源项目,如Cilium、Pixie等,而iLogtail 作为阿里内外千万实例可观测数据的采集器,eBPF 网络可观测特性也预计会在未来8月发布。下文主要基于eBPF观测HTTP 1、HTTP 1.1以及HTTP2的角...

面向云时代的龙蜥操作系统,是 CentOS 替代的最佳选择

2022-08-09
阅读 6 分钟
简介: 龙蜥致力于打造“芯”“系”同频、云化创新、多快好省、安稳易用的操作系统产品!2022 开放原子全球开源峰会 OpenAnolis 分论坛上,阿里云智能基础软件产品经理张鹏程做了《面向云时代的龙蜥操作系统,应对 CentOS 停服的最佳选择》的主题分享,介绍了操作系统产业迎来新发展格局,龙蜥致力于成为 CentOS 迁移的最佳...