Serverless 常见的应用设计模式

2022-03-01
阅读 5 分钟
1.7k
2014年我们发布了 Lambda 服务,掀起了 Serverless 革命。现在越来越多的人谈论 Serverless 的未来。事实上,我们自己构建的应用程序中有一半以上是基于 Lambda 的,Serverless 能够最大限度地利用云计算的价值。现在,越来越多的客户正在决定采用 Serverless。这里,我们不只是在谈论 Lambda、API Gateway、Step Functi...

Serverless 底座的持续创新

2022-03-01
阅读 4 分钟
2.3k
自 2014 年以来,亚马逊云科技一直通过 Lambda 服务向用户提供 Serverless 的能力。使用 Lambda,用户不必担心管理服务器或调整容量,以应对不断变化的市场需求,而且上述需求均由亚马逊云科技自动进行配置,用户只需为他们使用的资源付费。

2 月亚马逊云科技培训与认证课程,精彩不容错过!

2022-02-10
阅读 2 分钟
1.6k
课程介绍:本在线研讨会的内容是亚马逊云科技部署架构课程,面向准备参加 AWS Certified Solutions Architect – Associate 考试的人员。 该考试用于检验考生在亚马逊云科技云上设计和部署可扩展、高度可用且具容错能力的系统方面的技术专业知识。
封面图

应云而生,一文看懂端到端的可观测体系构建

2022-01-24
阅读 5 分钟
8.7k
2021年初,可观测性的概念在国内市场还鲜少有人提到,但到了2021年下半年,有关可观测性的研讨和实践却开始如雨后春笋般层出不穷,知名公司 Grafana 甚至直接将原来的监控工具改成了可观测性技术栈并推了一系列服务。可观测性真的能够解决传统监控体系面临的诸多问题吗?又该如何构建可观测体系?本期,亚马逊云科技 Tec...
封面图

2022年,你还要做开源软件么?

2022-01-17
阅读 4 分钟
2.1k
不平凡的2021已经悄悄走远:依旧蔓延的疫情一直到年末的 Log4j 的重磅炸药,基本上各个大厂都在连夜整修系统来填补安全漏洞。Log4j 目前使用在百万台机器当中:它默默的记录着系统日志,帮助开发者找到错误原因,基本上是一个不可或缺的工具。
封面图

转换匹配患者记录,看Amazon Lake Formation FindMatches显神通!

2022-01-16
阅读 11 分钟
2.4k
患者匹配是实现医疗护理互通性的主要障碍之一。不匹配的患者记录和无法检索患者历史信息可能严重阻碍做出正确的临床决定,并导致漏诊或治疗延误。另外,医疗护理提供者经常会花精力去处理患者重复数据的删除,尤其当他们的数据库中的患者记录数量急速增加时。电子健康记录 (EHR) 近年来大幅优化了患者的安全和护理协调,...

基于Amazon ECS Fargate构建Apache Superset

2022-01-15
阅读 6 分钟
2.5k
摘要:Apache Superset是一个开源的基于主流云原生技术构建的数据可视分析平台Business Intelligence(BI),给用户提供轻量,直观,可定制的操作界面来对接各种数据源,实现数据的查询,编排和可视化。通过结合Amazon Elastic Container Service(Amazon ECS),Amazon Cloud Map等托管服务,我们可以将Apache Superset快...
封面图

Apache Atlas 数据血缘

2022-01-14
阅读 7 分钟
2.2k
01 什么是数据血缘数据血缘跟踪、记录、展示了数据来自何处,以及在数据流转过程中应用了哪些转换操作,它有助于追溯数据来源及处理过程。数据血缘系统的核心功能:数据资产的自动发现及创建血缘关系的自动发现及创建不同视角的血缘及资产分析展示与数据血缘容易混淆的概念:数据起源。数据起源重点在于跟踪数据的原始来...
封面图

面向未来,我们来聊一聊什么是现代化数据架构

2022-01-14
阅读 6 分钟
1.5k
在不那么遥远的旧 IT 时代,有这样一个段子——假如把数据库们”聚在一起“开会”。Oracle: 我们需要企业级数据库。MySQL: Oracle 不开源。PostgreSQL: MySQL 的功能不够多。SQLite: 你可以把我嵌入到任何地方。这样,4 种数据库够大家用了。MongoDB: 为什么我们要用 join 和模式 (schema)?Bigtable: MongoDB 的对 web 的扩展...
封面图

Amazon DynamoDB 在智能湖仓架构中的实践

2022-01-14
阅读 5 分钟
1.5k
自 2012 年推出以来,已有数十万亚马逊云科技客户选择用 Amazon DynamoDB 处理关键任务的工作负载。Amazon DynamoDB 是一个非关系型数据库,允许您存储几乎无限量的数据,并以任何规模的单数毫秒级性能检索数据。
封面图

Amazon Redshift 表设计优化 – 优化已有数据表中的列大小

2022-01-14
阅读 7 分钟
2.2k
Amazon Redshift 数据仓库是种快速且完全托管的数据仓库服务,让您可以使用标准 SQL 和现有的商业智能工具经济高效地分析您的所有数据,提供优质的数据仓库解决方案。
封面图

呼叫医生云! Amazon HealthLake 正式推出

2022-01-14
阅读 5 分钟
1.3k
在 2020 年 Amazon re:Invent 大会上,我们预览了 Amazon HealthLake,这是一项完全托管、符合 HIPAA 标准的服务。医疗保健和生命科学客户可以利用此服务将来自不同孤岛和不同格式的健康信息汇总到结构化的集中式亚马逊云科技数据湖,并通过分析和机器学习 (ML) 从这些数据中获取洞察。今天,我非常高兴地宣布,Amazon H...
封面图

如何构建智能湖仓架构?亚马逊工程师的代码实践来了

2022-01-14
阅读 12 分钟
1.7k
要构建湖仓一体架构并不容易,需要解决非常多的数据问题。比如,计算层、存储层、异构集群层都要打通,对元数据要进行统一的管理和治理。对于很多业内技术团队而言,已经是个比较大的挑战。
封面图

使用Amazon Redshift Simple Replay实用程序简化Amazon Redshift RA3迁移评估

2022-01-14
阅读 10 分钟
2k
Amazon Redshift 是快速、广受欢迎的完全托管式云数据仓库,允许您使用标准 Amazon SQL 处理数据仓库、运营数据库和数据湖中的 EB 级数据。它提供不同的节点类型以适应各种工作负载;您可以根据需求从 Amazon Redshift RA3、Amazon Redshift DC2 和 Amazon Redshift DS2 中选择。Amazon Redshift RA3 是最新的实例类型,...
封面图

使用 Simple Replay 实用程序简化 Amazon Redshift RA3 迁移评估

2022-01-14
阅读 8 分钟
1.5k
Amazon Redshift 是快速、广受欢迎的完全托管式云数据仓库,允许您使用标准 SQL 处理数据仓库、运营数据库和数据湖中的 EB 级数据。它提供不同的节点类型以适应各种工作负载;您可以根据需求从 RA3、DC2 和 DS2 中选择。RA3 是最新的实例类型,它允许您独立扩展计算和存储并支付其费用,还支持跨集群数据共享和跨可用区...
封面图

利用 Amazon Batch 来为容器化负载调用海量云端算力

2022-01-14
阅读 6 分钟
1.9k
Apache Airflow(以下简称为Airflow) 是一项由Airbnb在 2014 年推出的开源项目,其目的是为了管理日益复杂的数据管理工具、脚本和分析工具,提供一个构建批处理工作流的方案。Airflow是一种可扩展的分布式工作流调度系统,允许将工作流建模为有向无环图(DAGs),通过这种方式简化数据管道中各个处理步骤的创建、编排和监...
封面图

构建安防视频云存,和传统安防视频业务的烦恼说再见!

2022-01-14
阅读 4 分钟
1.6k
传统视频数据因为缺乏元数据索引,因此在无法确定精确的事件发生时间时,无法快速有效的定位视频信息,需要大量人力对存量视频信息进行检索。由此引入巨大的人力成本,并需要更多时间完成视频检索。
封面图

在Amazon SageMaker中灵活使用多种存储服务

2022-01-14
阅读 6 分钟
1.8k
Amazon SageMaker 是一种完全托管的端到端机器学习服务,数据科研人员、开发人员和机器学习专家可以快速、大规模地构建、训练和托管机器学习模型。这极大地推进了您所有的机器学习工作,让您能够将机器学习技术迅速融入生产应用程序。Amazon SageMaker的主要工作组件包括:算法编写、模型训练、模型评估、模型托管等。
封面图

通过 Amazon CloudWatch 配合 Amazon ElastiCache for Redis 遵循监控最佳实践

2022-01-14
阅读 8 分钟
3.4k
在维持 Amazon ElastiCache 资源的可靠性、可用性与性能方面,监控一直是最为重要的手段之一。在本文中,我们将共同了解如何使用 Amazon CloudWatch 及其他外部工具维持健康运作的 Redis 集群,并防止其意外中断。我们还将具体讨论对扩展需求进行预测及筹备的几种可行方法。
封面图

4种高速安全混合云解决方案,助力您的云迁移之旅!

2022-01-14
阅读 5 分钟
1.6k
企业上云是企业在数字化转型的关键一步,数据表明全球有88%的企业将上云作为优先战略,但同时,86%的企业基础架构支出中仍在本地的系统部署上,这说明企业向云端迁移还需要一段时间。同时,公有云、混合云、多云的多种方式接入已成为企业的主流选择。亚马逊云科技希望把云迁移变得更加简单,所以亚马逊云科技一直致力于...
封面图

使用Amazon CDK部署基于Amazon Fargate的高可用、易扩展的Airflow集群

2022-01-14
阅读 6 分钟
1.6k
Apache Airflow(以下简称为Airflow) 是一项由Airbnb在 2014 年推出的开源项目,其目的是为了管理日益复杂的数据管理工具、脚本和分析工具,提供一个构建批处理工作流的方案。Airflow是一种可扩展的分布式工作流调度系统,允许将工作流建模为有向无环图(DAGs),通过这种方式简化数据管道中各个处理步骤的创建、编排和监...
封面图

无服务器应用DevOps最新实践(内附完整演讲+视频)

2022-01-14
阅读 8 分钟
2.8k
本文内容选自2021中国DevOps社区峰会 · 大连站,孙华老师分享的《无服务器应用DevOps最新实践》文字实录和视频回放。扫码查看视频回放以下是演讲文字实录:大家好,我是孙华,亚马逊云科技无服务器产品专家。很高兴今天有机会跟大家交流无服务器应用DevOps最新实践。今天在我这边45分钟的时间里面,想跟大家介绍一下什么...
封面图

基于云上 Arm 架构赋能数值天气预报

2022-01-14
阅读 22 分钟
5k
Weather Research and Forecasting Model(WRF)被誉为是次世代的中尺度天气预报模式,很多气象机构都使用WRF来做气象方面的研究与预测。由于地理信息与实时气象数据量庞大,以及计算逻辑复杂,需要高性能的计算集群作为基础设施。Amazon可以提供丰富的、弹性扩展的高性能计算资源,如64位Arm Neoverse内核定制而成,为在A...
封面图

从技术新趋势到云原生应用开发,云计算下一个十年将走向何方

2022-01-14
阅读 5 分钟
2k
从最初的新鲜词,到如今形成巨大的行业和生态,云计算已蓬勃发展十余年。在这十余年间,不断有新理念、新技术涌现,致使 IT 行业发生了天翻地覆的变化。作为一名新时代的开发者,把握技术的发展方向,在这个不断变化的世界显得至关重要。
封面图

再一次重构云计算底座, Amazon Graviton3!

2022-01-14
阅读 3 分钟
1.8k
2021亚马逊云科技 re:Invent 全球大会式发布了最新一代的云原生通用处理器 Amazon Graviton3 以及相关计算实例。从2019年 Amazon Graviton,2020年 Amazon Graviton2 到今天的 Amazon Graviton3,每一次都从芯片开始不断改进计算服务。与 Amazon Graviton2 相比,Amazon Graviton3 集成了550亿个晶体管,计算性能将提高2...
封面图

失去了SDK,云计算将会怎样?

2022-01-13
阅读 12 分钟
2.4k
最近,我花了一些时间在编译、优化我的一台运行OpenWRT的路由器,型号是 Linksys WRT 1900ACS 。为了扩展路由器的功能,就需要在OpenWRT上开发一些新的功能,尤其是需要使用到亚马逊云科技上的一些有趣的服务。当我习惯性地开始使用Amazon SDK 的时候才突然意识到,在一台硬件配置不高,软件极度精简的系统中使用这些 SD...
封面图

专注于最有价值的事情!——亚马逊云科技首席科学家工作心得分享

2022-01-13
阅读 6 分钟
5k
本文由亚马逊云科技首席科学家李沐2021年5月首发于其知乎账号 五年前的今天我飞往西雅图参加亚马逊的面试。面试完后连夜做红眼航班飞往波士顿赶去参加老婆在MIT的博士答辩。答辩一半的时候电话响了,对方说恭喜你面试通过,想聊下薪水。我说其实就面了你们一家,直接给就是,先挂了。答辩完第二天跟老婆去市政局登记结婚...
封面图

Karpenter : 新一代 Kubernetes auto scaling 工具

2022-01-13
阅读 18 分钟
2.9k
在亚马逊云科技 2021 re:Invent 大会期间,亚马逊云科技宣布为 Kubernetes 构建的开源自动扩缩容项目 Karpenter 升级至0.5版本并 GA ,可在生产环境使用。在 Kubernetes 上的 auto scaling 始终被人关注,当前的 kubernetes 提供 Cluster Autocaler 用于制定调度和扩缩决策。那么,既然有了Kubernetes Cluster Autoscale...
封面图

巧用Amazon PrivateLink——轻松访问私有终端节点Amazon S3

2022-01-13
阅读 7 分钟
2.9k
亚马逊云科技在2021年2月正式发布了适用于 Amazon S3 的 Amazon PrivateLink,Amazon PrivateLink 使用虚拟网络中的私有 IP 提供 Amazon Simple Storage Service (S3) 与本地资源之间的专用连接。借助此功能,您现在可以使用 Virtual Private Cloud 中的接口 VPC 终端节点,在安全的虚拟网络中直接访问作为私有终端节点...
封面图

使用 KubeSphere 管理 Amazon EKS Anywhere 集群

2022-01-13
阅读 6 分钟
2.4k
近日,亚马逊云科技开源了 Amazon EKS Anywhere。这个项目为 Amazon EKS 提供了一种新的部署模式,可以在本地数据中心使用虚拟机轻松创建和管理 Kubernetes 集群,并利用 Amazon EKS Distro 的优势,为您的数据中心带来一致的 Kubernetes 运维管理体验。它可以对多个 Kubernetes 集群进行全生命周期管理,为用户灵活交付...
封面图