使用split_size优化的ODPS SQL的场景

2019-03-20
阅读 2 分钟
说明1:split_size,设定一个map的最大数据输入量,单位M,默认256M。用户可以通过控制这个变量,从而达到对map端输入的控制。设置语句:set odps.sql.mapper.split.size=256。一般在调整这个设置时,往往是发现一个map instance处理的数据行数太多。

MySQL运维实战 之 PHP访问MySQL你使用对了吗

2019-03-08
阅读 6 分钟
大家都知道,slow query系统做的好不好,直接决定了解决slow query的效率问题 一个数据库管理平台,拥有一个好的slow query系统,基本上就拥有了解锁性能问题的钥匙 但是今天主要分享的并不是平台,而是在平台中看到的奇葩指数五颗星的slow issue 好了,关子卖完了,直接进入正题 一、症状 一堆如下慢查询 {代码...} 从...

能用机器完成的,千万别堆工作量|持续集成中的性能自动化测试

2019-02-22
阅读 7 分钟
当前闲鱼在精益开发模式下,整个技术团队面临了诸多的能力落地和挑战,尤其是效能方面的2-1-1的目标(2周需求交付周期,1周需求开发周期,1小时达到发布标准),具体可见 闲鱼工程师是如何构建持续集成流水线,让研发效率翻倍的 ,在这个大目标下,就必须把每个环节都做到极致。自动化的建设是决定CI成败的关键能力,今天...

Perseus-BERT——业内性能极致优化的BERT训练方案【阿里云弹性人工智能】

2019-02-19
阅读 6 分钟
2018年在自然语言处理(NLP)领域最具爆炸性的一朵“蘑菇云”莫过于Google Research提出的BERT(Bidirectional Encoder Representations from Transformers)模型。作为一种新型的语言表示模型,BERT以“摧枯拉朽”之势横扫包括语言问答、理解、预测等各项NLP锦标的桂冠,见图1和图2。

阿里大规模数据中心性能分析

2019-01-17
阅读 7 分钟
郭健美,阿里巴巴高级技术专家,目前主要从事数据中心的性能分析和软硬件结合的性能优化。CCF 系统软件专委和软件工程专委的委员。曾主持国家自然科学基金面上项目、入选上海市浦江人才计划A类、获得 ACMSIGSOFT “杰出论文奖”。担任 ICSE'18NIER、ASE'18、FSE'19 等重要会议程序委员会委员。

阿里专家梁笑:2018双十一下单成功率99.9%!供应链服务平台如何迎接大促

2018-12-27
阅读 8 分钟
摘要:2018年双十一平稳度过,海量订单、零点流量高峰,阿里是如何实现供应链99.9%的下单成功率?本次分享中,阿里2018年双十一大促供应链服务保障平台负责人向大家详细阐述大促前4个月的全程经历。面对大促第一步需要做什么,流量峰值如何评估,性能优化从何处着手,一套有条不紊的供应链服务平台迎接大促的解决方案至...