编程札记

3

Go 语言中的零拷贝优化

• panjf2000   6月11日发布
• 2 收藏

相信那些曾经使用 Go 写过 proxy server 的同学应该对 io.Copy()/io.CopyN()/io.CopyBuffer()/io.ReaderFrom 等接口和方法不陌生，它们是使用 Go 操作各类 I/O 进行数据传输经常需要使用到的 API，其中基于 TCP ...

2

虚拟内存精粹

• panjf2000   4月19日发布
• 1 收藏

虚拟内存是当今计算机系统中最重要的抽象概念之一，它的提出是为了更加有效地管理内存并且降低内存出错的概率。虚拟内存影响着计算机的方方面面，包括硬件设计、文件系统、共享对象和进程/线程调度等等，每一个致...

30

Redis 多线程网络模型全面揭秘

• panjf2000   2月18日发布
• 23 收藏

在目前的技术选型中，Redis 俨然已经成为了系统高性能缓存方案的事实标准，因此现在 Redis 也成为了后端开发的基本技能树之一，Redis 的底层原理也顺理成章地成为了必须学习的知识。

0

分布式事务/系统之底层原理揭秘

• panjf2000   1月3日发布
• 收藏

分布式事务是分布式系统必不可少的组成部分，基本上只要实现一个分布式系统就逃不开对分布式事务的支持。本文从分布式事务这个概念切入，尝试对分布式事务最核心的底层原理逐一进行剖析，内容包括但不限于 BASE ...

23

Linux I/O 原理和 Zero-copy 技术全面揭秘

• panjf2000   2020-12-28 发布
• 12 收藏

如今的网络应用早已从 CPU 密集型转向了 I/O 密集型，网络服务器大多是基于 C-S 模型，也即 客户端 - 服务端 模型，客户端需要和服务端进行大量的网络通信，这也决定了现代网络应用的性能瓶颈：I/O。

2

Go netpoller 原生网络模型之源码全面揭秘

• panjf2000   2020-12-28 发布
• 收藏

Go 基于 I/O multiplexing 和 goroutine scheduler 构建了一个简洁而高性能的原生网络模型(基于 Go 的 I/O 多路复用 netpoller )，提供了 goroutine-per-connection 这样简单的网络编程模式。在这种模式下，开发...

1

【译】为什么 Kafka 这么快？

• panjf2000   2020-06-09 发布
• 收藏

软件体系结构在过去的几年间发生了巨大的变化。单体应用程序或甚至几个粗粒度的服务共享一个公共数据存储的理念，在全世界的软件从业者的头脑中早已不复存在了。自主微服务、事件驱动架构和职责分离 (CQRS) 模式...

2

【译】CPU 高速缓存原理和应用

• panjf2000   2020-05-29 发布
• 1 收藏

博客原文： 【译】CPU 高速缓存原理和应用 曾三次获得 F1 世界冠军的杰基•斯图尔特 (Jackie Stewart) 表示，了解汽车的工作原理让他成为了一名更好的驾驶员。 "你并不需要先成为一个工程师才能去做一个赛车手，但...

1

【译】Go 语言项目源码贡献官方指导文档

• panjf2000   2020-04-07 发布
• 1 收藏

以前给 Go 语言项目源码提交过一些 commits，期间阅读他们的官方指导文档的时候觉得这篇指导文档可以作为绝佳的关于大型软件项目的规范管理的参考，因为最近又提交了几个 commits，就又把这篇文档再看了一遍，有...

4

最快的 Go 网络框架 gnet 来啦！

• panjf2000   2020-04-07 发布
• 2 收藏

gnet 是一个基于事件驱动的高性能且轻量级的网络框架。它直接使用 epoll 和 kqueue 系统调用而非标准 Golang 网络包：net 来构建网络应用，它的工作原理类似两个开源的网络库：netty 和 libuv。

0

【发布】高性能 Go 网络库 gnet 发布 v1 版

• panjf2000   2019-10-15 发布
• 收藏

gnet 是一个基于事件驱动的高性能和轻量级网络框架。它直接使用 epoll 和 kqueue 系统调用而非标准 Golang 网络包：net 来构建网络应用，它的工作原理类似两个开源的网络库：netty 和 libuv。

7

gnet: 轻量级且高性能的 Golang 网络库

• panjf2000   2019-09-16 发布
• 4 收藏

博客 [链接] 项目主页 [链接] 欢迎大家围观~~，目前还在持续更新，感兴趣的话可以 star 一下暗中观察哦。 简介 gnet 是一个基于 Event-Loop 事件驱动的高性能和轻量级网络库。这个库直接使用 epoll 和 kqueue 系...

1

Lucene构建个人搜索引擎解析

• panjf2000   2018-11-19 发布
• 1 收藏

Lucene是apache软件基金会4 jakarta项目组的一个子项目，是一个开放源代码的全文检索引擎工具包，但它不是一个完整的全文检索引擎，而是一个全文检索引擎的架构，提供了完整的查询引擎和索引引擎，部分文本分析引...

0

Spark的分区机制的应用及PageRank算法的实现

• panjf2000   2018-09-09 发布
• 收藏

佩奇排名（PageRank），又称网页排名、谷歌左侧排名，是一种由搜索引擎根据网页之间相互的超链接计算的技术，而作为网页排名的要素之一，以Google公司创办人拉里·佩奇（Larry Page）之姓来命名。Google用它来体现...

5

MQ对比之RabbitMQ & Redis

• panjf2000   2018-09-01 发布
• 3 收藏

RabbitMQ是一个由erlang开发的AMQP（Advanced Message Queue ）的开源实现的产品，RabbitMQ是一个消息代理，从“生产者”接收消息并传递消息至“消费者”，期间可根据规则路由、缓存、持久化消息。“生产者”也即messag...

8

tornado配合celery及rabbitmq实现web request异步非阻塞

• panjf2000   2018-07-12 发布
• 9 收藏

Tornado是一个用python编写的一个强大的、可扩展的异步HTTP服务器，同时也是一个web开发框架。tornado是一个非阻塞式web服务器，其速度相当快。得利于其非阻塞的方式和对 epoll的运用，tornado每秒可以处理数以千...

18

深入golang之---goroutine并发控制与通信

• panjf2000   2018-07-08 发布
• 13 收藏

开发go程序的时候，时常需要使用goroutine并发处理任务，有时候这些goroutine是相互独立的，而有的时候，多个goroutine之间常常是需要同步与通信的。另一种情况，主goroutine需要控制它所属的子goroutine，总结起...

57

Goroutine并发调度模型深度解析之手撸一个协程池

• panjf2000   2018-07-03 发布
• 45 收藏

并发（并行），一直以来都是一个编程语言里的核心主题之一，也是被开发者关注最多的话题；Go语言作为一个出道以来就自带 『高并发』光环的富二代编程语言，它的并发（并行）编程肯定是值得开发者去探究的，而Go语...