Lucene 是一个基于 Java 的全文信息检索工具包，目前主流的搜索系统Elasticsearch和solr都是基于lucene的索引和搜索能力进行。想要理解搜索系统的实现原理，就需要深入lucene这一层，看看lucene是如何存储需要检索的数据，以及如何完成高效的数据检索。

编者注：本文以一道经典的系统设计面试题：《如何设计TinyURL》的参考答案和解析为例，帮助读者更深入地了解在系统需求分析和设计中，需要考虑的各个方面的细节。

1.HA3架构分为在线和离线两部分• 在线是一个传统的2层服务架构，分别叫做QRS和search。QRS负责接受用户请求，做一些简单处理之后把请求发给下面的search节点，search节点负责加载索引并完成检索，最终由QRS汇集各个search节点的结果并返回给用户。• 离线部分分为两个环节，一个环节是数据的预处理，其核心的工作是把业务...

随着使用es场景的增多，工作当中避免不了去使用es进行数据的存储，在数据存储到es当中以后就需要使用DSL语句进行数据的查询、聚合等操作，DSL对SE的意义就像SQL对MySQL一样，学会如何编写查询语句决定了后期是否能完全驾驭ES，所以至关重要，本专题主要是分享常用的DSL语句，拿来即用。

INFINI Labs 产品又更新啦~，包括 Easysearch v1.9.0、Gateway、Console、Agent、Loadgen v1.27.0。本次各产品更新了很多亮点功能，如 Easysearch 优化了多版本兼容配置；Console/Gateway/Agent/Loadgen 及 Framework 开源后，发布首个重大更新版本，支持过期元数据删除，指标图表懒加载，指标采集协程优化等等，欢迎大...

短网址又称网址缩短、缩短网址、URL 缩短等，指的是一种互联网上的技术与服务，此服务可以提供一个非常短小的 URL 以代替原来的可能较长的URL，将长的 URL 位址缩短。用户访问缩短后的 URL 时通常将会重定向到原来的长 URL

大家如果是做后端开发的，想必都实现过列表查询的接口，当然有的查询条件很简单，一条 SQL 就搞定了，但有的查询条件极其复杂，再加上库表中设计的各种不合理，导致查询接口特别难写，然后加班什么的就不用说了（不知各位有没有这种感受呢~）。

比如你你要搜索一个包含通配符的字符串，直接搜的话，被解释成为通配符，而不是普通字符，肯定是搜不到的，这个时候就可以用escape来解决这个问题

通过 IP 判断爬虫如果你查看服务器日志，看到密密麻麻的 IP 地址，你一眼可以看出来那些 IP 是爬虫，那些 IP 是正常的爬虫，就像这样：在这密密麻麻的日志里面，我们不仅要分辨出真正的爬虫 IP ，同时也要分辨出伪造的爬虫 IP，实属不易。如果查看服务器日志，我们可以先通过 User-agent 大致判断出是爬虫还是正常用户，...

geoGEOADD {代码...} key：指定要添加地理信息的有序集合的键名。longitude 和 latitude：表示地理位置的经度和纬度。通常使用双精度浮点数表示。member：与地理位置相关联的成员名称。GEODIST {代码...} key：指定要查询地理位置信息的有序集合的键名。member1 和 member2：表示两个地理位置成员的名称，用于计算它们之...

一条 SQL 语句过来的流程是什么样的？①当客户端连接到 MySQL 服务器时，服务器对其进行认证。可以通过用户名与密码认证，也可以通过 SSL 证书进行认证。登录认证后，服务器还会验证客户端是否有执行某个查询的操作权限。②在正式查询之前，服务器会检查查询缓存，如果能找到对应的查询，则不必进行查询解析，优化，执行等...

前言随着互联网的深入发展，人类已然进入大数据时代。如何在浩瀚的数据海洋里高速有效的获取有价值的信息，正是促使大数据技术具备走向众多企业的潜力。搜索引擎作为获取信息的有效入口，已然经历了20多年的发展，并一直试图理解用户搜索意图以及提升搜索的精准性。

ES Search Template所谓 search template 搜索模板其实就是：预先定义好查询语句 DSL 的结构并预留参数搜索的时再传入参数值渲染出完整的 DSL ，最后进行搜索使用搜索模板可以将 DSL 从应用程序中解耦出来，并且可以更加灵活的更改查询语句。例如： {代码...} 构造出来的 DSL 就是： {代码...} 在模板中通过 {{ }} 的方...

做过淘宝客的网友们都知道，淘宝客推广的网址都很长的一个网址，因为里面携带了大量的参数，链接过长的话就是导致我们推广起来很麻烦，京东和淘宝的官方短网址又有很多的限制，使用来不是很方便。现在我就给大家推荐几个方法，此方法可以很好的使用。可以将我们的推广链接缩短成新浪短网址​。如里大家使用的感觉满意就，...

工具快速访问JSON 转 GO: [链接]YAML 转 GO: [链接]SQL 转 go-zero Model: [链接]SQL 转 GORM Model: [链接]SQL 转 ElasticSearch DSL: [链接]SQL 转 entgo schema: [链接]JSON转GO网址：[链接]1. 有两种模式转化-展开：json中的所有对象都创建为新的struct转化-嵌套：json中的对象都包含到一个struct中2. 自定义tag默认...

基本思路引入EasyUI资源Datagrid组件实现初始化列表分页数据加载用form将搜索条件收集后转成json对象，向后台发送请求重新加载数据后台Controller层：定义搜索条件pojo类对请求数据进行封装接收后台Service层：调用mapper查询数据和总数，封装成结果对象返回后台Mapper层：根据查询条件对象进行数据查询、查询数据总数具...

后台管理系统有若干个列表页，每个列表页都带有查询搜索功能，列表页的头部会有input输入框，目前需要将项目中所有列表页的输入框都增加回车搜索功能，列表页的数据查询都使用到了mixins里面的功能方法