偏锋书生的专栏

“你最近一段时间把我们的***页面查询优化一下”，刚入职的我接到领导这了这个任务，做为IT老鸟，这应该是So easy的，心想，该我表现的时候了，百分百没建索引，或是建了不合理的索引导致没有用上索引，这东西应该不要“一段”时间吧？当我信心满满地找熟悉这块的开发人员了解情况时，顿时当头暴击啊，我们用的是mysql数据库，先select count(id) 来一下，苦苦等等了近5分钟，给我...

前言  互联网体系架构具有可控性差、 数据量大、 架构复杂等特点，错综复杂的各业务模块需要解耦，各异构数据需要同步，双活/多活的容灾方案需要高实时性 等，在各种场合都需要一套可靠的数据实时推送方案。mysql已成为互联网项目存储的主力，围绕着它的各外围模块急需实时地获取它的数据，binlog监听是解决此实时同步问题的不二之选。使用场景  duckula可以做到mysql到ES的增量和全量的同...

ES插件应用到ES很多地方，如：报警、分词、安全。。。。 但这些插件都是在技术层面的，业务层面肯定是缺失的，需要我们来补充1、跟据某个业务字段或是业务规则来打分，打分高的排前面2、跟据数据库字段来生成索引的mapping3、异构数据的同步索引，跟据规则处理异构数据4、跟据某些业务规则来触发告警5、更多。。。。。。。。。因此，我们很想自已来开发ES插件来满足业务需求，但ES插件在开发上确实不方便，如：权限严格、不支持热加载需要重启、对初学者不友好、版本升级（特别是大版本）后不向下兼容　等。所以我