ES是一个非常流行的基于lucene的搜索和分析引擎，它提供了resetful的api非常适用于搜索、推荐、日志分析等场景，社区生态丰富，是分布式架构中非常重要的一环。下面从一个docker-compose部署一个最小化集群,并用Kibana和cerebro可视化的来一窥它的能力。 运行上述代码前请先创建一个名为es7net的网络: docker network create es7net下面是配置集群几个常见配置的原则 bootstrap.memory_lock一般设置为true，避免使用swap ES_JAVA…

接上文：《高效的的关键字查找和检测（哈希表和Trie前缀树和FastCheck）在实际使用中的性能》 动态语言是很慢的，它更多的是为了提高开发效率，这里的关键字过滤算法在生产环境中用原生python达到125ms 2千万字/每秒已经够用了。那么是不是可以适当的优化再快一点？ Cython，没事cython一下，带你飞 cython能把大部分python代码改为静态的c实现，甚至你可以混合c和python一起写。不过现实是大部分的pythoner如果碰到性能问题要么用go要么就是用csharp，很少去写cython。…

前言：看到dudu发的博文中似乎最近的db压力来源于关键字检测，以前只关注了倒排索引，于是好奇经典的关键字查找在实际生产中性能到底是一个什么数量级？ 为什么不用倒排索引 在一个文本中找到给定的关键字最快的做法是倒排索引，比如平常使用的各种搜索框如google，还有咱们在生产中分析日志时用的ES也是。它的优点是海量的文本和海量的关键字，缺点是搜索的文本加入现有索引很慢。所以它不适合：评论、即时通讯、微博、脏字过滤等对发布时间有要求的场景，而这些场景正好跟倒排索引是反过来的。 如果不用Trie树 那么如何实现一个高效的…

引用文地址：https://fastapi.tiangolo.com/async/ 前言：fastapi是一个广泛使用的高效的restful api框架，他的作者在这篇讲解框架中使用async的说明详细举例解释了异步编程、并发和并行的区别，堪称经典，于是手痒总结如下（不敢说翻译） async使用指导： 如果这个请求比较慢，比如连接数据库读取数据、文件IO、rpc调用等一般加上async，我想普通项目里大部分请求都会多多少少跟数据库打交道，所以加的往往比较多； 比较快，稳定的使用def即可，也可以把没有上面情况调用的…

容器镜像服务是CI构建中很重要的一换，毕竟dockerhub没有私有镜像服务，它除了给你的docker镜像加速外还可以存放你的构建，最最重要的都是免费的，目前阿里华为都有类似的服务。我一直以来使用的都是阿里云容器镜像服务，速度刚刚的，今天在整镜像的时候发现死活登录不上去，检查了一遍确认都没错，一脸懵逼，就阿里一直以来的niaoxing万一是他的问题呢于是想该用华为并对使用体验做个对比。下面是阿里登录容器镜像的截图： 吐槽1：固定密码也就是我一直用的，很好很方便，虽然有点小担心，但是确实门槛低，我就不喷了。 吐槽2：…