1 什么是kafka Kafka是分布式发布-订阅消息系统，它最初是由LinkedIn公司开发的，之后成为Apache项目的一部分，Kafka是一个分布式，可划分的，冗余备份的持久性的日志服务，它主要用于处理流式数据。 2 为什么要使用 kafka，为什么要使用消息队列 缓冲和削峰：上游数据时有突发流量，下游可能扛不住，或者下游没有足够多的机器来保证冗余，kafka在中间可以起到一个缓冲的作用，把消息暂存在kafka中，下游服务就可以按照自己的节奏进行慢慢处理。 解耦和扩展性：项目开始的时候，并不能确定具体需求。消…

１、面试场景与面试技巧 金三银四招聘季，一位粉丝朋友最近在蚂蚁金服第二轮面试时遇到这样一个问题：如果MQ消费遇到瓶颈时该如何处理?。 横向扩容，相比很多读者与我这位朋友一样会脱口而出，面试官显然不会满意这样的回答，然后追问道：横向扩容是堆机器，还有没有其他办法呢？ 在面试过程中，个人建议大家在听到问题后稍作思考，不要立马给出太直接的答案，而是应该与面试官进行探讨，一方面可更深刻的理解面试官的出题初衷，同时可以给自己梳理一下思路。 消费端遇到瓶颈，这是一个结果，但引起这个结果的原因是什么呢？在没有弄清楚原因之前谈优化…

今天开始我们将继续深入 ZK 选举相关的知识 一、选举的基本规则 ZKr～这次我决定一反常态，先不讲故事了～先得聊聊在 ZK 选举中非常重要的一些东西。 1.1 zxid zxid 就是我们之前提到的事务编号，是一个 8 字节的整型数字，但是 ZK 设计的时候把这一个数字拆成了两部分使用，一鱼两吃！ 8 个字节的整数一共有 64 位长度，前 32 位用来记录 epoch，后 32 位就是用来计数。你可能要问了？ epoch？是啥？ zxid 初始化是 0，也就是这样 000000000000000000000000…

一、优秀员工小S(Sync) 我们通过之前的文章有介绍过，小S(Sync) 负责对办事处的数据进行归档，所以今天他就是我们的主角，让我们一起深入了解他的日常工作吧 为了唤醒大家的远古记忆，我放一张之前的图片 今天我们会重点讲一下图中的蓝色部分，不过在此之前还是得先从整体架构上介绍下 ZK 的数据管理，ZK 的数据大致是分为了两部分，一个是内存，一个就是磁盘文件。 1.1 内存 虽然今天我们的主角是磁盘文件，但是内存还是稍微再提一下下，帮助大家记忆的同时也能有一个比较全面的视角去认知 ZK 整体的数据管理。 ZK 在…

这几天去邻居家的博客转了转，发大家基本上都有了评论框的表情，遂觉得自己有点儿落伍了。本博客并没有使用主题自带的评论框，而是使用的wpDiscuz这个插件，其实这个插件自带的是有评论框表情的扩展的，不过那个需要额外花钱，一年好几十美刀，舍不得，只好自己瞎捣鼓捣鼓了。 百度了一圈，发现OwO这个表情插件大家用的多一些，虽然是好几年前的代码了，但是依旧很好使，这里不得不为原作者点赞。 这里附上OwO的源码地址：https://github.com/DIYgod/OwO 使用 这个插件使用起来倒是很简单。 第一步 引用Ow…

CC知识共享协议各协议内容解释 署名（Attribution，简写为BY）：必须提到原作者。 非商业用途（Noncommercial，简写为NC）：不得用于盈利性目的。 禁止演绎（No Derivative Works，简写为ND）：不得修改原作品, 不得再创作。 相同方式共享（Share Alike，简写为SA）：允许修改原作品，但必须使用相同的许可证发布。 简化后的六种组合方式 署名（BY） 署名（BY）-相同方式共享（SA） 署名（BY）-禁止演绎（ND） 署名（BY）-非商业性使用（NC） 署名（BY）-非…

SQL规范性检查 select检查 UDF用户自定义函数 SQL语句的select后面使用了自定义函数UDF，SQL返回多少行，那么UDF函数就会被调用多少次，这是非常影响性能的。 #getOrderNo是用户自定义一个函数用户来根据order_sn来获取订单编号 select id, payment_id, order_sn, getOrderNo(order_sn) from payment_transaction where status = 1 and create_time between '2020-1…

作为一台服务器来说，内存并不是无限的，所以总会存在内存耗尽的情况，那么当 Redis 服务器的内存耗尽后，如果继续执行请求命令，Redis 会如何处理呢？   设置有效期 使用Redis 服务时，很多情况下某些键值对只会在特定的时间内有效，为了防止这种类型的数据一直占有内存，我们可以给键值对设置有效期。Redis中可以通过 4 个独立的命令来给一个键设置过期时间： expire key ttl：将 key 值的过期时间设置为 ttl 秒。 pexpire key ttl：将 key 值的过期时间设置为 t…

经常在其它各个地方在说公司禁止使用Lombok，我一直不明白为什么不让用，今天看到一篇文章列举了一下“缺点”，这里我只想狠狠地反驳，看到列举的理由我竟无言以对。   JDK 版本问题 当我想要将现有项目的 JDK 从 Java 8 升级到 Java 11 时，我发现 Lombok 不能正常工作了。于是我不得不将所有的 Lombok 注解从项目源代码中清除，并使用 IDE 自带的功能生成 getter/setter，equals，hashCode，toString 以及构造器等方法，你也可以使用 Delom…

Intro Dapr 官方团队已于最近（2021.2.17）正式发布Dapr v1.0，Dapr已正式生产可用，可以部署到自托管环境或 Kubernetes 集群。对于绝大多数开发者来说，想必对Dapr只是有所耳闻，而具体是什么（What），可以解决什么样的问题（Why&How），有怎样的应用场景（Where），并不知悉。本文就尝试简要梳理下Dapr，并尝试回答以上问题。 What's Dapr Distributed Application Runtime. An event-driven, portab…