too many open files 问题排查
经常在集群中遇到 too many open files 问题，整理下原因与配置 相关现象 进程日志 问题发生时的 etcd 日志： 2021-12-27 08:49:13.292514 I | embed: rejected connection from "172.16.16.22:41266" (error "open /etc/kubernetes/ssl/kube-etcd-17...
经常在集群中遇到 too many open files 问题，整理下原因与配置 相关现象 进程日志 问题发生时的 etcd 日志： 2021-12-27 08:49:13.292514 I | embed: rejected connection from "172.16.16.22:41266" (error "open /etc/kubernetes/ssl/kube-etcd-17...
背景 etcd 的日志中，经常有下面的 warning 信息，这个东西本没有什么好分析的，只不过自己太懒了，只能靠一边写博客一边分析，这样才有点动力。 2021-10-24 01:36:29.048037 W | etcdserver: read-only range request "key:\"/registry/roles/cattle-global-data/mcapprevisio...
看一下 Etcd clientv3 将请求发送给 EtcdServer 的过程，本文基于的 Etcd 版本为 3.4。 从 clientv3 说起 在《在本地安装 Etcd 集群进行测试》 中介绍了 etcd clientv3 客户端的使用。大概有三个小步骤：1）配置一个 client config；2）通过 config 生成一个 client；3）通过这个 client 生成一个 KV...
"参考《Kubernetes 源码剖析》"
这两天在家看了一下《Kubernetes 源码剖析》，主要是关于 Apiserver / etcd 的部分，感觉受益颇多，这里整理一下。总的来说，对于特定资源的处理函数我们只需要关注两个文件就可以了。参考下图，以 Deployment 为例，一个是处理文件 storage.go，定义了该资源的 Storage.Interface 实现，其实一般用的是默认的 CacherStorage，只有个...
虚拟地址空间概述 Linux 上进程使用的都是虚拟地址空间，再通过页表访问物理内存，其中虚拟地址空间的分布如下： 具体分为以下几部分： 只读段：代码和和常量 数据段：全局变量 堆：动态分配的内存，从低地址开始向上增长 文件映射段：包括动态库、共享内存，从高地址到下增长 栈，包括局部变量和函数调用的上下文。栈的大小是固定的。 在 C 语言中，可以使用 malloc(...
关于证书相关配置参考：《Transport security model》，可以通过查看 etcd 的启动命令，来判断证书的位置，参考参数： –cert-file=<path>: Certificate used for SSL/TLS connections to etcd. When this option is set, advertise-client-urls c...
在本地机器上安装一个简单的 etcd 集群，用于测试。 通过 goreman 部署集群 从 https://github.com/etcd-io/etcd/releases/v3.4.3 下载 etcd 二进制文件，放到 PATH 下面。 下载 https://github.com/etcd-io/etcd/blob/v3.4.3/Procfile 下载 Procfile 文件，这个文件...
本文转载于 晒太阳的猫 《bbolt初体验》 什么是 bbolt bbolt 是对 Ben Johnson 的 bolt 项目的 fork ，目前被应用于 etcd 中作为底层存储。bbolt 是一个嵌入式的 KV 存储库，其作用类似于基于 C++ 的 LevelDB，但二者采用了不同的核心数据结构，前者使用 B+ Tree 且支持事务，后者使用 LSM 且不支持事务。 其实 bolt ...
目录 客户端设置超时示例 抓包分析 tcp 断开过程 通过 ctx.Done() 感知客户端断开连接 客户端设置超时示例 使用Context限制 Http 请求的超时时间。客户端代码如下。这里设置的超时时间是1秒钟，过了一秒钟，如果服务端还没有返回请求，则客户端主动发送 fin 报文断开请求。 func main() { ctx, cancel := context.Wi...
目录 基本语法 指定分隔符 变量 示例 对某一列求和 基本语法 awk 命令的基本语法如下，其中 pattern 表示匹配模式，actions 表示要执行的操作。语法表示当某个文本行符合 pattern 指定的匹配规则时，执行 actions 所执行的操作。pattern 和 action 都是可选的，但是两者必须保证有一个。act...
