Mark 的滿紙方糖言

家中杂物管理术 - 不断不舍不离 Homebox

labile.zhu@gmail.com (Mark Zhu) — Tue, 20 Jan 2026 08:12:15 +0800

本文分享如何通过 Homebox —— 一个自托管的家庭物品管理系统，重新整理我的 “杂物生活”，节省时间、减少焦虑，并让全家人都受益。如果你的第一反应是 “就家里那点东西要上系统，至于吗？” 那证明你是个正常人，我以前也是这样的反应。作为一名技术爱好者，我曾长期被家中不断增长的电子设备和零部件小工具所困扰。

智能家居集成 AI Agent - agentgateway 与 tracing 实验

labile.zhu@gmail.com (Mark Zhu) — Fri, 12 Dec 2025 08:12:15 +0800

内容简介：介绍用 AI Agent 控制智能电器的一次实验。尝试通过 agentgateway 代理所有 LLM 与 MCP 流量，实现集中认证、配置、tracing。

缘起

基于上期的 HA + 小米智能家居 = 失业宅心灵鸡汤基础上。我想试试：

HA + 小米智能家居 = 失业宅心灵鸡汤

labile.zhu@gmail.com (Mark Zhu) — Fri, 05 Dec 2025 08:12:15 +0800

本文介绍如何使用 Home Assistant (HA) 集成小米米家智能家居设备，实现基于 Prometheus Alertmanager 的自动化米家开关控制。并结合 HomeKit Bridge，实现 iPhone 位置感知驱动的自动化。

缘起

缘起：这节写得有点冗长，不喜可跳过。

Self-hosted - 数字世代的归园田居

labile.zhu@gmail.com (Mark Zhu) — Thu, 20 Nov 2025 23:12:15 +0800

无论是否愿意，我们大概已经离不开生活的数码化了。想想每天拍多少照片，多少微信消息，多少娱乐媒体，多少社交信息，多少数字化记录的知识或事项。

如果说 陶渊明的归园田居是东晋末年离开繁华喧嚣的生活态度，那么 Self-hosted 大概是数字时代里，远离公有云和现代互联网喧嚣、逃离各种有理或无理的数据监控和广告驱动的一种生活态度。

那个算法尚未统治的时代：90 年代的互联网

labile.zhu@gmail.com (Mark Zhu) — Sun, 10 Aug 2025 01:12:15 +0800

人老了，就喜欢偶尔怀旧。把现在和过去作种种或片面，或全面，或主观或客观的对比。以前人们是在村口那棵老榕树下谈论天下大事，指点江山。现在大概是在微信群、朋友圈上高谈宽论。

自家寶藏 - 待业程序员的禪思

labile.zhu@gmail.com (Mark Zhu) — Fri, 06 Jun 2025 03:12:15 +0800

缘起

这段时间在准备离开工作 7 年的公司了。对于一个中年的程序员，要再次步入久违非舒适区，选择未来的路似乎不像以前那么直接与简单了。IT 技术的路好像已经越走越窄了，而离开 IT 这个选项又等于离开一个已经生活 20 年的圈子，投入一个未知的世界。作为一个小时候种过十多年地的真耕学农民，回归是一个选项吗？或者《光輝歲月》这歌中已经回答了：

Self-hosted 雜碎 2025

labile.zhu@gmail.com (Mark Zhu) — Sun, 02 Feb 2025 23:12:15 +0800

引

不知不觉，已经在现在工作的公司度过了 6 年。回望一下， 6 年前入职时的光景好像还在眼前。在离开前，或者适合回顾和思考这段时间的经历。工作上应用的技术一直在这个博客上更新，已经没什么好补充的了。不如写写这 6 年和之前工作的 14 年的区别，说一些好玩的事。

2024 年 Music/Spotify 回顾

labile.zhu@gmail.com (Mark Zhu) — Sun, 08 Dec 2024 03:12:15 +0800

2024 年快要成为过去。2024 年初，我写了《2024, live like Sisyphus》，不知道是不是 墨菲定律(Murphy's Law) 生效，还是自己预感正确，这大概是我近 20 年来最艰难的一年了。还好，有很多有心人，和有声与无声的书本、音乐陪伴我。我这几年一直用 Spotify 来听音乐和 podcast 。前几天，它像以往一样，推送给我 2024 年的音乐回顾。看到这些统计，我是有点触动的。有的事情自己或许猜到大概，但数据说出来的，往往比估计与猜想来得更真实。或者有句话没错：

可能是最深入全面的图解 Java Virtual Threads

labile.zhu@gmail.com (Mark Zhu) — Sun, 17 Nov 2024 08:47:11 +0100

本文尽我所能，用了数月时间，在学习了 Java Virtual Theads 的一些设计和实现理念后，用我所能的精炼文字和画图，去记录我的所学。是我现在能找到的最深入全面的图解 Java Virtual Threads 文章。

Java 如何使用 Linux 内存 -《面向技术宅的 JVM 内幕》

labile.zhu@gmail.com (Mark Zhu) — Fri, 01 Nov 2024 08:47:11 +0100

为了更高的性能、更高的内存利用率、更可靠的异常溢出保护机制，Java 重度重用了 Linux 的内存区 MMap 机制。k8s 容器环境下，内存使用预估也依赖于对它的理解。本文主讲 Java 的内存分区机制。

Java Safepoint/Handshake 全面剖析 -《面向技术宅的 JVM 内幕》

labile.zhu@gmail.com (Mark Zhu) — Tue, 29 Oct 2024 08:47:11 +0100

花数月时间，精心制作完成了《面向技术宅的 JVM 内幕》的 Safepoint 与 Threads Handshake 两节内容。是我现在能找到的全网最完整细致的 Safepoint 原理与实现分析。以下是节选内容。原文见：

可以这么说，我之前和大分部 Java 程序员，从 2014 年 Java 8 起，就很少再积极跟进 Java 底层的新技术了。原因无非几个：

从 JVM 学习路书到开源的酒神精神

labile.zhu@gmail.com (Mark Zhu) — Sun, 20 Oct 2024 08:47:11 +0100

内容概述：从 JVM 学习路书说到钻研开源的酒神精神。顺带说说《面向技术宅的 JVM 内幕》的更新内容。摘自我的开源书《面向技术宅的 JVM 内幕》中 JVM 学习路书一节。建议用电脑或平板阅读本书原文，排版、图片、结构、整体阅读体验更友好。

Java Safepoint/Handshake 剖析求证 - JVM 必要之恶 - TL²;DR

labile.zhu@gmail.com (Mark Zhu) — Sat, 12 Oct 2024 08:47:11 +0100

内容概述：Java Safepoint/Handshake 设计、实现原理剖析与求证 - 摘自我的开源书《面向技术宅的 JVM 内幕》中 Safepoint 一节。本文是摘录整合文章。建议用电脑或平板阅读本书原文，排版、图片、结构、整体阅读体验更友好。

JVM 剖析² 二次方 - Serviceability Agent

labile.zhu@gmail.com (Mark Zhu) — Thu, 03 Oct 2024 08:47:11 +0100

Serviceability Agent

Serviceability Agent(SA) 原是 HotSpot 原码库中的 Sun 私有组件，由 HotSpot 工程师开发，用于协助调试 HotSpot OpenJDK。他们随后意识到 SA 可用于支持用户编写 serviceability tools ，因为它可以在运行中的进程以及 Core Dump 文件中检视 Java 对象以及 HotSpot 数据结构。

JVM 堆栈内存剖析 - 《面向技术宅的 JVM 内幕》

labile.zhu@gmail.com (Mark Zhu) — Sat, 31 Aug 2024 08:47:11 +0100

由于堆栈是线程运行的 context，是运行引擎的热点核心数据。线程想触达到其它的在 heap 中的对象，几乎都要以这个 context 为根，去多次寻址才能触达 heap 中的目标数据。可以说，这个 context 就是串联各功能模块的中心，用它可以找到上级函数返回点、入参、本函数的本地变量……了解堆栈上保存了什么数据，怎样保存数据，对了解 JVM 运行引擎、JIT编译、GC 等等功能面有重要的串接作用。就可能知道功能面之间是如何耦合、协作，完成 JVM 的完整功能。

无处不在的 JNI - 《面向技术宅的 JVM 内幕》

labile.zhu@gmail.com (Mark Zhu) — Sat, 31 Aug 2024 08:47:11 +0100

《面向技术宅的 JVM 内幕》

不知不觉，以 Java 程序员的名义在职场混了 20 有余个年头。年纪渐长，就养成了一个年轻人最讨厌的毛病：总喜欢回望过去。我一直写书和博客，都在思考一个问题。我为什么，为谁在写东西？总的回答是，我想留下和分享点东西，意义在于留下和分享的过程。读者当然越多越好，但从不为读者多少而主导自己的写作范围。

一个IP包的旅行 —— K8s 网络之 Calico 浅度解构

labile.zhu@gmail.com (Mark Zhu) — Sun, 28 Jul 2024 23:12:15 +0800

前言

学习 Kubernetes 就像玩动作游戏，当我高高兴兴地打败了一关的 BOSS 后总以为是大结局了，谁知道后面还有更大的BOSS 出现。当我以为学习完容器化、Linux cgoup / namespace / docker 后，就可以大结局了，谁知道后面还有 CNI。

Linux: 一切皆文件; peekfd: 偷看一切文件读写

labile.zhu@gmail.com (Mark Zhu) — Sat, 06 Jul 2024 23:12:15 +0800

引

内容简介

Linux 大部分数据流动，包括进程间通讯，socket…… 均通过文件描述符(fd) 读写实现。在 troubleshooting 时，如果可以偷看到 fd 的流量，那么很多问题可以加速证明/证伪。本文介绍一个老工具 peekfd ，可以在一定环境中完成这个任务。

小编码，我输给 AI 了 —— 简记一次父子进程互锁的坑，自己挖的

labile.zhu@gmail.com (Mark Zhu) — Fri, 05 Jul 2024 23:12:15 +0800

简述

最近自己挖了一个：父子进程互锁的坑，真是应了一句话：

Debugging is like being the detective in a crime movie where you are also the murderer.

- Filipe Fortes
调试就像是犯罪电影中的侦探，而你也是凶手。

先说结论吧：可能真是太久没认真写代码了，犯了个低级错误：

码农幽默英语排行榜 S1E2

labile.zhu@gmail.com (Mark Zhu) — Thu, 04 Jul 2024 23:12:15 +0800

Source: Norman Rockwell

“there is only one true heroism in the world: to see the world as it is, and to love it” ― Roman Rolland

「世上只有一種英雄主義，就是在認清生活真相以後，依然熱愛生活。」 — 羅曼．羅蘭

再別科橋诗两首

labile.zhu@gmail.com (Mark Zhu) — Wed, 03 Jul 2024 03:12:15 +0800

广州塔下搬砖望帝景

source: 上图来源已经标注

再別科橋

悄悄地我走了，
正如我悄悄地來；
我最後發了個 farewell，
作別當天的戰友。

C++ 项目构建工具 Bazel 学习笔记

labile.zhu@gmail.com (Mark Zhu) — Sun, 30 Jun 2024 03:12:15 +0800

Bazel 概念与对象

用 Draw.io 打开 bazel-overview.drawio.svg

用 Draw.io 打开 bazel-concept.drawio.svg

用 Draw.io 打开 bazel-external-dep.drawio.svg

CPP use cases

Adding include paths

https://bazel.build/tutorials/cpp-use-cases#add-include-paths

Sometimes you cannot (or do not want to) root include paths at the workspace root. Existing libraries might already have an include directory that doesn’t match its path in your workspace. For example, suppose you have the following directory structure:

我的智能家居设计 —— 说说好像过时的 IOT

labile.zhu@gmail.com (Mark Zhu) — Wed, 12 Jun 2024 08:12:15 +0800

首先声明一下，我写这篇文章时，小米没给我钱。当然如果后来雷军想给我钱，那么就是后话了。毕竟嘛…… 我爱 RMB。我不是米粉。在 1994 年左右，当时作为小学生的我，也曾是 DOS 下的 WPS 粉。当时 WPS 有一个通用密码 Ctrl-QIUBOJUN ，所以严格来说，我曾是金山粉，或者雷军他前老板求伯君粉，或者叫“金”粉？

我的个人知识库的构建－ Stop 404

labile.zhu@gmail.com (Mark Zhu) — Tue, 11 Jun 2024 23:12:15 +0800

Adolf Hitler viewing the bust of Friedrich Nietzsche in 1931 © Fotoarchiv Hoffman

码农之路一走就是二十年了。前十五年应了陶渊明的一句话：＂人生无根蒂，飘如陌上尘＂，每换一家公司或项目，技术栈也会跟着或多或少地改变。这种状态很难积累到什么有竞争力的技术，有时候幸运可以积累点，有限的大脑内存也因时间和需要腾出空间存放新知识而忘记。

True world?

labile.zhu@gmail.com (Mark Zhu) — Wed, 10 Apr 2024 03:12:15 +0800

Image from [Happiness short movie - Steve Cutts]

Disclaimer: 本故事纯属虚构，如有雷同，实属不幸

在 Long long ago，有个叫 CanTon City 的城市。故事的主角，叫 Mickey，他住在离 CanTon City 30 公里远的 FoSame City。这是一个平凡的上班日，拥挤的地铁车厢里，我们的主角 Mickey 站立着，左右两边和背面都被人顶得严实。耳边传来的不是 TikTok 剧场的声音，就是旁边一群貌似退休者在兴奋地讨论下个景点去哪里，还有讨论朋友圈发的那朵木棉花没对好焦，大概是镜头买了旧款，光圈不足……偶尔还可以嗅到一些不知从哪儿来的气味。

借一次家庭局域网互联探索 - 谈谈互联网原义

labile.zhu@gmail.com (Mark Zhu) — Sun, 10 Mar 2024 01:12:15 +0800

图：广州艺术博物馆顶。拍摄于 2024年 2 月

引

对于大牛，这段内容有点哆嗦唠叨，毕竟读者想看的或者就是个配网方法，而作者想写的竟然是 Internet 历史，不喜可跳过。

Linux 下巨量窗口快速查找切换工具 Rofi —— 键盘总比眼睛快

labile.zhu@gmail.com (Mark Zhu) — Sat, 07 Oct 2023 23:12:15 +0800

图源：How to organize your Windows desktop

引

窗口切换是程序员的高频操作，而在今天大屏和巨量窗口环境中，眼和手都不堪重负。如何让心流不被找窗口打断？如果有个工具，只需要输入窗口名关键字就可以完成切换，该多好。

误落尘网中，一去三十年

labile.zhu@gmail.com (Mark Zhu) — Fri, 29 Sep 2023 10:00:00 +0800

从 2025 年6月底失业到现在(2025 年 11 月)，大概 5 个月的时间，经历了不少的事情，一直想记录下来; 但又苦于没想出什么可以提炼出来的感悟，所以一直都没有开始写。毕竟，写一篇吐苦水式的伤痕文学大概没多少人想看，自己写着也乏味。

写在第 20 多次面试后

labile.zhu@gmail.com (Mark Zhu) — Fri, 29 Sep 2023 10:00:00 +0800

上个月完成了一个职位的最后一轮面试，一周过去，悄无声息。暗自数了一下，大概已经是失业后的第 20 多次面试了。如何表达现在的感受呢？是绝望吗？好像不至于。是失望吗？的确有些。或许，是时候回顾经历，修正一下方向和方法了。

eBPF 求证坊间传闻：Java GC 日志可导致整个 JVM 服务卡顿？

labile.zhu@gmail.com (Mark Zhu) — Sat, 23 Sep 2023 03:12:15 +0800

[TOC]

概述

实现世界的 Java 应用，都会记录 GC 日志。但不是所有人都知道小小的日志可能导致整个 JVM 服务卡顿。本文尝试用 eBPF 等分析方法，去证明具体环境下，问题的存在与否。

eBPF 求证坊间传闻：mmap + Java Safepoint 可导致整个 JVM 服务卡顿？

labile.zhu@gmail.com (Mark Zhu) — Sat, 23 Sep 2023 03:12:15 +0800

[TOC]

概述

Java 支持好几种文件读取方法，本文要说的是小众的 mmap(MappedByteBuffer) 以及它与 Safepoint、JVM 服务卡顿之间的关系。本文尝试用 eBPF 等分析方法，去证明具体环境下，问题的存在与否。

Self-hosting 个人在线记事本 - Joplin

labile.zhu@gmail.com (Mark Zhu) — Wed, 09 Aug 2023 23:12:15 +0800

引

现代生活，大部分人都有信息过载的烦恼。光是家庭事务、生活、工作的信息量就已经爆炸了。程序员群体更是要持续学习充电，信息量更大。好记性不如烂笔头，那么如何记才可以最大化记事的价值？电子化的记事是一个选项，只要手机在身，就可以方便记录与查阅。还可以多设备同步备份和离线查阅。

准 Self-hosting 的个人在线书架 - Zotero

labile.zhu@gmail.com (Mark Zhu) — Wed, 02 Aug 2023 23:12:15 +0800

引

只要您还想在程序员道路上发展，那么长期的系统式的学习是少不了的。碎片时代，知识的学习渠道也在短平快化。似乎，没什么东西是一个 ChatGPT + 搜索解决不了的。但硬币总有两面，如果每个人都只停留在 “知道” 碎片知识的阶段，而你可以深入和融会贯通知识，并消化思考，整合。最少有以下好处：

分析 Java 应用在 Istio 下的 warm up

labile.zhu@gmail.com (Mark Zhu) — Sun, 09 Jul 2023 03:12:15 +0800

分析 Java 应用在 Istio 下的 warm up

故事的开始

在很久很久前的，有个测试找到一个开发，说 k8s 下 HPA(自动伸缩) 新启动的 pod 的 api latency 特别高：

需要注意，上图是在 Java 服务提供者自身观察到的 latency，即观察点是服务的 server 端或说 upstream 。有同学会问，这个重要吗？ api latency 就是 api latency 了，还要管是什么观察点的观察结果？

Old man in a hurry

labile.zhu@gmail.com (Mark Zhu) — Sun, 23 Apr 2023 10:00:00 +0800

昨天，结束了一个长达 3 个月，5 轮的岗位面试。这是场跨国的面试，2 轮中国人 3 轮印度人。一开始说是 4 轮就有结果，但就在算是通过第 4 轮总监面试后，结果是总监换人，要加一轮。而希望还是在最后加场的那一轮熄灭了。这也算是我大半年找工路上最接近岸边的一次了。

基于 libbpf 的 TCP 连接延迟监视工具 tcpconnlat 分析 - eBPF基础知识 Part5

labile.zhu@gmail.com (Mark Zhu) — Wed, 12 Apr 2023 03:12:15 +0800

基于 libbpf 的 TCP 连接延迟监视工具 tcpconnlat 分析 - eBPF基础知识 Part5

《eBPF基础知识》系列简介：

《eBPF基础知识》系列目标是整理一下 BPF 相关的基础知识。主要聚焦程序与内核互动接口部分。文章使用了 libbpf，但如果你不直接使用 libbpf，看本系列还是有一定意义的，因为它聚焦于程序与内核互动接口部分，而非 libbpf 封装本身。而所有 bpf 开发框架，都要以相似的方式跟内核互动。甚至框架本身就是基于 libbpf。哪怕是 golang/rust/python/BCC/bpftrace。

经典 libbpf 范例: uprobe 分析 - eBPF基础知识 Part4

labile.zhu@gmail.com (Mark Zhu) — Mon, 03 Apr 2023 03:12:15 +0800

经典 libbpf 范例: uprobe 分析 - eBPF基础知识 Part4

《eBPF基础知识》系列简介：

《eBPF基础知识》系列目标是整理一下 BPF 相关的基础知识。主要聚焦程序与内核互动接口部分。文章使用了 libbpf，但如果你不直接使用 libbpf，看本系列还是有一定意义的，因为它聚焦于程序与内核互动接口部分，而非 libbpf 封装本身。而所有 bpf 开发框架，都要以相似的方式跟内核互动。甚至框架本身就是基于 libbpf。哪怕是 golang/rust/python/BCC/bpftrace。

经典 libbpf 范例: bootstrap 分析 - eBPF基础知识 Part3

labile.zhu@gmail.com (Mark Zhu) — Sat, 25 Mar 2023 23:12:15 +0800

经典 libbpf 范例: bootstrap 分析 - eBPF基础知识 Part3

《eBPF基础知识》系列简介：

《eBPF基础知识》系列目标是整理一下 BPF 相关的基础知识。主要聚焦程序与内核互动接口部分。文章使用了 libbpf，但如果你不直接使用 libbpf，看本系列还是有一定意义的，因为它聚焦于程序与内核互动接口部分，而非 libbpf 封装本身。而所有 bpf 开发框架，都要以相似的方式跟内核互动。甚至框架本身就是基于 libbpf。哪怕是 golang/rust/python/BCC/bpftrace。

Linus 自传 [Just for FUN]读后感 - Part2 从一个书呆子（Nerd）的诞生，扯到现代教育

labile.zhu@gmail.com (Mark Zhu) — Fri, 17 Mar 2023 03:12:15 +0800

图片来源：www.vic-20.it

本文包括 Linus 自传 [Just for FUN 读书笔记] —— 一个书呆子（Nerd）的诞生部分的读后感。讲述了 Linus 如何与计算机结缘。观察Linus 幼年时，对比现代科技环境与社会文化环境后的一些感想。也聊聊现代教育鸡娃的事实。作为一个程序员，同时也是一个小学生的家长，我的浅见。

BPF 系统接口与 libbpf 示例分析 - eBPF基础知识 Part2

labile.zhu@gmail.com (Mark Zhu) — Sat, 11 Mar 2023 23:12:15 +0800

BPF 系统接口与 libbpf minimal 示例分析 - eBPF基础知识

如果你学习 eBPF。那么你不久就会发现，几乎所有 eBPF 的架构，包括 BCC/bpftrace 在内，都在用户态使用了 libbpf 这个 helper lib。

Linus 自传 [Just for FUN]读后感 - Part1 前言

labile.zhu@gmail.com (Mark Zhu) — Fri, 10 Mar 2023 03:12:15 +0800

最近有幸读到 Linux 发起者 Linus 主笔的 [Just for FUN – THE STORY OF AN ACCIDENTAL REVOLUTIONARY] 一书。比较有趣，怕日后忘记。于是写本文以记录。

书评

豆瓣读书中有本书的评价。

本书对作者的评价是：

有些人天生就有能力领导数百万人。另外有的人天生就是要编写改变世界的软件。而同时做到了这两点的只有一个人：Linus Torvalds。

ELF 格式简述 - eBPF基础知识 Part1

labile.zhu@gmail.com (Mark Zhu) — Sat, 04 Mar 2023 23:12:15 +0800

本文摘自我的《Mark’s DevOps 雜碎》中的《ELF 格式简述》。如图片不清，可转回原处。

引

为何要研究 ELF 格式？因为想深入点学习 eBPF ，充分利用它的特性，而非只利用它的名声，ELF 格式是跳不过的。

实时跟踪内核 TCP 连接失败与重试 - 基于 BPF

labile.zhu@gmail.com (Mark Zhu) — Fri, 17 Feb 2023 23:12:15 +0800

引

生产环境的问题，按出现频率，大体可以分为两类：

高频问题
低频问题
- 周期性低频问题
- 无周期随机发生问题
  - 单例发生
  - 多例发生

一般，遇到 无周期随机发生问题 且 单例发生 的情况，是最难定位问题根源的。

从《Why I Left Facebook》扯到蘇東坡《卜算子》

labile.zhu@gmail.com (Mark Zhu) — Sun, 30 Oct 2022 23:12:15 +0800

从《Why I Left Facebook》扯到蘇東坡《卜算子》

前段时间，由于要研究一个 TCP 接收缓冲区大小配置的问题，搜索到了一编 Blog： A TCP Timeout Investigation。感觉 Blog 主是个现世小众的技术较真之人。于是浏览了他的其它文章，看到一编： Why I Left Facebook。感触良多，故翻译之。

容器化 TCP Socket 缓存、接收窗口参数

labile.zhu@gmail.com (Mark Zhu) — Sun, 02 Oct 2022 23:22:15 +0800

最近需要支持一个单 POD 的 TCP 连接数上 10k 的基础服务(Cassandra)的容器化。需要对其使用的资源（特别是TCP缓存内存），以及对相邻 Pod（同一 worker node 上运行的）影响（即容器隔离情况），等进行预估。故写本文，以备忘。希望对读者也有一定参考价值，毕竟做技术要较真，要么有时间和能力就自己看内核源码，如果不能，要看文档和文章的话，只能货比三家才靠谱。

可能是最完整的 TCP 连接健康指标工具 ss 的说明

labile.zhu@gmail.com (Mark Zhu) — Sat, 01 Oct 2022 01:12:15 +0800

写在前面

我不是网络专家，只是在经历了多年的生产和测试环境网络问题排查后，不想再得过且过，于是记录下所学到的知识。由于对 TCP 栈的实现了解有限，所以内容仅作参考。

持续学习和关心个人资讯的IT人，为何考虑学点 Self-hosting

labile.zhu@gmail.com (Mark Zhu) — Sat, 02 Jul 2022 23:12:15 +0800

图：pad 上使用运行于我树莓派上的 vscode 来写 blog

引

作为一个社会人，生活在不确定性的环境中，我们都注重个人财产的把控。但没多少人认真考虑过个人拥有的资讯的把控。如果你完全相信大厂们如何对待你的聊天记录，相册……且信它们永远保密且保持运营，那么……。否则信息保存和备份在自己手中，才是最可把控的。另外，作为一个爱学习和折腾的程序员，如果没有自己自主的实验环境，知识管理环境，是被动和受限的。这两个问题，“自托管(Self-hosting)” 是解决选项之一。

谁动了我的 CPU 频率 —— CPU 性能之迷 Part 2

labile.zhu@gmail.com (Mark Zhu) — Wed, 29 Jun 2022 23:12:15 +0800

为何有本文

很多人知道 CPU 频率会影响 CPU 性能，也知道频率会动态变化，且知道 Linux 有 performance/powersave 两种频率控制策略。但很少人知道背后的软件原理，更少人知道如何调优策略，和监控实际 CPU 频率。本文想聊聊这些。

被误解的CPU利用率、超线程、动态调频 —— CPU 性能之迷 Part 1

labile.zhu@gmail.com (Mark Zhu) — Sun, 26 Jun 2022 23:12:15 +0800

引

性能测试、压力测试、业务系统性能容量评估。这 3 件事，可以认为是大部分程序员/软件开发从业者都需要面对的事。但，奇怪的是，很多人花了很多时间去做完成这些工作任务，却很少有人有计划地、系统地花时间去学习和研究相关的知识。

FOSS(Free and open-source software)爱好者，如何发展职业生涯 Part 1

labile.zhu@gmail.com (Mark Zhu) — Sun, 12 Jun 2022 23:12:15 +0800

故事

这周不聊技术。想聊聊诗和远方，毕竟现实无法改变时，需要诗和远方补救一下。我工作于一家有情怀的公司，在 1890 年就开始为中国服务了。我因生存和工作语言学习需要，坚持三年一直在听英语技术类节目，其中有一个我是比较欣赏的：

兜兜转转——Linux/容器的权限(Capabilities)控制模型

labile.zhu@gmail.com (Mark Zhu) — Sun, 05 Jun 2022 16:12:15 +0900

引

如果有人问我，程序员做的事，最没实际价值，最容易让用户不爽的是什么?

回答: —— 安全

如果有人问我，程序员做的事，最必要的是什么?

回答: —— 安全

如果有人问我，安全核心问题是什么?

上帝和 Istio 打架时，程序员如何自我救赎？ —— 记一次开发 Envoy WASM Filter 修正任性的 HTTP Header

labile.zhu@gmail.com (Mark Zhu) — Sat, 28 May 2022 23:12:15 +0800

引

故事发生在公元 2022 年的夏天。上帝（化名）在上线流量测试中，发现在未引入 Istio 前正常 HTTP 200 的请求，引入 Istio Gateway 后变为 HTTP 400 了。而出现问题的流量均带有不合 HTTP 规范的 HTTP Header。如冒号前多了个空格：

BPF 拓荒者 —— Brendan Gregg 与 Netflix 的故事

labile.zhu@gmail.com (Mark Zhu) — Mon, 09 May 2022 23:12:15 +0800

译者写在开头

在我的上一篇文章：Brendan@Intel.com 中，我翻译了他与 Intel 的故事。这次，我们时光倒流一下，说说前传：Brendan Gregg 与 Netflix 的故事。

我写博客的出发点是想把自己所学所思的东西都记录下来。纯理性技术是一方面，对现世的思考也是一方面。本来想做个平凡的人，最近却一不小心变为平烦人（平庸且很多烦恼的人）。没法，生活总要继续，深度的技术学习和写作只能慢一慢。但这不影响我对技术社区动态的好奇心。由其是 yyds - Brendan Gregg 的动态。

Brendan@Intel.com

labile.zhu@gmail.com (Mark Zhu) — Thu, 05 May 2022 23:12:15 +0800

译者序

金庸笔下的《鹿鼎记》有：

平生不识陈近南，便称英雄也枉然

现代的认真搞技术的后端程序员，应该也有一句：

平生不识 Brendan Gregg，便呆 BAT 也 SoSo

从 2016 年开始，做一个 JVM 调优开始，就关注 Brendan Gregg 的 Blog 和书。前年开始看他的 [System Performance Enterprise and the Cloud] 和 [BPF Performance Tools]。由于学识浅薄，一开始读不得正解，也不明真相。直到最近一年，花时间去恶补各种基础知识，结合一些工作实践，才茅塞顿开。不得不说，好的技术作品不是读一次就能懂的。可能在技术路上，随着经验和知识的积累，每次阅读都有不同的收获。这就像看《西游记》一样，人生的每个阶段看，都是不一样的感悟。

网络包的内核漂流记 Part 2 - BPF 跟踪 epoll/Envoy 事件与调度

labile.zhu@gmail.com (Mark Zhu) — Wed, 04 May 2022 16:12:15 +0900

注，原文来自 https://blog.mygraphql.com/zh/notes/low-tec/network/bpf-trace-net-stack/ 。如你看到的转载图片不清，请回到原文。

为何

现代人好像都很忙，忙着跟遥远的人社交，却很容易忽视眼前的人事，更别提那些不直接体现出价值的基础认知了。要花时间认真看一编文章前，都要问一个问题：WHY。这才会有 TLDR; 的出现。终身学习是个口号，但也仅仅是个口号。看看身边的那些放満书的人，有几个真去阅读？社会人大都有现实地认为，持续学习只应该发生在考试前。在社会卷时，就好好做个社会人。

网络包的内核漂流记 Part 1 - 图解网络包接收流程

labile.zhu@gmail.com (Mark Zhu) — Mon, 18 Apr 2022 16:12:15 +0900

注，原文来自 https://blog.mygraphql.com/zh/notes/low-tec/network/kernel-net-stack/ 。如你看到的转载图片不清，请回到原文。

《网络包的内核漂流记》系列介绍

大家知道，网络数据来源于网线、光纤、无线电波上的比特(bit)，然后到网卡，到内核，最后到应用进程 socket。事情好像很简单。但如果是 SRE/DevOps 或是 Performance Engineer ，需要做细致的监控和优化时，这些显然是不够的。引用本文主要参考作者的原话：

gdb 调试 istio proxy (envoy)

labile.zhu@gmail.com (Mark Zhu) — Thu, 10 Mar 2022 16:12:15 +0900

出于各种原因，需要 debug istio-proxy (envoy)，记录一下步骤，希望地球上的有缘人有用。

编译生成执行文件

下载 code

我用的是 release-1.11.1-patch。

git clone https://github.com/istio/proxy.git
cd proxy
export PROXY_HOME=`pwd`
git checkout -b release-1.11.1-patch origin/release-1.11.1-patch

容器中编译

编译大项目，是个环境相关的工作。对于我这小白，还是直接用 Istio 官方 CI 的编译用的容器。好处是：

2022年书目推荐 —— 来自 goto podcast

labile.zhu@gmail.com (Mark Zhu) — Sun, 26 Dec 2021 23:12:15 +0900

前言

不知不觉，口罩一戴就是两年。快到年底了，是时候翻开年初写的总结和计划，看看那个梦想中的自我和实现中的自我的距离了。如果看完这个距离，还是对来年有憧憬，那么我们来看看有什么可以改变的。

把大象装入货柜里——Java容器内存拆解

labile.zhu@gmail.com (Mark Zhu) — Wed, 06 Oct 2021 08:47:11 +0100

[图片源：https://bell-sw.com/announcements/2020/10/28/JVM-in-Linux-containers-surviving-the-isolation/]

码农幽默英语排行榜 S1E1

labile.zhu@gmail.com (Mark Zhu) — Sun, 03 Oct 2021 15:12:15 +0900

缘起

还记得 15 年前，外企还是相当部分程序员的向往。而 2021 了，情况有了相当大的变化。开源界也有相当多的国人开源项目和文档了。所以很多新码农开始提出一个问题：都 2021 了，英文还是码农的基本素养吗？

存储老爷车上云 —— iSCSI简介

labile.zhu@gmail.com (Mark Zhu) — Sun, 22 Aug 2021 08:47:11 +0100

缘由

我自认不是一个特别能鸡血自己去学习那些不直接应用到的知识的人。所以到现在还是没能深入 JVM 和红黑树，更不用说 Paxos/Raft 了。不过，如果有解决切实问题需要时，还算能快速入门吧。

Benchmark Tools

labile.zhu@gmail.com (Mark Zhu) — Thu, 13 May 2021 15:12:15 +0900

CPU Benchmark

The SysBench system benchmark suite has a simple CPU benchmark tool that calculates prime numbers. For example:

# sysbench --num-threads=8 --test=cpu --cpu-max-prime=100000 run
sysbench 0.4.12:  multi-threaded system evaluation benchmark

Running the test with following options:
Number of threads: 8

Doing CPU performance benchmark

Threads started!
Done.

Maximum prime number checked in CPU test: 100000

Test execution summary:
    total time:                          30.4125s
    total number of events:              10000
    total time taken by event execution: 243.2310
    per-request statistics:
         min:                                 24.31ms
         avg:                                 24.32ms
         max:                                 32.44ms
         approx.  95 percentile:              24.32ms

Threads fairness:
    events (avg/stddev):           1250.0000/1.22
    execution time (avg/stddev):   30.4039/0.01

This executed eight threads, with a maximum prime number of 100,000. The runtime was 30.4 s, which can be used for comparison with the results from other systems or configurations (assuming many things, such as that identical compiler options were used to build the software; see Chapter 12, Benchmarking).

tty

labile.zhu@gmail.com (Mark Zhu) — Sat, 08 May 2021 15:12:15 +0900

Jobs

SIGHUP
- 默认动作：Terminate
- 可能动作：Terminate, Ignore, Function call
当检测到 hangup 时，UART 驱动会向整个 session 发送 SIGHUP 信号。正常情况下，这会 kill 掉所有进程。某些程序，例如 nohup(1) 和 screen(1)，会从他们的 session（和 TTY）中 detach 出来，因此这些程序的子进程无法关注到 hangup 事件。

Awesome load test tools

labile.zhu@gmail.com (Mark Zhu) — Thu, 06 May 2021 15:12:15 +0900

Java 内置 Class Loader

labile.zhu@gmail.com (Mark Zhu) — Thu, 01 Apr 2021 15:12:15 +0900

内置 Classloader

Class loaders load classes and resources present on their respective classpath:

System or application class loaders load classes from the application classpath
Extension class loaders search on the Extension classpath (JRE/lib/ext)
Bootstrap class loader looks on the Bootstrap classpath (JRE/lib/rt.jar)

We can customize the default class loading behavior as well. We can explicitly specify the class loader while loading a class dynamically.

However, we should note that if we load the same class from different types of class loaders, these will be seen as different resources by the JVM.

Opentelemetry Java Agent 浅度解构

labile.zhu@gmail.com (Mark Zhu) — Thu, 01 Apr 2021 15:12:15 +0900

https://github.com/open-telemetry/opentelemetry-java-instrumentation/blob/main/docs/contributing/javaagent-jar-components.md

Conf

Creating spans around methods with otel.instrumentation.methods.include

Ref: https://github.com/open-telemetry/opentelemetry-java-instrumentation/blob/main/docs/manual-instrumentation.md

Format is "java -Dotel.instrumentation.methods.include=my.package.MyClass1[method1,method2];my.package.MyClass2[method3]"

Classloader

[arthas@16908]$ classloader -t
+-BootstrapClassLoader                                                                                                 
+-io.opentelemetry.javaagent.bootstrap.AgentClassLoader@379619aa                                                       
+-sun.misc.Launcher$ExtClassLoader@41fa769c                                                                            
  +-com.taobao.arthas.agent.ArthasClassloader@3697b340                                                                 
  +-sun.misc.Launcher$AppClassLoader@18b4aac2                                                                          
    +-java.net.URLClassLoader@71b2d611                                                                                 
    +-java.net.URLClassLoader@69cd1085                                                                                 
    | +-WebAppClassLoader=266661735@fe4ef67                                                                            
    | | +-com.mycom.sig.foundation.servicediscovery.ExtendedClassLoader@573f7aae                                    
    | +-WebAppClassLoader=Server Initiated@1ccb04b3                                                                    
    | | +-com.mycom.sig.foundation.servicediscovery.ExtendedClassLoader@4b3b9a06                                    
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@73cb9ccb                                                                
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@7c380e94                                                                
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@69ec5d1f                                                                
    | +-WebAppClassLoader=OAuth Server@10d98940                                                                        
    | | +-com.mycom.ece.common.svcfinder.ExtendedClassLoader@3528968e                                               
    | | +-com.mycom.sig.foundation.servicediscovery.ExtendedClassLoader@2919aff3                                    
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@1b0e6bac                                                                
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@2f12d8d1                                                                
    | | +-jnr.ffi.provider.jffi.AsmClassLoader@73123f21                                                                
    | +-WebAppClassLoader=1133988396@43974a2c                                                                          
    |   +-com.mycom.sig.foundation.servicediscovery.ExtendedClassLoader@39d87c5f                                    
    +-java.net.URLClassLoader@1b4c457c                                                                                 
    +-java.net.URLClassLoader@3a477cf5                                                                                 
Affect(row-cnt:24) cost in 31 ms.

[arthas@16908]$ classloader
 name                                                              numberOfInstances  loadedCountTotal                 
 org.eclipse.jetty.webapp.WebAppClassLoader                        4                  24687                            
 BootstrapClassLoader                                              1                  4341                             
 io.opentelemetry.javaagent.bootstrap.AgentClassLoader             1                  3502                             
 com.taobao.arthas.agent.ArthasClassloader                         1                  1430                             
 java.net.URLClassLoader                                           4                  1252                             
 sun.misc.Launcher$AppClassLoader                                  1                  570                              
 sun.reflect.DelegatingClassLoader                                 378                378                              
 sun.misc.Launcher$ExtClassLoader                                  1                  56                               
 jnr.ffi.provider.jffi.AsmClassLoader                              6                  8                                
 com.mycom.sig.foundation.servicediscovery.ExtendedClassLoader  4                  6                                
 com.mycom.ece.common.svcfinder.ExtendedClassLoader             1                  1

[arthas@16908]$ jad -c 1ccb04b3 com.mycom.jee.abc.client.service.payload.ClientResponse setProjectName

ClassLoader:                                                                                                           
+-WebAppClassLoader=Server Initiated@1ccb04b3                                                                          
  +-java.net.URLClassLoader@69cd1085                                                                                   
    +-sun.misc.Launcher$AppClassLoader@18b4aac2                                                                        
      +-sun.misc.Launcher$ExtClassLoader@41fa769c                                                                      

Location:                                                                                                              
/var/lib/modules/DP-OAuth-Traffic/tmp/server-initiated-aa-war.war/webapp/WEB-INF/lib/clients-api-3.19.5.jar            

            public void setProjectName(String string) {                                                                
                StackTraceElement[] stackTraceElementArray;
/*729*/         Context context = null;                                                                                
                Scope scope = null;               
                try {                                                                                                  
                    stackTraceElementArray = Thread.currentThread().getStackTrace();                                                                                                                                                          
                    context = MethodTracer.tracer().startSpan(ClientResponse.class.getMethod("setProjectName", String.class), stackTraceElementArray, new Object[]{string});
                    if (context != null) {
                        scope = context.makeCurrent();
                    }
                }
                catch (Throwable throwable) {
                    try {
                        LoggerFactory.getLogger(ExceptionLogger.class).debug("Failed to handle exception in instrumentation for com.mycom.jee.abc.client.service.payload.ClientResponse on sun.misc.Launcher$AppClassLoader@18b4aac2", thr$
wable);
                    }
                    catch (Throwable throwable2) {
                    }
                }
                stackTraceElementArray = this;
                String projectName = string;
                try {
                    this.projectName = projectName;
                    stackTraceElementArray = null;
                }
                catch (Throwable throwable) {
                    // empty catch block
                }
                try {
                    if (context != null) {
                        scope.close();
                        if (stackTraceElementArray != null) {
                            MethodTracer.tracer().endExceptionally(context, (Throwable)stackTraceElementArray);
                        } else {
                            Span span = Span.fromContext(context);
                            span.setAttribute(MethodTracer.JAVA_METHOD_RETURN.getKey(), null == null ? "null" : ((Object)null).toString());
                            MethodTracer.tracer().end(context);
                        }
                    }
                }
                catch (Throwable throwable) {
                    try {
                        LoggerFactory.getLogger(ExceptionLogger.class).debug("Failed to handle exception in instrumentation for com.mycom.jee.abc.client.service.payload.ClientResponse on sun.misc.Launcher$AppClassLoader@18b4aac2", thro
wable);
                    }
                    catch (Throwable throwable3) {
                    }
                }
                if (stackTraceElementArray != null) {
                    throw stackTraceElementArray;
                }
            }

[arthas@16908]$ sc io.opentelemetry.javaagent.instrumentation.methods.MethodInstrumentationModule
io.opentelemetry.javaagent.instrumentation.methods.MethodInstrumentationModule
Affect(row-cnt:1) cost in 54 ms.
[arthas@16908]$ sc -d io.opentelemetry.javaagent.instrumentation.methods.MethodInstrumentationModule
 class-info        io.opentelemetry.javaagent.instrumentation.methods.MethodInstrumentationModule                      
 code-source       /                                                                                                   
 name              io.opentelemetry.javaagent.instrumentation.methods.MethodInstrumentationModule                      
 isInterface       false                                                                                               
 isAnnotation      false                                                                                               
 isEnum            false                                                                                               
 isAnonymousClass  false                                                                                               
 isArray           false                                                                                               
 isLocalClass      false                                                                                               
 isMemberClass     false                                                                                               
 isPrimitive       false                                                                                               
 isSynthetic       false                                                                                               
 simple-name       MethodInstrumentationModule                                                                         
 modifier          public                                                                                              
 annotation                                                                                                            
 interfaces                                                                                                            
 super-class       +-io.opentelemetry.javaagent.tooling.InstrumentationModule                                          
                     +-java.lang.Object                                                                                
 class-loader      +-io.opentelemetry.javaagent.bootstrap.AgentClassLoader@379619aa                                    
 classLoaderHash   379619aa

[arthas@16908]$ sc -d io.opentelemetry.javaagent.instrumentation.methods.MethodTracer
 class-info        io.opentelemetry.javaagent.instrumentation.methods.MethodTracer                                     
 code-source                                                                                                           
 name              io.opentelemetry.javaagent.instrumentation.methods.MethodTracer                                     
 isInterface       false                                                                                               
 isAnnotation      false                                                                                               
 isEnum            false                                                                                               
 isAnonymousClass  false                                                                                               
 isArray           false                                                                                               
 isLocalClass      false                                                                                               
 isMemberClass     false                                                                                               
 isPrimitive       false                                                                                               
 isSynthetic       false                                                                                               
 simple-name       MethodTracer                                                                                        
 modifier          public                                                                                              
 annotation                                                                                                            
 interfaces                                                                                                            
 super-class       +-io.opentelemetry.javaagent.shaded.instrumentation.api.tracer.BaseTracer                           
                     +-java.lang.Object                                                                                
 class-loader      +-WebAppClassLoader=Server Initiated@1ccb04b3                                                       
                     +-java.net.URLClassLoader@69cd1085                                                                
                       +-sun.misc.Launcher$AppClassLoader@18b4aac2                                                     
                         +-sun.misc.Launcher$ExtClassLoader@41fa769c                                                   
 classLoaderHash   1ccb04b3                                                                                            

 class-info        io.opentelemetry.javaagent.instrumentation.methods.MethodTracer                                     
 code-source                                                                                                           
 name              io.opentelemetry.javaagent.instrumentation.methods.MethodTracer                                     
 isInterface       false                                                                                               
 isAnnotation      false                                                                                               
 isEnum            false                                                                                               
 isAnonymousClass  false                                                                                               
 isArray           false                                                                                               
 isLocalClass      false                                                                                               
 isMemberClass     false                                                                                               
 isPrimitive       false                                                                                               
 isSynthetic       false                                                                                               
 simple-name       MethodTracer                                                                                        
 modifier          public                                                                                              
 annotation                                                                                                            
 interfaces                                                                                                            
 super-class       +-io.opentelemetry.javaagent.shaded.instrumentation.api.tracer.BaseTracer                           
                     +-java.lang.Object                                                                                
 class-loader      +-WebAppClassLoader=OAuth Server@10d98940                                                           
                     +-java.net.URLClassLoader@69cd1085                                                                
                       +-sun.misc.Launcher$AppClassLoader@18b4aac2                                                     
                         +-sun.misc.Launcher$ExtClassLoader@41fa769c                                                   
 classLoaderHash   10d98940

shaded

io.opentelemetry.instrumentation.api.config.Config
->
sc -d io.opentelemetry.javaagent.shaded.instrumentation.api.config.Config

[arthas@16908]$ sc -d io.opentelemetry.javaagent.shaded.instrumentation.api.config.Config                                                                                            

 class-info        io.opentelemetry.javaagent.shaded.instrumentation.api.config.Config                                 
 code-source                                                                                                           
 name              io.opentelemetry.javaagent.shaded.instrumentation.api.config.Config                                 
 isInterface       false                                                                                               
 isAnnotation      false                                                                                               
 isEnum            false                                                                                               
 isAnonymousClass  false                                                                                               
 isArray           false                                                                                               
 isLocalClass      false                                                                                               
 isMemberClass     false                                                                                               
 isPrimitive       false                                                                                               
 isSynthetic       false                                                                                               
 simple-name       Config                                                                                              
 modifier          abstract,public                                                                                     
 annotation                                                                                                            
 interfaces                                                                                                            
 super-class       +-java.lang.Object                                                                                  
 class-loader                                                                                                          
 classLoaderHash   null

K8s Custom Resources(CR)

labile.zhu@gmail.com (Mark Zhu) — Sat, 27 Mar 2021 15:12:15 +0900

Custom Resource 的入口

请求是这样分发到 api 扩展点的：

例如我们有（Custom Resource）CR

apiVersion: cnat.programming-kubernetes.info/v1alpha1
kind: At
metadata:
  name: example-at
spec:
  schedule: "2019-07-03T02:00:00Z"
status:
  phase: "pending"

相应的 CustomResourceDefinition (CRD) 会是这样：

K8s API 核心对象 —— client-go

labile.zhu@gmail.com (Mark Zhu) — Fri, 26 Mar 2021 15:12:15 +0900

API 入口

Client Sets

接收变更通知和缓存（Informers and Caching）

Client Sets可以 watch 变更，但一般我们用更高级的 Informers，因为它有缓存、索引等功能。

Lister ：被应用调用，返回缓存中的数据列表
Informer：监听器

Informer 有两个功能

Helm base

labile.zhu@gmail.com (Mark Zhu) — Thu, 25 Mar 2021 15:12:15 +0900

Concept

umbrella chart

you can also create a chart with dependencies to other charts (a.k.a. umbrella chart) which are completely external using the requirements.yaml file.

versioning

Simple 1-1 versioning

Chart versus application versioning

参考

https://codefresh.io/docs/docs/new-helm/helm-best-practices/

Kubernetes extends concept

labile.zhu@gmail.com (Mark Zhu) — Thu, 25 Mar 2021 15:12:15 +0900

前言

最近由于工作需要，重新系统回顾 Kubernetes 的编程。发现《Programming Kubernetes》这书写得比较系统。于是边学，边记录一些重点。

Controller

Controller Loop

Kubernetes 自动扩缩容

labile.zhu@gmail.com (Mark Zhu) — Tue, 23 Mar 2021 15:12:15 +0900

本文状态：草稿

配置例子

apiVersion: autoscaling/v2beta2
kind: HorizontalPodAutoscaler
metadata:
  name: php-apache
spec:
  scaleTargetRef:
    apiVersion: apps/v1
    kind: Deployment
    name: php-apache
  minReplicas: 1
  maxReplicas: 10
  metrics:
  - type: Resource
    resource:
      name: cpu
      target:
        type: Utilization
        averageUtilization: 50

算法

desiredReplicas = ceil[currentReplicas * ( currentMetricValue / desiredMetricValue )]

currentMetricValue 为相关 pod 的 metric 平均数。

内核同步原语

labile.zhu@gmail.com (Mark Zhu) — Sun, 21 Mar 2021 15:12:15 +0900

什么是同步原语

共享内存，多进程/线程的运行期设计模式已成主流的今天，你有好奇一下，进程/线程间的怎么同步的吗？大部分人知道，我们用的开发语言，或类库函数库，已经提供了看起来很漂亮的封装。然而在漂亮的面子工程后面，大部分归根到底是要内核或/和 CPU 硬件去完成这些同步的。而反过来，只要我们理解了内部原理，你就可以快速理解那些漂亮的面子工程，和他们可能的性能问题，进而选择一个适合你的“面子工程”。而这些内部原理，就是同步原语。

Istio Canary（金丝雀）上线

labile.zhu@gmail.com (Mark Zhu) — Sat, 20 Mar 2021 15:12:15 +0900

按比例分配分配新旧版本流量

VirtualService:

apiVersion: networking.istio.io/v1alpha3
kind: VirtualService
metadata:
  name: reviews
spec:
  hosts:
    - reviews
  http:
  - route:
    - destination:
        host: reviews
        subset: v1
      weight: 75
    - destination:
        host: reviews
        subset: v2
      weight: 25

DestinationRule :

apiVersion: networking.istio.io/v1alpha3
kind: DestinationRule
metadata:
  name: bookinfo-ratings
spec:
  host: reviews
  trafficPolicy:
    loadBalancer:
      simple: LEAST_CONN
  subsets:
  - name: v1
    labels:
      version: v1
    trafficPolicy:
      loadBalancer:
        simple: ROUND_ROBIN
  - name: v2
    labels:
      version: v2
    trafficPolicy:
      loadBalancer:
        simple: ROUND_ROBIN

根据请求源 pod 的 label 路由

使用 sourceLabels 规则，可以根据源 pod 的 label 进行路由。这里用了 version 这个 label。即根据pod的应用版本进行路由。
这样的路由规则实际是使用于发起调用方的 sidecar。

系统级跟踪 eBPF 工具 —— bpftrace 入门

labile.zhu@gmail.com (Mark Zhu) — Mon, 08 Mar 2021 15:12:15 +0900

bpftrace 简介

bpftrace 简单使用

查询可以跟踪的内核函数，以 sleep 为关键字

$ bpftrace -l '*open*'

tracepoint:syscalls:sys_exit_open_tree
tracepoint:syscalls:sys_enter_open
...
kprobe:vfs_open
kprobe:tcp_try_fastopen
...

跟踪所有 sys_enter_open() 系统调用

`1`	`$ bpftrace -e 'tracepoint:syscalls:sys_enter_open{ printf("%s %s\n", comm,str(args->filename)); }' \| grep vi`

然后在另外一个终端中

`1`	`$ vi /etc/hosts`

可以看到在 bpftrace 终端中输出：

Kernel - Page Frame 回收

labile.zhu@gmail.com (Mark Zhu) — Tue, 02 Mar 2021 15:12:15 +0900

From [Understanding The Linux Kernel]

Page Frame 回收

之前我们了解到，Linux 倾向用最多的内存做 Page Cache。这使我们不得不考虑如何在内存不足前回收内存。问题是，回收内存的程序本身也可能有 IO 操作，也可能需要内存。

Kernel - Pagecache

labile.zhu@gmail.com (Mark Zhu) — Fri, 26 Feb 2021 15:12:15 +0900

简介

page cache 存放的数据的类型

普通的文件
目录数据
直接读取自 block device file 的数据
已经被swap out的用户进程内存的数据（可以强制内核在page cahce中保留一些已经被swap out的数据）
归属于一些特殊 filesystem 的内存 page，如用于进程间通讯的 shm filesystem

page cache 的标识体系

page cache 中的每个 page 均归属于文件. 这个文件 — 或更精确来说，是文件的 inode 被称为 page 的owner.

Kernel - Pagecache - Core

labile.zhu@gmail.com (Mark Zhu) — Fri, 26 Feb 2021 15:12:15 +0900

address_space 数据结构

Page cahce 的核心数据结构是 addrees_space。一般来说，每个 inode （Kernel 用来存放文件元信息的内存中的数据结构，可以视为一个文件的描述信息）中包含一个 addrees_space 。

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

$ pip install md-translate

export

md-translate -s Google -S en -T zh-CN ./java-native-mem.md

Ref

https://github.com/ilyachch/md_docs-trans-app

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://shaharmike.com/cpp/vtable-part2/

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://tenzir.com/blog/production-debugging-bpftrace-uprobes/
https://shaharmike.com/cpp/vtable-part1/

#include <iostream>

class Parent {
 public:
  virtual void Foo() {}
  virtual void FooNotOverridden() {}
};

class Derived : public Parent {
 public:
  void Foo() override {}
};

int main() {
  Parent p1, p2;
  Derived d1, d2;

  std::cout << "done" << std::endl;
}

$ # compile our code with debug symbols and start debugging using gdb
$ clang++ -std=c++14 -stdlib=libc++ -g main.cpp && gdb ./a.out
...
(gdb) # ask gdb to automatically demangle C++ symbols
(gdb) set print asm-demangle on
(gdb) set print demangle on
(gdb) # set breakpoint at main
(gdb) b main
Breakpoint 1 at 0x4009ac: file main.cpp, line 15.
(gdb) run
Starting program: /home/shmike/cpp/a.out

Breakpoint 1, main () at main.cpp:15
15	  Parent p1, p2;
(gdb) # skip to next line
(gdb) n
16	  Derived d1, d2;
(gdb) # skip to next line
(gdb) n
18	  std::cout << "done" << std::endl;
(gdb) # print p1, p2, d1, d2 - we'll talk about what the output means soon
(gdb) p p1
$1 = {_vptr$Parent = 0x400bb8 <vtable for Parent+16>}
(gdb) p p2
$2 = {_vptr$Parent = 0x400bb8 <vtable for Parent+16>}
(gdb) p d1
$3 = {<Parent> = {_vptr$Parent = 0x400b50 <vtable for Derived+16>}, <No data fields>}
(gdb) p d2
$4 = {<Parent> = {_vptr$Parent = 0x400b50 <vtable for Derived+16>}, <No data fields>}

Here’s what we learned from the above:

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://netflixtechblog.com/predictive-cpu-isolation-of-containers-at-netflix-91f014d856c7

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://www.youtube.com/watch?v=spzfupads2o#fromHistory

Envoy Internals Deep Dive - Matt Klein, Lyft

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

Terminology

Cluster: a logical service with a set of endpoints that Envoy forwards requests to.
Downstream: an entity connecting to Envoy. This may be a local application (in a sidecar model) or a network node. In non-sidecar models, this is a remote client.
Endpoints: network nodes that implement a logical service. They are grouped into clusters. Endpoints in a cluster are upstream of an Envoy proxy.
Filter: a module in the connection or request processing pipeline providing some aspect of request handling. An analogy from Unix is the composition of small utilities (filters) with Unix pipes (filter chains).

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

tcmalloc，通过-define tcmalloc=disabled禁用

https://blog.gmem.cc/envoy-study-note

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://istio.cn/t/topic/299

Envoy源码分析之Dispatcher：https://developer.aliyun.com/article/659277

线程相关 Misc：

Envoy进程由一个Main Thread和多个Worker Thread 组成
每个Main和Worker包含一个eventloop，所有的处理都是由eventloop触发开始
Main负责xDS等功能，Worker负责处理连接和请求
当一个client向Envoy建立连接的时候，因为所有Worker的EventLoop都注册了listening fd(启用SO_PORTREUSE除外)，会由内核决定分配给哪个Worker
当一个下游client连接到了Envoy，在保持连接不断的情况下，会和同一个Worker进行通讯

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

HTTP/1.1 Header Casing

https://www.envoyproxy.io/docs/envoy/latest/configuration/http/http_conn_man/header_casing#config-http-conn-man-header-casing

When handling HTTP/1.1, Envoy will normalize the header keys to be all lowercase. While this is compliant with the HTTP/1.1 spec, in practice this can result in issues when migrating existing systems that might rely on specific header casing.

To support these use cases, Envoy allows configuring a formatting scheme for the headers, which will have Envoy transform the header keys during serialization.

To configure this formatting on response headers, specify the format in the http_protocol_options.
To configure this for upstream request headers, specify the formatting in http_protocol_options in the cluster’s extension_protocol_options.

Currently Envoy supports two mutually exclusive types of header key formatters:

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

config.core.v3.Http1ProtocolOptions

https://www.envoyproxy.io/docs/envoy/latest/api-v3/config/core/v3/protocol.proto#config-core-v3-http1protocoloptions

[config.core.v3.Http1ProtocolOptions proto]

{
  "allow_absolute_url": "{...}",
  "accept_http_10": "...",
  "default_host_for_http_10": "...",
  "header_key_format": "{...}",
  "enable_trailers": "...",
  "allow_chunked_length": "...",
  "override_stream_error_on_invalid_http_message": "{...}"
}

allow_absolute_url

(BoolValue) Handle HTTP requests with absolute URLs in the requests. These requests are generally sent by clients to forward/explicit proxies. This allows clients to configure envoy as their HTTP proxy. In Unix, for example, this is typically done by setting the http_proxy environment variable.

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

Enable debug log by command line

https://projectcontour.io/docs/v1.10.0/troubleshooting/envoy-debug-log/

The envoy command has a --log-level flag that can be useful for debugging. By default, it’s set to info. To change it to debug, edit the envoy DaemonSet in the projectcontour namespace and replace the --log-level info flag with --log-level debug. Setting the Envoy log level to debug can be particilarly useful for debugging TLS connection failures.

Enable debug log by API

列出 logger 名字：

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://www.envoyproxy.io/docs/envoy/latest/operations/performance

Performance¶

Envoy is architected to optimize scalability and resource utilization by running an event loop on a small number of threads. The “main” thread is responsible for control plane processing, and each “worker” thread handles a portion of the data plane processing. Envoy exposes two statistics to monitor performance of the event loops on all these threads.

Loop duration: Some amount of processing is done on each iteration of the event loop. This amount will naturally vary with changes in load. However, if one or more threads have an unusually long-tailed loop duration, it may indicate a performance issue. For example, work might not be distributed fairly across the worker threads, or there may be a long blocking operation in an extension that’s impeding progress.

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

Kernel

https://lwn.net/Articles/542629/
One of the features merged in the 3.9 development cycle was TCP and UDP support for the SO_REUSEPORT socket option; that support was implemented in a series of patches by Tom Herbert. The new socket option allows multiple sockets on the same host to bind to the same port, and is intended to improve the performance of multithreaded network server applications running on top of multicore systems.
The basic concept of SO_REUSEPORT is simple enough. Multiple servers (processes or threads) can bind to the same port if they each set the option as follows:

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://www.envoyproxy.io/docs/envoy/latest/intro/arch_overview/upstream/connection_pooling#automatic-protocol-selection

Connection pooling

For HTTP traffic, Envoy supports abstract connection pools that are layered on top of the underlying wire protocol (HTTP/1.1, HTTP/2, HTTP/3). The utilizing filter code does not need to be aware of whether the underlying protocol supports true multiplexing or not. In practice the underlying implementations have the following high level properties:

HTTP/1.1

The HTTP/1.1 connection pool acquires connections as needed to an upstream host (up to the circuit breaking limit). Requests are bound to connections as they become available, either because a connection is done processing a previous request or because a new connection is ready to receive its first request. The HTTP/1.1 connection pool does not make use of pipelining so that only a single downstream request must be reset if the upstream connection is severed.

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

TLS ALPN

Force HTTP 1.1

https://www.tetrate.io/blog/envoy-and-istio-security-releases-june-2020/

Envoy versions can mitigate those vulnerabilities by disabling HTTP2 and allowing only HTTP/1.1 by setting http_connection_manager.codec_type to “HTTP1” and removing “h2” from common_tls_context.alpn_protocols.

For Istio:

apiVersion: networking.istio.io/v1alpha3
kind: EnvoyFilter
metadata:
  name: disable-ingress-h2
  namespace: istio-system
spec:
  workloadSelector:
    labels:
      istio: ingressgateway
  configPatches:
  - applyTo: NETWORK_FILTER # http connection manager is a filter in Envoy
    match:
      context: GATEWAY
      listener:
        filterChain:
          filter:
            name: "envoy.http_connection_manager"
    patch:
      operation: MERGE
      value:
        typed_config:
          "@type": type.googleapis.com/envoy.config.filter.network.http_connection_manager.v2.HttpConnectionManager
          codec_type: HTTP1

HTTP 1.1 Upgrade header

https://www.envoyproxy.io/docs/envoy/latest/intro/arch_overview/http/upgrades#http-upgrades

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

HTTP Protocol Options

https://www.envoyproxy.io/docs/envoy/latest/api-v3/extensions/upstreams/http/v3/http_protocol_options.proto#extensions-upstreams-http-v3-httpprotocoloptions-autohttpconfig

This extension may be referenced by the qualified name envoy.upstreams.http.http_protocol_options

extensions.upstreams.http.v3.HttpProtocolOptions

HttpProtocolOptions specifies Http upstream protocol options. This object is used in typed_extension_protocol_options, keyed by the name envoy.extensions.upstreams.http.v3.HttpProtocolOptions.

This controls what protocol(s) should be used for upstream and how said protocol(s) are configured.

This replaces the prior pattern of explicit protocol configuration directly in the cluster. So a configuration like this, explicitly configuring the use of HTTP/2 upstream:

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://helm.sh/docs/topics/charts/

Chart

A Chart is a Helm package. It contains all of the resource definitions necessary to run an application, tool, or service inside of a Kubernetes cluster. Think of it like the Kubernetes equivalent of a Homebrew formula, an Apt dpkg, or a Yum RPM file.

Directory structure

wordpress/
  Chart.yaml          # A YAML file containing information about the chart
  LICENSE             # OPTIONAL: A plain text file containing the license for the chart
  README.md           # OPTIONAL: A human-readable README file
  values.yaml         # The default configuration values for this chart
  values.schema.json  # OPTIONAL: A JSON Schema for imposing a structure on the values.yaml file
  charts/             # A directory containing any charts upon which this chart depends.
  crds/               # Custom Resource Definitions
  templates/          # A directory of templates that, when combined with values,
                      # will generate valid Kubernetes manifest files.
  templates/NOTES.txt # OPTIONAL: A plain text file containing short usage notes

Pull:

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

As you edit your chart, you can validate that it is well-formed by running helm lint.

When it’s time to package the chart up for distribution, you can run the helm package command:

1
2

$ helm package deis-workflow
deis-workflow-0.1.0.tgz

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

Helm installs charts into Kubernetes, creating a new release for each installation. And to find new charts, you can search Helm chart repositories.

Helm Chart Repository

A Repository is the place where charts can be collected and shared. It’s like Perl’s CPAN archive or the Fedora Package Database, but for Kubernetes packages.

`1`	`helm repo add bitnami https://charts.bitnami.com/bitnami`

$ helm search repo bitnami
NAME                             	CHART VERSION	APP VERSION  	DESCRIPTION
bitnami/bitnami-common           	0.0.9        	0.0.9        	DEPRECATED Chart with custom templates used in ...
bitnami/airflow                  	8.0.2        	2.0.0        	Apache Airflow is a platform to programmaticall...
bitnami/apache                   	8.2.3        	2.4.46       	Chart for Apache HTTP Server
bitnami/aspnet-core              	1.2.3        	3.1.9        	ASP.NET Core is an open-source framework create...

Chart

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

Helm installs resources in the following order:

Namespace
NetworkPolicy
ResourceQuota
LimitRange
PodSecurityPolicy
PodDisruptionBudget
ServiceAccount
Secret
SecretList
ConfigMap
StorageClass
PersistentVolume
PersistentVolumeClaim
CustomResourceDefinition
ClusterRole
ClusterRoleList
ClusterRoleBinding
ClusterRoleBindingList
Role
RoleList
RoleBinding
RoleBindingList
Service
DaemonSet
Pod
ReplicationController
ReplicaSet
Deployment
HorizontalPodAutoscaler
StatefulSet
Job
CronJob
Ingress
APIService

labile.zhu@gmail.com (Mark Zhu) — Mon, 01 Jan 0001 00:00:00 +0000

https://helm.sh/docs/howto/charts_tips_and_tricks/

Helm uses Go templates for templating your resource files. While Go ships several built-in functions, we have added many others.

First, we added all of the functions in the Sprig library, except env and expandenv, for security reasons.

We also added two special template functions: include and required. The include function allows you to bring in another template, and then pass the results to other template functions.

Using the ‘include’ Function

For example, this template snippet includes a template called mytpl, then lowercases the result, then wraps that in double quotes.

Mark 的滿紙方糖言

家中杂物管理术 - 不断不舍不离 Homebox

智能家居集成 AI Agent - agentgateway 与 tracing 实验

缘起

HA + 小米智能家居 = 失业宅心灵鸡汤

缘起

Self-hosted - 数字世代的归园田居

那个算法尚未统治的时代：90 年代的互联网

自家寶藏 - 待业程序员的禪思

缘起

Self-hosted 雜碎 2025

引

2024 年 Music/Spotify 回顾

可能是最深入全面的图解 Java Virtual Threads

Java 如何使用 Linux 内存 -《面向技术宅的 JVM 内幕》

Java Safepoint/Handshake 全面剖析 -《面向技术宅的 JVM 内幕》

从 JVM 学习路书 到 开源的酒神精神

Java Safepoint/Handshake 剖析求证 - JVM 必要之恶 - TL²;DR

JVM 剖析² 二次方 - Serviceability Agent

Serviceability Agent

JVM 堆栈内存剖析 - 《面向技术宅的 JVM 内幕》

无处不在的 JNI - 《面向技术宅的 JVM 内幕》

《面向技术宅的 JVM 内幕》

一个IP包的旅行 —— K8s 网络之 Calico 浅度解构

前言

Linux: 一切皆文件; peekfd: 偷看一切文件读写

引

内容简介

小编码，我输给 AI 了 —— 简记一次父子进程互锁的坑，自己挖的

简述

码农幽默英语排行榜 S1E2

再別科橋 诗两首

再別科橋

C++ 项目构建工具 Bazel 学习笔记

Bazel 概念与对象

CPP use cases

Adding include paths

我的智能家居设计 —— 说说好像过时的 IOT

我的个人知识库的构建 － Stop 404

True world?

借一次家庭局域网互联探索 - 谈谈互联网原义

引

Linux 下巨量窗口快速查找切换工具 Rofi —— 键盘总比眼睛快

引

误落尘网中，一去三十年

写在第 20 多次面试后

eBPF 求证坊间传闻：Java GC 日志可导致整个 JVM 服务卡顿？

概述

eBPF 求证坊间传闻：mmap + Java Safepoint 可导致整个 JVM 服务卡顿？

概述

Self-hosting 个人在线记事本 - Joplin

引

准 Self-hosting 的个人在线书架 - Zotero

引

分析 Java 应用在 Istio 下的 warm up

分析 Java 应用在 Istio 下的 warm up

故事的开始

Old man in a hurry

基于 libbpf 的 TCP 连接延迟监视工具 tcpconnlat 分析 - eBPF基础知识 Part5

基于 libbpf 的 TCP 连接延迟监视工具 tcpconnlat 分析 - eBPF基础知识 Part5

经典 libbpf 范例: uprobe 分析 - eBPF基础知识 Part4

经典 libbpf 范例: uprobe 分析 - eBPF基础知识 Part4

经典 libbpf 范例: bootstrap 分析 - eBPF基础知识 Part3

经典 libbpf 范例: bootstrap 分析 - eBPF基础知识 Part3

Linus 自传 [Just for FUN]读后感 - Part2 从一个书呆子（Nerd）的诞生，扯到现代教育

BPF 系统接口 与 libbpf 示例分析 - eBPF基础知识 Part2

BPF 系统接口 与 libbpf minimal 示例分析 - eBPF基础知识

Linus 自传 [Just for FUN]读后感 - Part1 前言

书评

ELF 格式简述 - eBPF基础知识 Part1

引

实时跟踪内核 TCP 连接失败与重试 - 基于 BPF

引

从《Why I Left Facebook》扯到蘇東坡《卜算子》

从《Why I Left Facebook》扯到蘇東坡《卜算子》

容器化 TCP Socket 缓存、接收窗口参数

可能是最完整的 TCP 连接健康指标工具 ss 的说明

写在前面

持续学习和关心个人资讯的IT人，为何考虑学点 Self-hosting

引

从 JVM 学习路书到开源的酒神精神

再別科橋诗两首

我的个人知识库的构建－ Stop 404

BPF 系统接口与 libbpf 示例分析 - eBPF基础知识 Part2

BPF 系统接口与 libbpf minimal 示例分析 - eBPF基础知识

Istio Canary（金丝雀）上线