嵌入式容器化：资源受限设备跑K8s集群

　　去年一月，客户推门进来的时候会议室投影正嗡嗡响，像台快散架的旧空调，音量调到最低还是嗡——他根本没抬头看，坐定就掏出手机刷淘宝首页，手指划得飞快，划到“猜你喜欢”那栏停了三秒，突然抬头说：“就做这个。”

　　我原以为他指UI，结果他说：“整个儿，从搜索到下单到推送，都要。”我问服务器呢？他说：“树莓派四代，八个板子，放机柜里。”我顿了两秒，回微信说“稍等”，删掉又打，“能跑K8s吗”，发出去前又改了句，“集群调度层怎么选”，发完盯着对话框，等他回。他回得特别快：“先做出来看看。”

　　销售老张当时也在，穿件洗过头的灰卫衣，袖口磨出毛边，坐那儿转笔，转得特别匀速，塑料笔壳咔嗒、咔嗒、咔嗒——不是那种心不在焉的转，是职业性的、带节奏的转，好像转笔声比我说话更可信。我看了他一眼，他冲我点头，意思是你接，我跟单。我没点头，但也没摇头。

　　桌上那盘切好的苹果没人动，边缘已经微微发褐，底下垫着纸巾，吸饱了水汽。客户中途起身去倒水，弯腰时卫衣下摆翘起来一截，露出腰上一截运动裤松紧带。我盯着那截松紧带想，这人连自己穿什么都没在状态，凭什么笃定K8s能在32MB内存里拉起etcd？

　　后来真干了。用k3s——行吧，轻量。可轻量不等于没脾气。树莓派4B上跑kube-proxy，网络插件换三轮：Flannel起不来，Calico报OOM，最后塞进Cilium，启动耗时47秒，超时阈值设成60，全靠脚本里写死sleep 50硬扛。Pod状态反复是Pending→ContainerCreating→CrashLoopBackOff→Pending，像呼吸衰竭病人打摆子。日志里满屏“failed to allocate inode”，不是磁盘满，是tmpfs挂载点inode数不够——谁想到要在rootfs里手工调sysctl -w fs.inotify.max_user_watches=524288？调完发现k3s agent根本不认，得重编译二进制……

文章配图，仅供参考

　　最绝的是客户提的“加个功能”：要实时推送设备温度告警。他自己写的Python脚本，跑在主机上，读/sys/class/thermal/thermal_zone0/temp，每秒吐一行数字。他问我：“能不能塞进K8s里当服务？”我讲清楚了：不是不能，是没必要；是裸跑更快更稳；是K8s调度开销抵得上他整台设备30% CPU。他听完点头，转头跟销售说：“让他加。”销售老张继续转笔，咔嗒、咔嗒、咔嗒。我当晚在终端里敲kubectl run temp-watcher --image=alpine:latest --command -- /bin/sh -c 'while true; do cat /sys/class/thermal/thermal_zone0/temp; sleep 1; done'，挂上去才发现容器根本没权限读/sys——没加--privileged，也没给hostPath卷。重启三次，第四次加了--privileged，CPU飙到92%，k3s controller直接失联五分钟。温控脚本活着，集群死了。

　　上线那天电梯里遇到财务小刘，她刚从客户那儿回来，拎着半袋没拆封的喜糖。我问咋了，她说客户说“尾款结一半，等跑顺了再付”。我没说话。她补一句：“他刚让IT把监控摄像头接进你们那个集群，说‘以后算力要物尽其用’。”

　　上一个更离谱的，是要求在鸿蒙Next模拟器里部署Elasticsearch——对，就是那个还没公开API的Beta版模拟器。对方CTO亲自打电话，语气像宣布登月时间表：“我们Q2要演示给国资委看。”我查了文档，连Java Runtime都得手动打包，最后用Termux硬怼了个JDK8进去，ES启动后log显示“detected no usable JDK”，查源码才发现它认jdk.home不认JAVA_HOME……那单没签合同，纯口头，干了三周，临走他们说“先沉淀一下技术路径”，就没后文了。这次至少签了字，虽然合同里写着“交付包含全部源码及K8s配置清单”，没写清“全部”指哪几层：yaml？helm chart？还是我把etcd snapshot压缩包也得刻光盘给他们？

　　客户原话我还记得：“K8s是趋势，树莓派是成本，咱们占一头是一头。”他说这话时手里那杯枸杞茶已经凉透，杯底沉着三颗没泡开的干果，像三粒褐色的微型哑弹。我听着，手边电脑还开着kubectl top node，八台节点里五台显示“unknown”，因为metrics-server根本活不过两分钟——它一拉pod，Node压力就爆表，kubelet就开始驱逐，驱逐完metrics-server自己也掉了……循环死亡。而客户盯着我屏幕右下角那个红色叹号，说：“图标换个绿色呗？看着吉利。”

　　我给他换了。用css覆盖控制台样式，只改了颜色，没动逻辑。他当场拍桌：“这就对了！用户第一！”然后问我：“能包搜索排名吗？”我手悬在键盘上，Ctrl+C都没按下去。销售老张终于停下转笔，抬眼看了我一下，眼神里没同情，只有“你当初为啥不拦着”。

　　优胜劣汰——这话现在听来不是虚的。真跑得起来的嵌入式K8s集群，要么芯片够狠（瑞芯微RK3588起步），要么架构够狠（KubeEdge+轻量runtime），要么客户够狠——狠到敢砍掉所有“体感功能”，只留心跳探针和OTA通道。我们这次，三样都不沾。树莓派跑调度？相当于拿电饭锅煮火箭燃料。可它偏偏没彻底崩：某天凌晨三点，八台节点里有两台连续在线超七十二小时，Prometheus居然抓到了一组完整温度曲线，折线图平滑得像人工画的。我截图发群里，配文：“苟延残喘型高可用。”没人回。第二天客户打电话催，说友商上周演示了“端侧AI推理集群”，问我们进度。我没提那两张图。我说：“正在压测。”

　　下回合同里这条必须写死：设备资源清单需附厂商出具的Linux内核模块兼容性证明，非标准SoC须提供bootloader级调试日志。不然再接这种活，不是做项目，是给自己找块墓碑刻“此处埋葬过k3s的尊严”。

（编辑：站长网）

【声明】本站内容均来自网络，其相关言论仅代表作者个人观点，不代表本站立场。若无意侵犯到您的权利，请及时与联系站长删除相关内容!