用 skynet 实现 unity 的 cache server
我们公司的一些 Unity 项目，当 cache server 的数据上涨到几百 G 后，经常遇到问题。最近一次是 nodejs 内存使用太多导致进程挂掉。
我不太想的明白，一个几乎不需要在内存中保留什么状态的服务，为啥会吃掉那么多内存。简单看了一下 cache server 的官方实现 感觉实现的挺糟糕的。它的业务很简单，还不如按协议自己实现一个。
我们公司的一些 Unity 项目，当 cache server 的数据上涨到几百 G 后，经常遇到问题。最近一次是 nodejs 内存使用太多导致进程挂掉。
我不太想的明白，一个几乎不需要在内存中保留什么状态的服务，为啥会吃掉那么多内存。简单看了一下 cache server 的官方实现 感觉实现的挺糟糕的。它的业务很简单，还不如按协议自己实现一个。
前两天写了 快速字符串对象比较 ，我把这个想法提交到 Lua 的邮件列表，建议 Lua 的未来版本去掉长短字符串，不做 string interning ，用这个方法解决字符串比较的性能问题。Lua 的主要维护者 Reberbo 表示了兴趣，同时也提出了几点问题。
其中一个问题是，Lua 未必运行在 64bit 平台上，所以并没有直接使用 64bit 整数类型。而如果使用 32bit id 就无法简单的通过自增来保证 id 永远唯一。
我就这个问题考虑了几天，提了好几个解决方案，其中一个方案我最为满意，在这里重新用中文记录一下。
这段时间在想办法解决多个 lua 虚拟机间共享对象的问题。这里的一个核心问题是，lua 的短字符串做了 interning ，虚拟机在比较两个字符串时只需要比较字符串对象指针即可。而多个 lua vm 如果想共享数据，必须解决这个问题。前段时间实现的 并发 Hash Map ，和 共享表 就是在这方面做的努力。
随着 lua 5.4 的临近，我最近尝试了在 lua 5.4 的 alpha 版上做类似的 patch 。但是 lua 5.4 对 gc 的修改极大，这让我尝试去找其它的办法来做这件事。
我觉得，如果允许 vm 在处理短字符串比较时，不严格遵守 interning 的约定，那么就不再需要对 gc 流程做改造了。这样，从外部共享来的字符串，只要做全量值比较，依然可以得到正确的结果。
这样的修改固然对 lua 的代码影响极小，但很可能会有很大的性能损失。毕竟，字符串比较从原来的 O(1) 一次指针比较，变成了复杂得多的 memcmp O(n) 。而这明显是 vm 的性能瓶颈所在。
其实我不是很在意代码的版式，比如到底用空格缩进还是 Tab ；花括号应该放在行末还是另起一行；以及，当需要用多个单词命名的时候，是用下划线分割还是驼峰。自己写的时候，自然有个习惯，但是项目中如果有多人参与，我也不在意大家各用各的。
毕竟是外在的东西，对代码结构没什么影响。甚至不太影响可读性。反而不同的风格容易区分出作者，阅读的时候更容易追溯到人，甚至比在 git 上看 blame 还方便一点。
前两天纠结这个命名法的问题，是因为在 bgfxidl 这个项目上，bgfx 的作者希望用 idl 描述并生成宏定义。我在设计对应的 idl 语法时涉及了到底采用下划线命名还是驼峰命名的选择。
抱歉我用了这么个吸引眼球的标题。但我其实是想分析一下 996 工作制度到底存在怎样的问题。注意，我说的是身体力行执行 996 工作制的人，而非要求员工进行 996 工作的老板，这是两类人，今天我想骂的是前一类。
如果让我给执行 996 工作制下个定义，我想不能把全身心投入到工作和事业上的工作方式等同。它并不指工作时长；而是指刻意的制度性的把工作安排在非正常工作时间段。对待工作，不是以是否完成计划内的工作为衡量标准；而是本末倒置的先预设工作时长，然后想办法填满这些工作时间。
对于我最熟悉的游戏软件行业，它的工作本应该是脑力劳动为主。尤其对于程序员来说，主要的工作应该是在你的脑子里通过思考完成的，如果你的工作效率受限于每天不停的敲打键盘、移动鼠标、那么就变成了一项体力劳动。不久的将来，猴子和 AI 都能替你把事情干了。体力劳动或许可以通过制度性的延长工作时间来加快进程，可硬生生的脑力劳动变成体力劳动，只能用蠢来解释了。
如果工作的重点是通过大脑思考完成的，那么就不在乎你在什么时间，坐在哪里进行这些思考。甚至入睡前的那段时间都能想很多，限制每天在办公室坐上 10 多小时没有任何意义。那为什么说起来简单，996 反而成了国内程序员工作的普遍状态呢？我以最大的善意揣测人性，若他们不是心眼坏的话，那只能是大多数从业程序员能力欠缺了。
从游戏行业看，投资做游戏的人最期盼的是什么？并不是压榨你用更短的时间把游戏做出来，而是你能给个明确的计划时间表，在这个时间内保证质量的完工。这个时间可以比较长，但只要计划是明确的，就能估算出未来的收支情况。成功的游戏利润率非常之高，如果游戏能成功，用暴力手段压缩制作时间而减少的成本简直无足轻重。所以，游戏产品上线前，一改再改，无限延长开发时间反而是常态。
健康的项目，计划的落实是第一位的。那么最影响计划安排的是什么？不是工作时长，而是开发中的不确定因素：
最近帮多个活跃的开源项目改了同一个 bug : 完善 Windows 下的 Unicode 支持。
问题源于 Windows 和其它平台不同，它有悠久的历史包袱。和现代大多数操作系统对 Unicode 支持的共识不同，它的 API 不是基于 UTF-8 而是基于 UTF-16 的，且还遗留了一套过去对 ANSI 支持的兼容 API 。
最近我接触的几个活跃开源项目，都是西方人主导开发的，他们维护者似乎对 UTF-16 均有所误解，或是懒得做全面的支持。我认为罪魁祸首就是微软自己把 ANSI 编码称为 MBCS 多字符编码字符集，和 WideChar 宽字符集对应起来，暗示 WideChar 是单字编码。而事实上 UTF-16 方案应该成为 MWCS 才合理。
Unicode 虽然常用的只有 BMP ，也就是 U+0000 到 U+FFFF 部分的字符集。但是随着 Emoji 的普及，SMP 也变得非常常见了。其实 Unicode 目前的标准有 17 的 Plane ，需要 21bit 才能表示完全。而很多人直观的觉得，UTF-16 每一个字 ( 2 字节 ）表示一个码点。这是不对的，像 Emoji ，一些罕见汉字（SIP）需要用两个字来表示。这个叫做 surrogate pair ，对于 Unicode ，U+D800 到 U+DFFF 这个区段是不存在的，专门用于实现 UTF-16 中的 surrogate pair 。
用 skynet 实现 unity 的 cache server (58)
study_skynet :
云风大哥，能独立写一篇关于“Skynet的定时器线程工作原理”的博客不...
Bitcoin 的基本原理 (108)
bearton :
打卡膜拜，见证比特币的崛起，是否能在我有生之年取代美元的地位呢？...
用 skynet 实现 unity 的 cache server (58)
cowlevel :
这里有人在捣乱，但我感觉这种玩法很low...
用 skynet 实现 unity 的 cache server (58)
USA :
云风大哥你每天是怎么学习的，能传授下方法不？...
用 skynet 实现 unity 的 cache server (58)
King :
云风大哥66的
...
用 skynet 实现 unity 的 cache server (58)
闰土 :
理性追星，风哥的技术确实可以说登峰造极，但也没有你这么夸大“分分钟”干...
用 skynet 实现 unity 的 cache server (58)
Roiang :
年轻人，吹牛吹大点，你丫的咋不把风哥吹出宇宙干外星人去？...
用 skynet 实现 unity 的 cache server (58)
小明 :
想当年云大熬个通宵就把编辑数据配置文件的编辑器开发出来了，并且修复配置...
用 skynet 实现 unity 的 cache server (58)
Macol :
I will try to learn English well in...
用 skynet 实现 unity 的 cache server (58)
烟灰黯然 :
Skynet这么优秀为啥wiki不弄个英文版的，争取在国际上提高知名度...
