IT牛人博客聚合

很久不深入玩Debian系的东西了，最近，乘着工作之便，又打了个deb包，而且是我之前没干过的内核模块的deb包，恩，记一下吧。

Debian内核模块的一般构建方法

和 RHEL 不同，Debian 很少提供内核匹配的模块的二进制 deb 包，相反，一般会提供一些比较长用的模块的源码包，并配合 module-assistant 工具，生成与用户使用的内核版本一致的内核模块。

module-assistant 是一个菜单界面的CLI工具，用户可以在这里选择源码包，当然，也可以用 apt 安装 xxx-source 的源码包（也是deb包），然后，用命令

m-a a-i module-name-here

来自动生成模块的二进制

查看全文: http://www.udpwork.com/item/7281.html

之前只有一篇关于较早版本的 strlen(3) 实现的笔记，这里补上我在 2010 年做的新增改进。

与 Pascal 等语言不同，C 的字符串并不保存串的长度，而是在字符串末尾以 nul 字符（'\0'）来表示字符串结束。这个设计决策是上世纪 60 年代作出的，有都市传说是为了省几个字节的空间，不过我个人认为也可能是因为汇编里面到处都是判断是否碰到了 0 的操作。不管怎么说，这个设计令 strlen 变成了一个 O(n) 的操作。

早期的 BSD Unix 采用的 strlen 是非常简单的循环比较每一个字符是不是 nul。1993年，J.T. Conklin 为 i386 系统撰写了一个汇编的版本，这个版本的核心用的是 RE

查看全文: http://www.udpwork.com/item/7181.html

可以在 这里 下载。

和过去一样，风险自担 USE AT YOUR OWN RISK！

这个版本 (20120402) 和上一个版本 (20120114) 相比的改动：

集成了近期 ZFS 的全部可靠性和性能改进；

增加了允许 jail 中挂载 ZFS 的功能；

mps(4)性能改进；

对 ULE 调度器的重要性能改进（支持超线程的处理器上许多测试可看到 10%-15% 的改善）；

对 Intel TurboBoost 技术的支持（在需要时可将 CPU 频率临时提高到标称值的 110%）；

对交换设备热拔时的可靠性改进；

对虚拟内存子系统的性能和可靠性改进；

优化了 rtld-elf 的内存占用【

查看全文: http://www.udpwork.com/item/7066.html

     做benchmark测试的过程中，总是会涉及到linux操作系统底层的设置导致无法充分利用机器的性能，在调试的过程中，不少资料没能和linux kernel版本对应上导致一些参数的设置错误。根据现有服务器的硬件条件和软件版本做相关优化，把一些实践的心得分享出来。

      Kernel version ： 2.6.32-71.el6.x86_64

      Cpu：Intel(R) Xeon(R) CPU    E5606  @ 2.13

查看全文: http://www.udpwork.com/item/7062.html

原创文章，转载请注明： 转载自Erlang非业余研究

本文链接地址: Erlang节点互联失败原因分析以及解决方案

今天和项仲在部署新系统的时候发现节点间ping不成功的情况，类似

1> net_adm:ping(‘xx@ip1′).

pang

由于这个问题比较普遍，我就记录下一步步的排除步骤.

首先从原理上分析下!由于erlang节点间通讯是透过tcp来进行的，所以我们确保以下几点：

1. 确保网络连接是通的，可以透过ping来查看。

2. 确保网络连接上tcp是可以通的，可以透过netcat在二个节点所在的机器上分别开个服务器端和客户端进行验证。

3. 确保端口是防火墙友好的。erlan

查看全文: http://www.udpwork.com/item/7046.html

本月版聚的规格最后是8人座谈 + 晚饭欢送 hzmangel （@hzmangel, @古月圣）同学南下，座谈比讲幻灯片更轻松了一点，不过，还是讨论了一些严肃问题，很多都是开发中的常见误解和误用。废话少说，一一列出，没列的出是我忘了，各位在场同学请补充。

mmap() 与 read() 哪个快

当Coly（@colyli, @淘泊松）抛出这个问题的时候，我们已经猜到 read() 快了，毕竟我们相信他会说些颠覆理解的东西，而且李凯（@leekayak）童鞋表示，他也听朱延海（@2002年一本漫画闯天涯）说过此事。那么，我们来听听 Coly 的解释：

大家关于“mmap()”更快的认识来自于 read() 是需要内存拷贝的；

查看全文: http://www.udpwork.com/item/7042.html

按：谨以此译文献给仍然挣扎在 CentOS 5/RHEL 5 上的同学们，RHEL 6/CentOS 6 已经包含这个改进了。

原作者：Goldwyn Rodrigues

原文时间：April 1, 2009

原文链接：http://lwn.net/Articles/326552/

译者：王旭（ @gnawux, http://wangxu.me/blog/ ）

翻译时间：2012年2月7-9日

在内核的页缓存（page cache）之中，存放着永久存储设备上的文件内容的内存副本。当程序把数据写入到页面之中，但还没写到磁盘上的时候，这些数据就放在缓存之中，这就是“脏页”。脏页的数量可以从 /proc/meminfo 中

查看全文: http://www.udpwork.com/item/6819.html

原文：http://lwn.net/Articles/469805/

原作者：Jonathan Corbet

原文发布时间：November 29, 2011

译者：王旭 （ @gnawux ;  http://wangxu.me/blog/ ）

翻译时间：2012年2月3日

ext4是一个刚刚发布一两年的文件系统。不过，这个坚实稳定的系统是基于一个很古老的设计演化而来的。对于一些被作为“下一代文件系统”开发的 FS，比如 btrfs，本文要提到的一些特性可能都已经具备了。然而，btrfs这样的文件系统还需要相当长的时间，才能在更广泛的用户群中获得足够的信心，同时，日益增长的 ext4 用户对这些特性同样心仪已久。近来提交

查看全文: http://www.udpwork.com/item/6783.html

可以在 这里 下载。

和过去一样，风险自担 USE AT YOUR OWN RISK！

和 FreeBSD 9.0-RELEASE 相比的改动：

修正了一组 tmpfs 的 bug；

针对 nullfs、 devfs 的可靠性改进；

"skeljail"；

top(1) 默认显示每个CPU的占用比例；

针对 powerd 的多处理器支持；

对 IPv4 流量分 IP 进行统计【注意，由于上锁开销，此改动会略微降低IPv4性能】；

重启时设置 watchdog；

改善 csh 可用性配置；

预设将共享内存绑在主存内；

Winbond watchdog 驱动；

对虚拟化环境默认不测试内存；

查看全文: http://www.udpwork.com/item/6699.html

常在河边走哪能不湿脚，写程序没有遇到bug那是不可能的。内核菜鸟写代码，出个kernel oops那更是家常便饭。

从我目前遇到的各种oops来看，debug首先要检验能否稳定重现bug。

若不能稳定重现（触发条件不一，Oops信息不一），那么恭喜了，基本是出现竞态了。这种问题可大可小，当然最后的问题肯定是在自己的代码里面的（前提是其他模块都是稳定的）。这个时候当然是得先把code path都走一遍，检查是不是逻辑有问题；之后就是检查各种锁了。

若能稳定重现，那么相对好办点。慢慢用printk定位到出问题的语句就可以了。objdump反汇编一下，配合oops里面的stack trace信息看看大概是哪个语句出问题了，不过个人觉

查看全文: http://www.udpwork.com/item/6662.html

记一笔，没啥特别。

Unix 系统的分时调度中，nice值（通过 nice(1) 来控制）是管理员告诉调度器的一个参数，这个参数令内核在考虑就绪进程优先级时，根据其值适当增大或减少执行绪的动态优先级。很明显，如果采用抢占式调度，如果执行绪等待时间较长，或者由于某种原因获得了优先级奖励（例如I/O导致的等待），即使有更重要的任务需要执行，内核还是会将这个执行绪调度进来并进行执行；反之，如果执行绪使用的 CPU 很多（计算密集型任务，如压缩等等），即使这个执行绪进行的就是最重要的任务，它仍然可能被置入休眠状态。

在 FreeBSD 的及时调度 (real-time scheduling) 实现中，增加了32个'及时(realtime

查看全文: http://www.udpwork.com/item/6583.html

经过几天的编程，netback现在已经转移到thread-per-vif的模型了，非常有限的测试表示在某些情况下新netback的性能还比旧的好的点（至少没有比原来的差）。

为了限制新模型的netback内存占用情况，需要实现一个统一的内存池。本着能简单就简单的原则，用一个free list来管理可用的entry，实现简单的get one和put one操作。以后可能还会用到，先记下。不说实现得有多好，至少是够用了。

所有的页都是通过alloc_page申请的，所以初始状态下它们的reference count应该是1。

锁的使用尽量少，put的时候没有加锁，因为写操作是原子的，真正的页面回收工作推迟到池中没有空闲页面的时候再

查看全文: http://www.udpwork.com/item/6516.html

前文简单介绍了block device和device mapper。有了这两个基础，再来看flashcache的代码，就容易理解多了。Flashcache是一个内核模块，要更清晰的理解代码，还需要了解一下内核模块编写的一些基础知识。好吧，虽然对于内核编程我完全是个门外汉，这里还是需要现学现卖下。所以这一篇还是不会切入正题，已经熟悉Linux内核模块的同学请忽略并耐心等待。

Linux内核支持动态的加载模块（Loadable Kernel Module，LKM）以完成某些特定的功能，模块编程需要按照一定的格式以便可以和内核交互。

5. 内核符号表

内核模块之间的交互需要通过特定的共享变量和函数，这些都需要输出到内核符号表。在模块

查看全文: http://www.udpwork.com/item/6501.html

Good question!

答案是：一点也不难。随便打开一个文件，然后找出comment里面的拼写及语法错误，再然后按照使用Git发送patch提到的方法发送出去就ok了。一般都可以被ack然后进仓库的。

这是一个很严肃的事情哦，为社区做贡献。门槛也不高，值得一试。:-)

当然，前提是要会用Git以及有一本好词典，呵呵。

© 2011, liuw. All rights reserved.

查看全文: http://www.udpwork.com/item/6495.html

原创文章，转载请注明： 转载自Erlang非业余研究

本文链接地址: Erlang如何限制节点对集群的访问之net_kernel:allow

默认情况下Erlang的集群访问是全授权的，只要cookie认证过了后，新加入的节点可以访问集群里面的任何机器，这给运维带来很大风险。目前erlang有二种方法可以限制 1. IP网段限制，参看这里 2. 节点名称限制。这个是通过net_kernel:allow来实现的，参看：

allow/1

Limits access to the specified set of nodes. Any access attempts made from (or to) nodes not in N

查看全文: http://www.udpwork.com/item/6107.html

今天去 Y! 参加了 #lspe 的一个交流会。

比较感兴趣的项目是之前了解过但仔细看过的 FlashCache，这是 Facebook 搞的一个 SSD 加速模块，原理不复杂，是在文件系统下面做上一层集关联(set-associative)高速缓存，提供了LRU和FIFO两种淘汰方法。这次 Mohan Srinivasan 讲解的时候提到了以前公开发表的讲稿上没有的一个内容----按线程id/线程组id去做的黑白名单，并对MySQL进行了修改，令其在扫描表时不做cache。从使用的角度，这个不失为一个不错的折衷方法。

第二个创意不错，使用压缩和 dedup 的方法在 1ms 延迟内做到 1:5 到 1:10 的数据缩减，从而实

查看全文: http://www.udpwork.com/item/6094.html