IT牛人博客聚合

Cloudera和CouchBase最近以“为什么NoSQL和Hadoop该一起使用？”为题做了个主题分享，其中对传统IT架构和Big Data架构做了很好的对比，很值得一看。

Why Every NoSQL Deployment Should Be Paired with Hadoop Webinar
View more presentations from Cloudera, Inc.

关于作者

冠诚, IBM中国研究院, 研究员

关注大规模分布式系统、并行计算。

任何与多核、并行、多线程有关的话题都可以找我聊聊:-)

我的邮箱是chenguancheng AT gmail.com

Buzz 豆瓣 新浪微博

查看全文: http://www.udpwork.com/item/7316.html

简介：IBM Research最近在Big Data领域有很多工作，例如我们组在4月份在10台采用POWER7处理器的P730服务器上成功地用14分钟跑完了1TB数据的排序，这项工作已经发表为一篇IBM Research Report，欢迎大家围观，并提出宝贵意见，谢谢。

The use of Big Data underpins critical activities in all sectors of our society. Achieving the full transformative potential of Big Data in this increasingly digital world requires b

查看全文: http://www.udpwork.com/item/7259.html

【感谢 Neo 投递本文 – 微博帐号：_锟_ 】

前言：还是一篇入门文章。Javascript中有几个非常重要的语言特性——对象、原型继承、闭包。其中闭包对于那些使用传统静态语言C/C++的程序员来说是一个新的语言特性。本文将以例子入手来介绍Javascript闭包的语言特性，并结合一点ECMAScript语言规范来使读者可以更深入的理解闭包。

注：本文是入门文章，例子素材整理于网络，如果你是高手，欢迎针对文章提出技术性建议和意见。本文讨论的是Javascript，不想做语言对比，如果您对Javascript天生不适，请自行绕道。

什么是闭包

闭包是什么?闭包是Closure，这是静态语言所不具有的一个新特性。

查看全文: http://www.udpwork.com/item/6954.html

前言:虽有陈皓《Javascript 面向对象编程》珠玉在前，但是我还是忍不住再画蛇添足的补上一篇文章，主要是因为javascript这门语言魅力。另外这篇文章是一篇入门文章，我也是才开始学习Javascript，有一点心得，才想写一篇这样文章，文章中难免有错误的地方，还请各位不吝吐槽指正

吐槽Javascript

初次接触Javascript，这门语言的确会让很多正规军感到诸多的不适，这种不适来自于Javascript的语法的简练和不严谨，这种不适也来自Javascript这个悲催的名称，我在想网景公司的Javascript设计者在给他起名称那天一定是脑壳进水了,让Javascript这么多年来受了这么多不白之冤，人们都认为他

查看全文: http://www.udpwork.com/item/6905.html

年底事情比较多，中断了一段时间，这一篇总算要说到Flashcache本身了。由于是内核模块，安装的时候需要内核源码树。具体的安装过程可以参考这里。

make -j 4 KERNEL_TREE=/usr/src/kernels/2.6.32-131.0.15.el6.x86_64
sudo make install

最初版本的Flashcache只支持writeback，后来单独开了一个支持writethrough的分支在flashcache-wt目录，但目前最新的版本已经将write through合并到主版本，并且增加了write around策略。

最新的源码可以到Github获取。

env GIT_SSL_NO_VER

查看全文: http://www.udpwork.com/item/6678.html

文 / 陈冠诚，史巨伟，杨博（IBM中国研究院)，杨寅（人民搜索）

随着互联网的快速发展，涌现出了一大批以Facebook，Twitter，人人，微博等为代表的新型社交网站。这些网站用户数量的迅速增长使得海量的用户数据不断被产生出来，而如何有效地对这些海量的用户数据进行社交网络分析（Social Network Analysis）正成为一个越来越热门的问题。本文向大家介绍由IBM中国研究院和北京邮电大学合作开发的X-RIME开源库（http://xrime.sourceforge.net/），一个基于Hadoop的开源社交网络分析工具。

其实早在90年代初就已经有许多企业和研究机构对社交网络进行过相关研究。然而随着互联网用户的急

查看全文: http://www.udpwork.com/item/6674.html

Javascript是一个类C的语言，他的面向对象的东西相对于C++/Java比较奇怪，但是其的确相当的强大，在 Todd 同学的“对象的消息模型”一文中我们已经可以看到一些端倪了。这两天有个前同事总在问我Javascript面向对象的东西，所以，索性写篇文章让他看去吧，这里这篇文章主要想从一个整体的角度来说明一下Javascript的面向对象的编程。（成文比较仓促，应该有不准确或是有误的地方，请大家批评指正）

另，这篇文章主要基于 ECMAScript 5， 旨在介绍新技术。关于兼容性的东西，请看最后一节。

初探

我们知道Javascript中的变量定义基本如下：

var name = 'Chen Hao';;
var e

查看全文: http://www.udpwork.com/item/6671.html

常在河边走哪能不湿脚，写程序没有遇到bug那是不可能的。内核菜鸟写代码，出个kernel oops那更是家常便饭。

从我目前遇到的各种oops来看，debug首先要检验能否稳定重现bug。

若不能稳定重现（触发条件不一，Oops信息不一），那么恭喜了，基本是出现竞态了。这种问题可大可小，当然最后的问题肯定是在自己的代码里面的（前提是其他模块都是稳定的）。这个时候当然是得先把code path都走一遍，检查是不是逻辑有问题；之后就是检查各种锁了。

若能稳定重现，那么相对好办点。慢慢用printk定位到出问题的语句就可以了。objdump反汇编一下，配合oops里面的stack trace信息看看大概是哪个语句出问题了，不过个人觉

查看全文: http://www.udpwork.com/item/6662.html

我知道这个文章标题很“学术”化，很俗，让人看起来是一篇很牛B或者很装逼的论文！其实不然，只是一份普通的实验报告，同时本文也不对RMM中文分词算法进行研究。这个实验报告是我做高性能计算课程的实验里提交的。所以，下面的内容是从我的实验报告里摘录出来的，当作是我学习hadoop分享出来的一些个人经验。

实验目标

学习编写 Hadoop 上的 MapReduce 程序。

使用 Hadoop 分布式计算小说《倚天屠龙记》里的中文单词频率，比较张无忌身边的两个女人周芷若与赵敏谁在小说里的热度高。（为什么要提到倚天屠龙记呢？因为我的一位舍友最近把贾静雯演的这部戏看完了，他无时无刻不提到贾静雯演的赵敏，所以这个实验也取材自我的大学生活……）

查看全文: http://www.udpwork.com/item/6548.html

有关Doug Cutting这次采访的更详细内容，请关注最新一期@程序员杂志 

转发| 收藏| 评论2分钟前 来自新浪微博

最后，感谢CSDN@CSDN董世晓 @刘江CE @蒋涛CSDN 给我这个机会一起采访Doug，收获很大！ 

转发| 收藏| 评论3分钟前 来自新浪微博

19）Doug最近刚换了一个Dell的30‘显示器，竖着放，写代码方便:) 

转发| 收藏| 评论4分钟前 来自新浪微博

16）Doug觉得他的成功有两点很关键：一是对这份工作很有热情，二是不要比目标定的太高，一步一个脚印比较实际，而且容易做到。17）Doug一周工作5天（非常非常努力的工作），然后周末休息:

查看全文: http://www.udpwork.com/item/6465.html

[ ———— 感谢 Todd 同学 投递本文，原文链接 ———— ]

C++对象模型

话题从下面这段C++程序说起，你认为它可以顺利执行吗？

//C++
class A {
public:
void Hello(const std::string& name) {
std::cout << "hello " << name;
}
};
int main(int argc, char** argv)
{
A* pa = NULL; //!!
pa->Hello("world"

查看全文: http://www.udpwork.com/item/5649.html

还记得以前那个用算素数的正则表达式吗？编程这个世界太有趣了，总是能看到一些即别出心裁的东西。你有没有想过在写Shell脚本的时候可以把你的变量和函数放到一个类中？不要以为这不可能，这不，我在网上又看到了一个把Shell脚本整成面向对象的东西。Shell本来是不支持的，需要自己做点东西，能搞出这个事事的人真的是hacker啊。

当然，这里并不是真正的面向对象，因为其只是封装罢了，还没有支持继承和多态。最变态的是他居然还支持typeid，靠！

下面让我们看看他是怎么来做的。下面的脚本可能会有点费解。本想解释一下，后来想想，还是大家自己专研一下吧，其实看懂也不难，给大家提几个点吧。

我们可以看到，下面的这个脚本定义了class,  

查看全文: http://www.udpwork.com/item/5508.html

在今年的SIGMOD‘11上，Facebook又发了一篇新paper（点此下载），讲述了它们在提高Hadoop实时性上的工作及其应用。简单来讲，他们的项目需求主要有：

1. Elasticity（伸缩性）

2. High write throughput（高写吞吐量）

3. Efficient and low-latency strong consistency semantics within a data center（单个data center内高性能、低延迟的强一致性）

4. Efficient random reads from disk（disk的高性能随机读）

5. High Availability and

查看全文: http://www.udpwork.com/item/5486.html

最近开始看HBase，幸运的是，现在HBase社区已经非常的活跃，网络上可以找到大量的参考资料。但对于大集群的运维经验，还有待积累。上周在团队内部简单分享了一下这段时间的读书总结，现在把PPT放出来。

这个PPT只是个读书笔记，可能有些理解有误的地方，如果发现了，请一定要留下评论。

Hbase运维碎碎念
View more presentations from seaman ning

您可能也喜欢：

关于HBase的一些零碎事

最NB的牺牲，最NB的后续

Oracle11g将于7月11号在New York正式发布

SSD硬盘时代即将到来？

西湖登山图

无觅

查看全文: http://www.udpwork.com/item/5359.html

随着Facebook使用HBase来构建实时消息系统，基于Hadoop的面向列存储的HBase持续升温。

目前稳定版本的HBase0.90.2只能基于Hadoop0.20.x系列版本，暂不支持最新的0.21.x。而且官方版本的Hadoop0.20.2（或者0.203.0）缺少一个重要的特性，HDFS不支持sync模式的持久，这样HBase就有较大的丢失数据的风险。要在生产环境使用HBase，有两个选择，一是使用Cloudera的CDH3版本，Cloudera就类似MySQL的Percona，对官方版本的Hadoop做了很多改进工作，而且经典的《Hadoop：The Definitive Guide》一书的作者Tom White就是

查看全文: http://www.udpwork.com/item/5294.html

按：王旭（http://wangxu.me/blog, @gnawux）于2011年6月6日译自 ZooKeeper程序员指南 （http://zookeeper.apache.org/doc/r3.3.3/zookeeperProgrammers.html）的同名章节。似乎很少有文档提这个啊，我其实在看这个之前一直不明白这东东是怎么用的。

所有的Zookeeper读操作，包括getData()、getChildren()和exists()，都有一个开关，可以在操作的同时再设置一个watch。在ZooKeeper中，Watch是一个一次性触发器，会在被设置watch的数据发生变化的时候，发送给设置watch的客户端。watch的定

查看全文: http://www.udpwork.com/item/5188.html