很多人玩开发板用树莓派，树莓派的确很好，但是对于hadoop来说，内存有点小，只有512MB。所以我找了一圈，最后用的是国内一个开源硬件团队的产品叫CubieTruck。内存有2G，板载存储有8G，千兆网口，可以挂载2.5寸机械或SSD硬盘。 （更多…） [...]
Hadoop自动化运维之创建deb包
2014第一篇博文，将来也会逐步写成一个系列，新年新气象。 将hadoop及其周边生态系统deb/rpm化对于自动化运维来说意义重大，建立好整个生态的rpm和deb然后再创建本地yum或者apt的源，可大大简化hadoop的部署和运维。实际上，cloudera和hortonworks都是这么做的。 （更多…） [...]
基于异构arm硬件的Hadoop集群测试
3月份的时候做了单机版的hadoop on arm的测试，最近又买了一个新的arm板子，就考虑把他们串起来组一个hadoop集群。而且由于产品更新换代的问题，硬件上是异构的。 基于arm架构单片机的hadoop服务器尝试 namenode是cubieboard一代，采用单核arm v7架构，1G内存，4G板载flash ROM （更多…） [...]