很多人玩开发板用树莓派,树莓派的确很好,但是对于hadoop来说,内存有点小,只有512MB。所以我找了一圈,最后用的是国内一个开源硬件团队的产品叫CubieTruck。内存有2G,板载存储有8G,千兆网口,可以挂载2.5寸机械或SSD硬盘。
Archives
Hadoop自动化运维之创建deb包
2014第一篇博文,将来也会逐步写成一个系列,新年新气象。
将hadoop及其周边生态系统deb/rpm化对于自动化运维来说意义重大,建立好整个生态的rpm和deb然后再创建本地yum或者apt的源,可大大简化hadoop的部署和运维。实际上,cloudera和hortonworks都是这么做的。 Continue reading Hadoop自动化运维之创建deb包
基于异构arm硬件的Hadoop集群测试
3月份的时候做了单机版的hadoop on arm的测试,最近又买了一个新的arm板子,就考虑把他们串起来组一个hadoop集群。而且由于产品更新换代的问题,硬件上是异构的。
namenode是cubieboard一代,采用单核arm v7架构,1G内存,4G板载flash ROM Continue reading 基于异构arm硬件的Hadoop集群测试