Tagged: Alluxio

在PB级别的数据上进行查询是一件事，如何在Facebook这种级别的产品上使用则是另外一件事。今年早期时候，他们把Alluxio分布式文件系统集成到了他们的数据架构上，实现了存储和计算的分离，以此用来加速查询。 Facebook很早就使用Apache hadoop，并且到现在还可以在Facebook的架构中看到他。它们已经把数据存储从Hadoop clusters中移开了，但是仍然使用HDFS在Warm Storage中访问数据，这是一个由Facebook开发的定制的分布式文件系统，用来在分离Hadoop之后进行数据存储的。...