Twitter使用Hadoop来进行数据分析,同时该平台也被使用在站点上,包括Twitter的名称搜索功能。
Twitter的大部分表格数据存储在MySQL中,只有一小部分存储在Cassandra。Twitter的技术负责人表示要做的就是在一些地方结束MySQL表格存储。
因此Crane被开发出来,用于将数据从MySQL到HDFS或者Hadoop的HBase上。
时间:2010-06-30 11:04
来源:it168
作者:it168
原文链接
Twitter使用Hadoop来进行数据分析,同时该平台也被使用在站点上,包括Twitter的名称搜索功能。
Twitter的大部分表格数据存储在MySQL中,只有一小部分存储在Cassandra。Twitter的技术负责人表示要做的就是在一些地方结束MySQL表格存储。
因此Crane被开发出来,用于将数据从MySQL到HDFS或者Hadoop的HBase上。