Scripts 学盟

标题: 关于海量数据进行查询问题。！ [打印本页]

作者: 那个谁 时间: 2012-1-8 13:07:49 标题: 关于海量数据进行查询问题。！

本帖最后由那个谁于 2012-1-10 14:54 编辑

最近有个很头疼的问题，程序在查询附件(圆形)的数据时很忙。后面把数据库的数据加载到内存中，在内存中进行匹配找出附件的坐标所对应的数据。当初没有考虑到数据加载后内存无法承载导致程序奔溃，经过研究采用每块数据采用单独的虚拟机存取，单独的虚拟机分配固定的内存，用缓存维护数据，目前撮合使用基本正常。

现在决定将存储层新规划，准备采用Hbase做分布式集群。hbase是bigtable的开源山寨版本，这玩意很强大下面我会找些文章给大家学习学习。有时间可以去http://www.tbdata.org/p_d/development看看有很多文章写的不错哦。。。。。。

作者: 混混@普宁.中国 时间: 2012-1-8 22:51:11

这个高深了。。。

希望杰管给些简要介绍

欢迎光临 Scripts 学盟 (http://www.iscripts.org/)