大数据运算系统（4）--- 内存计算系统_大数据内存计算原理

作者：知新_RL | 2024-04-11 00:00:05

踩

大数据内存计算原理

内存计算系统

一、内存数据库

1、起源发展

（1）体系结构和硬件技术的巨大发展：GPU多核芯片+多级高速缓存+大容量内存+大容量硬盘SSD。

（2）内存处理优点：去除硬盘读写开销，提高处理速度。

（3）关系型内存数据库：

Memory-resident：可能在buffer pool中。

MMDB：可能彻底不用buffer pool，改变了系统内部设计。

2、关键技术

Sorting优化：使用quick sort而不是replacement selection

Hash join优化

B+ trees

Vectorization；处理器加速；压缩

3、MonetDB

SQL -> MAL -> BAT；内存列式存储，数据

声明：本文内容由网友自发贡献，不代表【wpsshop博客】立场，版权归原作者所有，本站不承担相应法律责任。如您发现有侵权的内容，请联系我们。转载请注明出处：https://www.wpsshop.cn/w/知新_RL/article/detail/401756