如何打造更快、更简单、性价比更高的数据智能分析处理平台（上篇）

近年来，新一代硬件产品不断蓬勃发展，如多核CPU、GPU、FPGA，以及XPU，如TPU（Tensor Processing Unit，张量处理单元）等。以TPU为例，它可以在硬件层面上处理人工智能和机器学习经常涉及的张量数据结构和张量相关的计算，这大大提高了数据处理和计算的效率。

此外，新一代硬件的革新也在推动数据库系统和架构发生变化，数据库系统作为硬件和企业需求之间的纽带，需要通过巧妙精细的架构把硬件的能力和特性充分发挥出来，更好地满足企业存储和分析数据的需求。

因此，在新一代硬件的基础上，柏睿数据从数据库系统层面优化，囊括新一代计算平台和引擎，如内存计算、分布式计算、人工智能和机器学习计算、流计算等，构建业界领先的数据智能分析处理平台——RapidsDB，以完全自研的分布式全内存数据库、实时流数据库、数据库人工智能、跨源异构查询连接器、数据库安全&加速卡等为核心，充分利用和发挥新一代硬件的性能，针对海量、高吞吐、高并发、多源异构数据进行实时分析处理，落地数据治理、数据模型分析、数据资产管理、数据追溯等场景应用，携手政府部门和千行百业的企业开展数智化转型。

本篇我们先来一起了解下内存计算和分布式计算的结合会为数据存储和处理带来哪些变革。

柏睿数据RapidsDB是基于分布式架构的内存数据库。相较于传统数据库用磁盘存储数据，内存数据库直接在内存上进行数据存储和计算。

01 

内存数据库避开了数据访问时磁盘的I/O瓶颈，存取速度更快。将内存与磁盘的访问速度对比可知，内存访问速度是纳秒级，而磁盘访问速度是毫秒级，数据处理速度差异高达百万倍。

02

内存数据库能够用压缩和优化的格式来存储数据，从而更好地发挥CPU、GPU等现代硬件，而传统的磁盘数据存储则无法实现。

03 

内存数据库中从内存访问数据所使用的内存更少。这是因为从磁盘上读取数据时会涉及诸多复杂操作和过程，而从内存访问数据的过程指令集较少，所使用的内存也较少。

04

除了性能优势外，内存数据库还在一些有趣的领域具有磁盘存储和索引难以实现的优势。例如，列式存储和行式存储，内存数据库能够很容易地在两者之间灵活切换，且可以很容易地实现分层数据模型，甚至矩阵张量数据模型。而对于基于磁盘的存储来说，实现这样复杂的模型是难以想象的。

正因如此，柏睿数据RapidsDB选择基于内存存储架构进行设计和优化，具有无磁盘IO、高可扩展、高吞吐、高并发、低时延、节省内存等特性，比传统数据库性能提高近百倍，分布式架构支持按需动态在线扩展，支持日增20TB数据量实时采集与分析，满足100TB全内存数据量分析500/秒并发，TB级数据毫秒级响，且数据与内存空间的占用比例少于1:2，相较于传统数据库节省内存采购成本60%以上，充分满足企业对海量高并发大数据进行快速、精准智能分析和决策支持的需求。

相较于基于磁盘架构的传统数据库，RapidsDB在内存优化方面有四大显著特性：