Java大数据内存序列化浅谈(一)

806 查看

谈任何技术前,不讨论实际的应用场景都是耍流氓。

首先说下自身项目背景。业务只读不写,且数据量不大,这两个特性很大程度上决定了我们的系统架构。

Step 0 数据平台持久化数据到数据库(SQLServer)中,然后压缩数据库文件成压缩文件
Step 1 上传压缩文件到云端,利用云端进行自动同步
Step 2 通知各个节点下载数据,下载到指定目录
Step 3 解压文件,附加数据库文件为新库
Step 4 节点读取新数据库数据到内存,新旧数据内存切换,新数据生效,旧数据失效

通过描述看到我们的业务服务器其实把数据库作为一个临时数据存储,一旦读取过新数据,便不再访问数据库,因为数据全部读到内存当中。我们