Page 145 - 安防19年9月刊_150dpi
P. 145
▲图表 5 云边统一的云计算框架
等各种任务的转换数据。湖中的数据包括:结构
化数据从关系数据库(行和列)、半结构化数据
(CSV、XML、JSON的日志);非结构化数据(电子
邮件,文档,PDF)和二进制数据(图像、音频、视
频),从而形成一个集中式数据存储容纳所有形
式的数据。
结合安防监控的数据特点,从数据湖架构出
▲图表 6 资源池组织框架 发,我们设计了带数据缓冲池的原始数据池、半结
构化数据池、结构化数据池和归档数据池。数据
以“数据湖”架构构建安防云存储系统
缓冲池作为原始数据池的有效补充,着重提升原
“数据湖”是一种在系统或存储库中以自然
始数据短期密集写入和读取需求时的消峰处理,
格式存储数据的方法,它有助于以各种模式和结
通过对原始数据池的IA分析识别,构建多媒体的
构形式配置数据,通常是对象块或文件。“数据
半结构化数据池,以支持更有效的业务应用。半
湖”的主要思想是对企业中的所有数据进行统一
结构化数据池自身会进一步进行分析和清洗,提
存储,从原始数据(这意味着源系统数据的精确
升业务的靶向性,从而满足业务数据建模的需要,
副本)转换为用于报告、可视化、分析和机器学习
第五届深圳国际无人机展览会(2020年6月深圳会展中心) www.china-drone.com.cn 127
࿒ਊ۽ӱ JOEE ྒ௹၂