Page 145 - 安防19年9月刊_150dpi
P. 145

▲图表 5 云边统一的云计算框架


                                                                         等各种任务的转换数据。湖中的数据包括:结构
                                                                         化数据从关系数据库(行和列)、半结构化数据

                                                                         (CSV、XML、JSON的日志);非结构化数据(电子
                                                                         邮件,文档,PDF)和二进制数据(图像、音频、视
                                                                         频),从而形成一个集中式数据存储容纳所有形
                                                                         式的数据。
                                                                             结合安防监控的数据特点,从数据湖架构出
                              ▲图表 6 资源池组织框架                              发,我们设计了带数据缓冲池的原始数据池、半结
                                                                         构化数据池、结构化数据池和归档数据池。数据
                               以“数据湖”架构构建安防云存储系统
                                                                         缓冲池作为原始数据池的有效补充,着重提升原
                                 “数据湖”是一种在系统或存储库中以自然
                                                                         始数据短期密集写入和读取需求时的消峰处理,
                              格式存储数据的方法,它有助于以各种模式和结
                                                                         通过对原始数据池的IA分析识别,构建多媒体的
                              构形式配置数据,通常是对象块或文件。“数据
                                                                         半结构化数据池,以支持更有效的业务应用。半
                              湖”的主要思想是对企业中的所有数据进行统一
                                                                         结构化数据池自身会进一步进行分析和清洗,提
                              存储,从原始数据(这意味着源系统数据的精确
                                                                         升业务的靶向性,从而满足业务数据建模的需要,
                              副本)转换为用于报告、可视化、分析和机器学习




                                                                    第五届深圳国际无人机展览会(2020年6月深圳会展中心) www.china-drone.com.cn  127




          ࿒ਊ۽ӱ JOEE                                                                                                       ྒ௹၂
   140   141   142   143   144   145   146   147   148   149   150