专利名称：面向媒体应用的存储系统及方法
技术领域：
本发明涉及一种面向媒体应用的存储系统及方法。
背景技术：
目前的存储系统领域，已经广泛应用了虚拟存储、分级存储、云存储、高性能存储、 高容量存储、绿色存储、休眠存储、FC存储、IP存储、集群存储、磁盘阵列、磁带库、光盘库、 虚拟带库等存储技术。
随着广电媒体应用的逐步深入和发展，用户对应用访问的冷热数据差异化支持、 分级化管理以及节能环保等方面的综合性要求凸显。而现有的各种存储技术在这种综合性 要求方面无法很好的应对，存在诸多限制，进而不能满足用户需求和应对更深层次应用的 发展。
从文件系统来看，现有的存储技术分为两类(1) 一种内置于存储设备中，提供 基于IP通道的CIFS/NFS通用文件访问技术，例如NAS、集群存储、云存储等；(2)另一种 是单独的文件系统+物理存储设备，例如=Stornext + FC存储，GPFS + FC存储等，文件 系统对物理存储设备进行格式化处理，由物理存储设备提供FC/IP/Infin1-Band/SAS/SCSI 的物理访问链路，并由文件系统对外提供寻址空间管理和访问许可，对上层应用提供基于 NAS头的CIFS/NFS/私有协议的文件访问通路，或者对上层应用提供私有协议的客户端，利 用文件系统管理服务器的寻址和访问许可，直接通过物理访问链路对存储介质进行读写访 问。
这两类存储技术都是通常的存储架构方式，可以满足常规的应用，但是这两类存 储技术都没有将文件系统和物理存储设备进行深度的结合，特别是没有针对冷热数据进行 综合分析、智能数据块调度处理、智能介质调度处理，因而无法达到冷热数据差异化支持、 分级化管理和智能绿色节能等方面要求。
从物理存储设备技术来看，目前的各类存储设备在存储介质混用、控制器内部性 能优化、绿色节能方面有一定的功能支持，可以满足简单或单纯的物理存储设备需求。但 是，针对广播级视音频媒体应用，这些通用的物理存储设备都没有与专用于媒体文件访问 的媒体文件系统进行深度结合，没有将文件与数据块的关联关系进行智能分类识别并专门 为媒体文件系统提供透明的文件级接口功能，因此，媒体文件系统与物理存储设备无法很 好的适配，无法科学、有序并经济地对冷热数据进行智能处理，进而无法很好地达到绿色节 能、热数据高性能支持的动态平衡。发明内容
本发明的目的在于克服现有技术的不足，提供一种面向广播级视音频媒体应用， 将物理存储、专用媒体文件系统与媒体应用进行深度融合，实现冷热数据差异化支持、分级 化管理，对混合的各种存储介质进行统一管理，实现高效、节能环保的面向媒体应用的存储 系统及方法。
本发明的目的是通过以下技术方案来实现的面向媒体应用的存储系统，它包括 硬件层、逻辑层和应用层，硬件层包括小存储模块和大存储模块，逻辑层包括通用文件管理 模块、负责业务趋势预测的业务智能分析模块和负责管理大存储模块中的硬盘状态的省电 智能管理模块，应用层包括通用文件操作接口和业务智能管理接口。
本发明所述的大存储模块中的硬盘状态包括休眠和运转状态。
面向媒体应用的存储方法，它包括以下步骤S1:基于媒体文件系统的指令，判断文件对应的数据块访问频率，再根据文件对应数据 块的访问频率对文件进行智能存放管理；S2:存储设备对冷数据所在的存储介质进行低功耗的智能休眠处理，有应用访问时立 即激活唤醒该存储介质；S3 :存储设备对热数据所在的存储介质进行访问性能的智能识别，智能地复制热数据；S4:存储设备完成所有内部数据块的调度、复制、迁移和转换，并向媒体文件系统提供 文件级的指令、状态反馈等接口。
本发明所述的存储介质包括高速缓冲存储器cache、固态硬盘SSD、FC盘、SAS盘和 SATA 盘。
本发明所述的智能存放管理的步骤包括以下子步骤A :将数据块访问频率低的冷数据存放在容量型存储介质中；B :将数据块访问频率高的热数据存放在性能型存储介质中。
本发明所述的容量型存储介质包括SATA盘，性能型存储介质包括高速缓冲存储 器cache、固态硬盘SSD、FC盘和SAS盘。
本发明的有益效果是(1)可以广泛应用于广电媒体单位(含电视台、广播电台)和其他行业(含军队、教育、石 油、企业等)广电类业务的多种应用场景，包括但不限于全台网、网络制播系统、新闻制播 系统、综合制作系统、后期制作系统、电视剧缩编系统、广告串编系统、播出系统、王干系统、 总编室系统、节目整备系统、媒体资产管理系统、新闻外场系统、外派记者站系统、IBC综合 业务网络系统、公有云及服务平台、私有云及服务平台、云生产、云媒资、云媒体处理、云存 储等应用；(2)物理存储设备根据媒体文件系统的指令完成数据块的智能调度和处理后，执行存 储介质(各种硬盘，含cache、SSD、FC盘、SAS盘、SATA盘)的智能休眠、激活和工作，达成省 电环保的功效；(3)上层各种应用对媒体文件系统及物理存储设备的访问完全透明，上层应用的各种 性能、效率的要求得到安全的保障。
(4)高效率利用物理存储设备的内部高速通道(含控制器cache、控制器之间高速 通路、FC环路、infin1-band通路、SAS通路),不占用存储设备对外的访问通道,且在不影响 应用数据访问的基础上，智能实现存储设备内部数据块的复制、迁移和转换；(5)提供卷级别的简单管理方式，应用管理人员可透明地创建各种应用卷名称、空间， 并且可以按需随时扩充性能和容量；(6)提供应用卷的目录树管理、空间状态、性能状态，并可设置空间阈值、性能阈值或综合阈值，及时以报警信息提示应用管理人员。
图1为本发明存储系统结构示意框图；图2为媒体文件系统对存储的统一管理系统结构示意图。
具体实施方式
下面结合附图进一步详细描述本发明的技术方案，但本发明的保护范围不局限于 以下所述。
如图1所示，面向媒体应用的存储系统，它包括硬件层、逻辑层和应用层，硬件层 包括高性能小存储模块和低功耗大存储模块，逻辑层包括通用文件管理模块和负责业务趋 势预测的业务智能分析模块，业务智能分析模块分析哪些数据将会不再是热点数据，定期 淘汰到低功耗的大存储中。以及负责管理大存储模块中的硬盘状态的省电智能管理模块， 低功耗大存储模块中的硬盘状态包括休眠和运转状态。应用层包括通用文件操作接口和业 务智能管理接口。
面向媒体应用的存储方法，它包括以下步骤S1:基于媒体文件系统的指令，判断文件对应的数据块访问频率，再根据文件对应数据 块的访问频率对文件进行智能存放管理，智能存放于存储介质中，存储介质包括高速缓冲 存储器cache、固态硬盘SSD、FC盘、SAS盘和SATA盘；智能存放管理的步骤包括以下子步骤A :将数据块访问频率低的冷数据存放在容量型存储介质中，容量型存储介质包括 SATA 盘；B :将数据块访问频率高的热数据存放在性能型存储介质中，性能型存储介质包括高速 缓冲存储器cache、固态硬盘SSD、FC盘和SAS盘。
S2:存储设备对冷数据所在的存储介质进行低功耗的智能休眠处理，有应用访问 时立即激活唤醒该存储介质；S3:存储设备对热数据所在的存储介质进行访问性能的智能识别，智能地复制热数据；S4:存储设备完成所有内部数据块的调度、复制、迁移和转换，并向媒体文件系统提供 文件级的指令、状态反馈等接口。
如图2所示，FMTDA (DA)表示媒体温度探测算法，FMTPA (PA)表示媒体温度预测 算法，FMCA (CA)表示媒体缓存算法，FMTC表示高速媒体传输通道，FMHSM表示媒体分级存 储管理器。FMHSM媒体分级存储管理器中包括FMTDA媒体温度探测算法、FMTPA媒体温度 预测算法和FMCA媒体缓存算法。存储设备包括一级高速存储(如SAS、SSD等，温度区间为[T1M )、二级速存储(如SATA等，温度区间为[T2J1])和三级速存储(如磁盘库等，温度区间为[-叫T2])。优化媒体文件系统算法，支持对物理存储设备进行基于文件及的数据调度和 处理；提供卷管理、提供应用相关的可配置参数和设置功能，满足上层各种不同应用的实际 需求；高性能和高容量的差异化管理。
权利要求
1.面向媒体应用的存储系统，其特征在于它包括硬件层、逻辑层和应用层，硬件层包括小存储模块和大存储模块，逻辑层包括通用文件管理模块、负责业务趋势预测的业务智能分析模块和负责管理大存储模块中的硬盘状态的省电智能管理模块，应用层包括通用文件操作接口和业务智能管理接口。
2.根据权利要求1所述的面向媒体应用的存储系统，其特征在于所述的大存储模块中的硬盘状态包括休眠和运转状态。
3.面向媒体应用的存储方法，其特征在于它包括以下步骤51:基于媒体文件系统的指令，判断文件对应的数据块访问频率，再根据文件对应数据块的访问频率对文件进行智能存放管理；52:存储设备对冷数据所在的存储介质进行低功耗的智能休眠处理，有应用访问时立即激活唤醒该存储介质；S3:存储设备对热数据所在的存储介质进行访问性能的智能识别，智能地复制热数据；S4:存储设备完成所有内部数据块的调度、复制、迁移和转换，并向媒体文件系统提供文件级的指令、状态反馈等接口。
4.根据权利要求3所述的面向媒体应用的存储方法，其特征在于所述的存储介质包括高速缓冲存储器cache、固态硬盘SSD、FC盘、SAS盘和SATA盘。
5.根据权利要求3所述的面向媒体应用的存储方法，其特征在于所述的智能存放管理的步骤包括以下子步骤A :将数据块访问频率低的冷数据存放在容量型存储介质中；B :将数据块访问频率高的热数据存放在性能型存储介质中。
6.根据权利要求5所述的面向媒体应用的存储方法，其特征在于所述的容量型存储介质包括SATA盘，性能型存储介质包括高速缓冲存储器cache、固态硬盘SSD、FC盘和SAS盘。
全文摘要
本发明公开了一种面向媒体应用的存储系统及方法，系统包括硬件层、逻辑层和应用层，硬件层包括小存储模块和大存储模块，逻辑层包括通用文件管理模块、负责业务趋势预测的业务智能分析模块和负责管理大存储模块中的硬盘状态的省电智能管理模块，应用层包括通用文件操作接口和业务智能管理接口；基于媒体文件系统的指令，判断文件对应的数据块访问频率，再根据文件对应数据块的访问频率对文件进行智能存放管理。本发明物理存储设备根据指令完成数据块的智能调度和处理后，执行存储介质的智能休眠、激活和工作，达成省电环保的功效；上层各种应用对媒体文件系统及物理存储设备的访问完全透明，上层应用的各种性能、效率的要求得到安全的保障。
文档编号G06F12/08GK102999442SQ20121046317
公开日2013年3月27日 申请日期2012年11月16日 优先权日2012年11月16日
发明者宋小民, 李科, 王炜, 吴春中 申请人:成都索贝数码科技股份有限公司