应用于大数据的存储方法及系统与流程

文档序号:12732972阅读:296来源:国知局
应用于大数据的存储方法及系统与流程

本发明涉及数据处理领域,尤其涉及一种应用于大数据的存储方法及系统。



背景技术:

大数据技术的战略意义不在于掌握庞大的数据信息,而在于对这些含有意义的数据进行专业化处理。换而言之,如果把大数据比作一种产业,那么这种产业实现盈利的关键,在于提高对数据的“加工能力”,通过“加工”实现数据的“增值”。从技术上看,大数据与云计算的关系就像一枚硬币的正反面一样密不可分。大数据必然无法用单台的计算机进行处理,必须采用分布式架构。它的特色在于对海量数据进行分布式数据挖掘。但它必须依托云计算的分布式处理、分布式数据库和云存储、虚拟化技术。随着云时代的来临,大数据(Big data)也吸引了越来越多的关注。《著云台》的分析师团队认为,大数据(Big data)通常用来形容一个公司创造的大量非结构化数据和半结构化数据,这些数据在下载到关系型数据库用于分析时会花费过多时间和金钱。大数据分析常和云计算联系到一起,因为实时的大型数据集分析需要像MapReduce一样的框架来向数十、数百或甚至数千的电脑分配工作。

现有的大数据存储效率低,用户体验度低。



技术实现要素:

本申请提供一种应用于大数据的存储方法。其解决现有技术的技术方案用户体验度低的缺点。

一方面,提供一种应用于大数据的存储方法,所述方法包括如下步骤:应用于大数据的存储方法,所述方法包括如下步骤:

服务器接收需要存储的大数据;

服务器提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址;

服务器将该大数据发送至该网络逻辑地址存储。

可选的,所述方法还包括:

服务器建立存储分配列表,该存储分配列表包括大数据标识以及对应的网络逻辑地址。

可选的,所述方法还包括:

服务器如获取到存储成功的消息,确定该大数据存储成功,否则,从网络逻辑地址中查询出另一网络逻辑地址。

第二方面,提供一种应用于大数据的存储系统,所述系统包括:

收发单元,用于接收需要存储的大数据;

处理单元,用于提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址,将该大数据发送至该网络逻辑地址存储。

可选的,所述系统还包括:

处理单元,用于服务器建立存储分配列表,该存储分配列表包括大数据标识以及对应的网络逻辑地址。

可选的,所述系统还包括:

处理单元,用于如获取到存储成功的消息,确定该大数据存储成功,否则,从网络逻辑地址中查询出另一网络逻辑地址。

第三方面,提供一种服务器,包括:处理器、无线收发器、存储器和总线,所述处理器、无线收发器、存储器通过总线连接,所述无线收发器,用于接收需要存储的大数据;

所述处理器,用于提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址,将该大数据发送至该网络逻辑地址存储。

可选的,所述处理器,用于服务器建立存储分配列表,该存储分配列表包括大数据标识以及对应的网络逻辑地址。

可选的,所述处理器,用于如获取到存储成功的消息,确定该大数据存储成功,否则,从网络逻辑地址中查询出另一网络逻辑地址。

本发明提供的技术方案通过网络逻辑地址以及存储量来动态分配,所以其具有存储效率高,用户体验度高的优点。

附图说明

为了更清楚地说明本发明实施例的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。

图1为本发明第一较佳实施方式提供的一种应用于大数据的存储方法的流程图;

图2为本发明第二较佳实施方式提供的一种应用于大数据的存储系统的结构图。

图3为本发明第二较佳实施方式提供的一种服务器的硬件结构图。

具体实施方式

下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。

请参考图1,图1是本发明第一较佳实施方式提出的一种应用于大数据的存储方法,该方法如图1所示,包括如下步骤:

步骤S101、服务器接收需要存储的大数据。

步骤S102、服务器提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址。

步骤S103、服务器将该大数据发送至该网络逻辑地址存储。

本发明提供的技术方案通过网络逻辑地址以及存储量来动态分配,所以其具有存储效率高,用户体验度高的优点。

可选的,服务器建立存储分配列表,该存储分配列表包括大数据标识以及对应的网络逻辑地址。

可选的,服务器如获取到存储成功的消息,确定该大数据存储成功,否则,从网络逻辑地址中查询出另一网络逻辑地址。

请参考图2,图2是本发明第二较佳实施方式提出的一种应用于大数据的存储系统,该系统如图2所示,包括:

收发单元201,用于接收需要存储的大数据;

处理单元202,用于提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址,将该大数据发送至该网络逻辑地址存储。

本发明提供的技术方案通过网络逻辑地址以及存储量来动态分配,所以其具有存储效率高,用户体验度高的优点。

可选的,处理单元202,用于服务器建立存储分配列表,该存储分配列表包括大数据标识以及对应的网络逻辑地址。

可选的,处理单元202,用于如获取到存储成功的消息,确定该大数据存储成功,否则,从网络逻辑地址中查询出另一网络逻辑地址。

参阅图3,图3为一种服务器30,包括:处理器301、无线收发器302、存储器303和总线304,无线收发器302用于与外部设备之间收发数据。处理器301的数量可以是一个或多个。本申请的一些实施例中,处理器301、存储器302和收发器303可通过总线304或其他方式连接。服务器30可以用于执行图1的步骤。关于本实施例涉及的术语的含义以及举例,可以参考图1对应的实施例。此处不再赘述。

无线收发器302,用于接收需要存储的大数据。

其中,存储器303中存储程序代码。处理器901用于调用存储器903中存储的程序代码,用于执行以下操作:

处理器301,用于提取该大数据的存储量,依据该存储量从网络逻辑地址中查询出与该存储量匹配的网络逻辑地址,将该大数据发送至该网络逻辑地址存储。

需要说明的是,这里的处理器301可以是一个处理元件,也可以是多个处理元件的统称。例如,该处理元件可以是中央处理器(Central Processing Unit,CPU),也可以是特定集成电路(Application Specific Integrated Circuit,ASIC),或者是被配置成实施本申请实施例的一个或多个集成电路,例如:一个或多个微处理器(digital singnal processor,DSP),或,一个或者多个现场可编程门阵列(Field Programmable Gate Array,FPGA)。

存储器303可以是一个存储装置,也可以是多个存储元件的统称,且用于存储可执行程序代码或应用程序运行装置运行所需要参数、数据等。且存储器303可以包括随机存储器(RAM),也可以包括非易失性存储器(non-volatile memory),例如磁盘存储器,闪存(Flash)等。

总线304可以是工业标准体系结构(Industry Standard Architecture,ISA)总线、外部设备互连(Peripheral Component,PCI)总线或扩展工业标准体系结构(Extended Industry Standard Architecture,EISA)总线等。该总线可以分为地址总线、数据总线、控制总线等。为便于表示,图3中仅用一条粗线表示,但并不表示仅有一根总线或一种类型的总线。

该终端还可以包括输入输出装置,连接于总线304,以通过总线与处理器301等其它部分连接。该输入输出装置可以为操作人员提供一输入界面,以便操作人员通过该输入界面选择布控项,还可以是其它接口,可通过该接口外接其它设备。

需要说明的是,对于前述的各个方法实施例,为了简单描述,故将其都表述为一系列的动作组合,但是本领域技术人员应该知悉,本发明并不受所描述的动作顺序的限制,因为依据本发明,某一些步骤可以采用其他顺序或者同时进行。其次,本领域技术人员也应该知悉,说明书中所描述的实施例均属于优选实施例,所涉及的动作和模块并不一定是本发明所必须的。

在上述实施例中,对各个实施例的描述都各有侧重,某个实施例中没有详细描述的部分,可以参见其他实施例的相关描述。

本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成,该程序可以存储于一计算机可读存储介质中,存储介质可以包括:闪存盘、只读存储器(英文:Read-Only Memory,简称:ROM)、随机存取器(英文:Random Access Memory,简称:RAM)、磁盘或光盘等。

以上对本发明实施例所提供的内容下载方法及相关设备、系统进行了详细介绍,本文中应用了具体个例对本发明的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本发明的方法及其核心思想;同时,对于本领域的一般技术人员,依据本发明的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本发明的限制。

当前第1页1 2 3 
网友询问留言 已有0条留言
  • 还没有人留言评论。精彩留言会获得点赞!
1