[发明专利]一种云平台的数据处理方法及系统

摘要

本发明公开了一种云平台的数据处理方法及系统，该方法包括：将云平台中的数据流分成多个块文件；将各块文件分别进行存储，并保存各块文件的存储位置；根据各块文件的存储位置，读取并执行相应的任务处理。由于将数据流分成了多个块文件，使得云平台对于数据的处理并不占用网络宽带，能够减少网络宽带的开销压力。根据需求将针对海量异构数据的处理操作，无论多么复杂，都可以分解为任一大小的数据子任务，实现计算资源和存储资源配置的全局最优化，从而增加数据的传输和读取效率。

主权项

1.一种云平台的数据处理方法，其特征在于，包括：将云平台中的数据流分成多个块文件；将各所述块文件分别进行存储，并保存各所述块文件的存储位置；根据各所述块文件的存储位置，读取并执行相应的任务处理；其中，所述根据各所述块文件的存储位置，读取并执行相应的任务处理，包括：通过主机读取所要执行的任务对应的第一块文件的存储位置；根据所述第一块文件的存储位置，调取对应的块文件数据；将所述块文件数据放在所述主机的节点上，通过各节点之间的相互调用，对所述块文件数据进行传输和处理。