logo好方法网

一种文件拷贝方法、装置、设备及存储介质


技术摘要:
本发明公开了一种文件拷贝方法、装置、设备及存储介质,该方法包括:接收目的客户端发送的文件创建信息;解析文件创建信息确定需要拷贝的原文件,对原文件打快照得到对应的快照信息,将快照信息赋值给预先创建的目标文件;接收目的客户端需要访问原文件时发送的文件访  全部
背景技术:
在大数据时代的高性能计算场景中,需要基于数百G的公有文件做多种下游处理, 且多种下游处理之间不相互干扰,现有做法是把公有文件拷贝多份至客户端各自的目录 下,再进行下游处理,公有文件被多次拷贝后消耗大量的存储空间,且消耗掉的存储空间中 存储有相当比例的重复数据,造成存储空间的浪费和大量带宽的占用,降低了存储空间的 利用率,影响了数据传输的性能。
技术实现要素:
本发明的目的是提供一种文件拷贝方法、装置、设备及存储介质,能够有效提高存 储空间的利用率,避免对数据传输性能的影响。 为了实现上述目的,本发明提供如下技术方案: 一种文件拷贝方法,包括: 接收目的客户端发送的文件创建信息; 解析所述文件创建信息确定需要拷贝的原文件,对所述原文件打快照得到对应的 快照信息,并将所述快照信息赋值给预先创建的目标文件; 接收所述目的客户端需要访问所述原文件时发送的文件访问信息,并对所述目标 文件的快照信息实现与所述文件访问信息对应的访问。 优选的,解析所述文件创建信息确定需要拷贝的原文件,包括: 解析所述文件创建信息得到文件路径信息,并确定与所述文件路径信息对应的文 件为需要拷贝的原文件。 优选的,解析所述文件创建信息得到文件路径信息之后,还包括: 将所述文件路径信息赋值给所述目标文件。 优选的,解析所述文件创建信息确定需要拷贝的原文件之后,还包括: 获取所述原文件的元数据信息,将所述元数据信息赋值给所述目标文件。 优选的,将所述快照信息、所述文件路径信息及所述元数据信息赋值给所述目标 文件之后,还包括: 将包含所述目标文件的元数据信息的日志进行固化。 优选的,解析所述文件创建信息得到文件路径信息之后,还包括: 判断是否存在与所述文件路径信息对应的文件,如果是,则执行确定与所述文件 路径信息对应的文件为需要拷贝的原文件的步骤,否则,返回相应的错误码给所述目的客 户端。 优选的,将所述快照信息、所述文件路径信息及所述元数据信息赋值给所述目标 3 CN 111737223 A 说 明 书 2/7 页 文件之后,还包括: 将所述目标文件的元数据信息返回给所述客户端,以指示所述客户端对本地存储 的所述目标文件的元数据信息进行更新。 一种文件拷贝装置,包括: 接收模块,用于:接收目的客户端发送的文件创建信息; 第一赋值模块,用于:解析所述文件创建信息确定需要拷贝的原文件,对所述原文 件打快照得到对应的快照信息,并将所述快照信息赋值给预先创建的目标文件; 访问模块,用于:接收所述目的客户端需要访问所述原文件时发送的文件访问信 息,并对所述目标文件的快照信息实现与所述文件访问信息对应的访问。 一种文件拷贝设备,包括: 存储器,用于存储计算机程序; 处理器,用于执行所述计算机程序时实现如上任一项所述文件拷贝方法的步骤。 一种计算机可读存储介质,所述计算机可读存储介质上存储有计算机程序,所述 计算机程序被处理器执行时实现如上任一项所述文件拷贝方法的步骤。 本发明提供了一种文件拷贝方法、装置、设备及存储介质,该方法包括:接收目的 客户端发送的文件创建信息;解析所述文件创建信息确定需要拷贝的原文件,对所述原文 件打快照得到对应的快照信息,并将所述快照信息赋值给预先创建的目标文件;接收所述 目的客户端需要访问所述原文件时发送的文件访问信息,并对所述目标文件的快照信息实 现与所述文件访问信息对应的访问。本申请在接收目的客户端发送的文件创建信息后,解 析该文件创建信息确定需要拷贝的原文件,对原文件打快照得到相应快照信息,并将该快 照信息赋值给创建的目标文件,从而在目的客户端需要实现对原文件的访问时,基于目标 文件的快照信息实现相应信息的访问;可见,本申请不同于现有技术直接实现对原文件的 拷贝,而是仅需将原文件的快照信息赋值给创建的文件,进而基于原文件的快照信息实现 原文件的访问即可,由于快照信息包含的数据量远远小于相应的文件,因此本申请能够大 大减少对存储空间的消耗及对带宽的占用,从而能够有效提高存储空间的利用率,避免对 数据传输性能的影响。 附图说明 为了更清楚地说明本发明实施例或现有技术中的技术方案,下面将对实施例或现 有技术描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本 发明的实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据 提供的附图获得其他的附图。 图1为本发明实施例提供的一种文件拷贝方法的流程图; 图2为本发明实施例提供的一种文件拷贝装置的结构示意图。
下载此资料需消耗2积分,
分享到:
收藏