[发明专利]一种针对小文件合并的批量删除/查询方法与装置

摘要

本发明提出一种针对小文件合并的批量删除/查询方法与装置，该方法包括客户端上传的小文件到目标文件中，将所述小文件的名称作为key，将所述小文件的内容作为value，上传到Memcache中，将所述key写到表key_list上，所述表key_list存储在所述Memcache中，所述表key_list记录所述Memcache中存储的所有小文件的key；在所述目标文件中添加标志文件flag，以及标志文件DE_flag，所述客户端收到删除所述小文件的请求后，先从所述表key_list中查找是否存在所述小文件的所述key，若存在，则从所述Memcache中取出并删除所述小文件，并删除所述表key_list中所述小文件的所述key，否则在所述标识文件flag中记录所述小文件的文件名；获取需要查询的文件F，查询所述表key_list上记录的所述文件F的key，根据所述key从所述Memcache中取出所述文件F。

主权项

1.一种针对小文件合并的批量删除和查询方法，其特征在于，包括：将小文件上传到Memcache步骤，客户端上传的小文件到目标文件中，将所述小文件的名称作为key，将所述小文件的内容作为value，上传到Memcache中，将所述key写到表key_list上，所述表key_list存储在所述Memcache中，所述表key_list记录所述Memcache中存储的所有小文件的key；小文件删除步骤，在所述目标文件中添加标志文件flag，以及标志文件DE_flag，所述客户端收到删除所述小文件的请求后，先从所述表key_list中查找是否存在所述小文件的所述key，若存在，则从所述Memcache中取出并删除所述小文件，并删除所述表key_list中所述小文件的所述key，否则在所述标志文件flag中记录所述小文件的文件名；小文件查询步骤，获取需要查询的文件F，查询所述表key_list上记录的所述文件F的key，根据所述key从所述Memcache中取出所述文件F，返回给所述客户端；其中所述将小文件上传到Memcache步骤包括预测所述Memcache中是否存在足够的空间容纳所述小文件其中所述Memcache中剩余空间为L_i,所述小文件大小为S_i，所述Memcache总空间为P，若L_i+S_i<＝P,则将所述小文件放入所述Memcache中，若L_i+f_i>P，则将所述小文件存储到磁盘上，不再有新的小文件上传后，再将磁盘上的小文件上传到所述Memcache中；将线程进行加锁，保证同时只有一个线程执行写所述表key_list；从所述Memcache上下载所述表key_list；将所述小文件的文件名以及所述目标文件的文件名追加到key_list文件后；将所述表key_list上传到所述Memcache，将线程进行解锁。