[发明专利]数据入库处理方法、装置和服务器

摘要

本说明书提供了一种数据入库处理方法、装置和服务器。基于该数据入库处理方法，在获取待入库的目标数据后，先通过基于spark的预设算子，在所述目标数据上添加对应的自定义标识信息；其中，所述自定义标识信息的长度小于预设的长度阈值；再调用基于spark的预设的数据接口，通过多线程并行处理，将携带有自定义标识信息的目标数据批量存入基于ElasticSearch的数据库中。从而可以充分利用spark分布式框架的性能优势，并利用自定义标识信息代替系统生成的无序的默认ID，进行多线程并行处理，减少了对数据资源的消耗，提高了数据入库的处理效率，能够高效、准确地批量完成数据的入库存储。