[发明专利]数据的读取方法及装置

摘要

本发明公开了一种数据的读取方法及装置，涉及信息技术领域，主要目的在于解决现有技术中Flume系统在执行数据转发过程中，针对同一个数据，若在写入过程中，同时执行读取，则会产生异常的问题。本发明的技术方案包括：获取文件属性列表中日志文件内容的最新读取结束标记；根据标识信息获取当前待读取数据的结尾字符，并判断当前待读取数据的结尾字符是否与预设结束字符一致；其中，当前待读取数据为读取结束标识对应的文件内容；若确定当前待读取数据的结尾字符与预设结束字符一致，则读取当前待读取数据，并继续获取后续待读取数据的结尾字符，直到确定后续待读取数据的结尾字符与预设结束字符不一致为止。

主权项

1.一种数据的读取方法，其特征在于，所述方法应用于Flume系统，包括：获取文件属性列表中日志文件内容的最新读取结束标记；所述文件属性列表中记录有日志文件的标识信息与日志文件的最新读取结束标识的映射关系；根据所述标识信息获取当前待读取数据的结尾字符，并判断所述当前待读取数据的结尾字符是否与预设结束字符一致；其中，所述当前待读取数据为所述读取结束标识对应的文件内容；若确定所述当前待读取数据的结尾字符与所述预设结束字符一致，则读取所述当前待读取数据，并继续获取后续待读取数据的结尾字符，直到确定后续待读取数据的结尾字符与所述预设结束字符不一致为止。