newlisp按行处理日志文件

来源:互联网 发布:算法导论视频 编辑:程序博客网 时间:2024/05/27 10:43

newlisp提供了很多的文件处理函数,由于网络等原因。传递失败的消息可以暂时缓存在本地,为较少原程序的负担,可以利用newlisp脚本做容错处理,将这些失败的消息再次传递到接收端。

日志文件格式是一条消息一行。

newlisp代码如下:

#!/usr/bin/newlisp(set 'rest-url "http://localhost/collect")(set 'dir "/home/file/log_file/")(set 'cmd (string "ls " dir))(println "cmd: " cmd)(set 'file (exec cmd))(define (post-msg msg)  (set 'res (post-url rest-url msg "application/x-www-form-urlencoded" 100000))  (println "res: " res )  (unless (find "ERR: HTTP document empty" res)    ;;write a new file when error occur    (append-file (string file-path ".bk") (append msg "\n"))     )    )(define (parse-file file-name)  (set 'file-path (string dir file-name))  (println file-path)  (set 'f (open file-path "read"))  (while (read-line f)      (set 'msg (current-line))       (println "msg: " msg)      (post-msg msg)    ))(dolist (file-name file)  (parse-file file-name)  ;;delete file after all lines processed  (delete-file file-path))(exit)
程序主要用到的文件函数包括read-line和current-line。从dolist开始,其中file是遍历文件目录下得到的所有消息文件,parse-file函数是对其中一个消息文件逐行读取,并通过post-msg函数传递给接收端的api. post-msg中的unless表名如果没有传递成功,会把失败的消息再次写到一个新的文件,等到下此运行脚本会再次传递。

0 0
原创粉丝点击