theo dõi các thay đổi trong (các) tệp trong thời gian thực

Question

Tôi có một chương trình giám sát các tệp nhất định để thay đổi. Ngay khi tệp được cập nhật, tệp được xử lý. Cho đến nay tôi đã đưa ra cách tiếp cận chung này về phân tích "phân tích thời gian thực" trong R. Tôi hy vọng các bạn có cách tiếp cận khác. Có lẽ chúng ta có thể thảo luận về ưu điểm/nhược điểm của chúng.

monitor <- TRUE 
start.state <- file.info$mtime # modification time of the file when initiating 

while(monitor) { 
    change.state <- file.info$mtime 
    if(start.state < change.state) { 
    #process 
    } else { 
    print("Nothing new.") 
    } 
    Sys.sleep(sleep.time) 
} 

Answer 1

Tương tự như đề xuất sử dụng API hệ thống, điều này cũng có thể được thực hiện bằng qtbase (https://r-forge.r-project.org/R/?group_id=454), đây sẽ là nền tảng đa nền tảng có nghĩa là từ trong R:

dir_to_watch <- "/tmp" 

library(qtbase) 
fsw <- Qt$QFileSystemWatcher() 
fsw$addPath(dir_to_watch) 

id <- qconnect(fsw, "directoryChanged", function(path) { 
    message(sprintf("directory %s has changed", path)) 
}) 

cat("abc", file="/tmp/deleteme.txt") 

Answer 2

Nếu hệ thống của bạn cung cấp API để theo dõi thay đổi hệ thống tệp thì bạn nên sử dụng. Tôi tin rằng Mac đi kèm với điều này. Không chắc chắn về các nền tảng khác mặc dù.

Edit: Một goog nhanh chóng đưa cho tôi:

Linux - http://wiki.linuxquestions.org/wiki/FAM

Win32 - http://msdn.microsoft.com/en-us/library/aa364417(VS.85).aspx

Rõ ràng, các API này sẽ loại bỏ bất kỳ bỏ phiếu mà bạn yêu cầu. Mặt khác, chúng có thể không luôn luôn có sẵn.

Java có này: http://jnotify.sourceforge.net/ và http://java.sun.com/developer/technicalArticles/javase/nio/#6

Answer 3

Tôi có một hack ý: bạn có thể thiết lập một cron công việc/nhiệm vụ theo lịch trình để chạy kịch bản R mỗi n giây (hoặc bất kỳ). Kịch bản lệnh R kiểm tra băm tệp và nếu băm không khớp, hãy chạy phân tích. Bạn có thể sử dụng chức năng digest::digest, chỉ cần xem hướng dẫn sử dụng.

Answer 4

Nếu bạn có nhiều tệp mà bạn muốn theo dõi, thì R có thể quá chậm cho mục đích này. Truy cập vào số c: hoặc / dir của bạn và xem phải mất bao lâu để thực hiện file.info(dir(recursive = TRUE)). Tập lệnh dos hoặc bash có thể nhanh hơn.

Nếu không, mã sẽ ổn.

Answer 5

Bạn có thể sử dụng chức năng tclTaskSchedule trong gói tcltk2 để thiết lập chức năng kiểm tra cập nhật và chạy mã của bạn. Điều này sau đó sẽ được chạy một cách thường xuyên (bạn đặt thời gian) nhưng vẫn sẽ cho phép bạn sử dụng phiên R của bạn.