Caffe SIGINT

Question

पर स्नैपशॉट नहीं है, Caffe प्रशिक्षण बंद हो जाता है, लेकिन फोटो नहीं है। इसे कैसे जोड़ेंगे? मेरे solver:

net: "course-work/testing/model.prototxt" 
test_iter: 200 
test_interval: 500 

base_lr: 0.001 
momentum: 0.9 
weight_decay: 0.005 
lr_policy: "fixed" 

display: 50 
max_iter: 60000 

snapshot: 5000 
snapshot_format: HDF5 
snapshot_prefix: "course-work/testing/by_solver_lr0" 
snapshot_after_train: true 

solver_mode: CPU 

बैश स्क्रिप्ट:

TOOLS=./build/tools 
NET_DIR=course-work/testing 

$TOOLS/caffe train \ 
    --solver=$NET_DIR/solver_lr0.prototxt 2>&1 | tee $NET_DIR/1.log 

Answer 1

के माध्यम से tee और पाइप Caffe के उत्पादन पर रीडायरेक्ट किया जा रास्ता प्रक्रियाओं के लिए ओएस के हैंडल और स्थानान्तरण संकेतों को बदल सकता है। | tee से बचने के लिए SIGINT कैफी तक पहुंचने का प्रयास करें।

ध्यान दें कि caffe tool दो झंडे

DEFINE_string(sigint_effect, "stop", 
      "Optional; action to take when a SIGINT signal is received: " 
       "snapshot, stop or none."); 
DEFINE_string(sighup_effect, "snapshot", 
      "Optional; action to take when a SIGHUP signal is received: " 
      "snapshot, stop or none."); 

है ये झंडे आप SIGINT और SIGHUP पर Caffe के व्यवहार को परिभाषित कर सकते हैं।

Answer 2

Caffe उत्पादन लॉग इन करने का एक अच्छा तरीका

GLOG_log_dir=/path/to/log/dir $CAFFE_ROOT/bin/caffe.bin train 
—solver=/path/to/solver.prototxt 

यह Caffe उत्पादन का सीधा प्रवेश करता है और निश्चित रूप से SIGINT Caffe तक पहुँच जाता है।