2017-02-20 1 views
1

Normalerweise ausgebildete Caffe-Modell sind in .caffemodel Erweiterung und tatsächlich sind sie in binary protobuf Format.Wie man trainiertes caffe Modell im h5 Format zu C++ caffe Netz lädt?

Irgendeine Idee, wie man ein caffe Modell in hdf5 Format zum caffe Netz in C++ lädt?

Ich habe ein Modell mit Python Caffe in hdf5 formatiert.

Meine Anwendung ist in C++ mit Caffe C++ Version und ich bevorzuge C++ als Python.

Wie liest man das Modell in Caffe trainiert Modell im Format Hdf5 zu C++ Caffe net?

Ich weiß, dass Caffe hdf5data Schicht innen hat. Gibt es dafür ein Beispielprogramm?

EDIT:

I verwendet CopyTrainedLayersFromHDF5() api und bekam Fehler folgende Laufzeit.

HDF5-DIAG: Error detected in HDF5 (1.8.11) thread 140737353775552: 
    #000: ../../../src/H5G.c line 463 in H5Gopen2(): unable to open group 
    major: Symbol table 
    minor: Can't open object 
    #001: ../../../src/H5Gint.c line 320 in H5G__open_name(): group not found 
    major: Symbol table 
    minor: Object not found 
    #002: ../../../src/H5Gloc.c line 430 in H5G_loc_find(): can't find object 
    major: Symbol table 
    minor: Object not found 
    #003: ../../../src/H5Gtraverse.c line 861 in H5G_traverse(): internal path traversal failed 
    major: Symbol table 
    minor: Object not found 
    #004: ../../../src/H5Gtraverse.c line 641 in H5G_traverse_real(): traversal operator failed 
    major: Symbol table 
    minor: Callback failed 
    #005: ../../../src/H5Gloc.c line 385 in H5G_loc_find_cb(): object 'data' doesn't exist 
    major: Symbol table 
    minor: Object not found 
F0220 15:32:14.272573 24576 net.cpp:811] Check failed: data_hid >= 0 (-1 vs. 0) Error reading weights from model_800000.h5 
*** Check failure stack trace: *** 
    @  0x7ffff64afdcd google::LogMessage::Fail() 
    @  0x7ffff64b1d08 google::LogMessage::SendToLog() 
    @  0x7ffff64af963 google::LogMessage::Flush() 
    @  0x7ffff64b263e google::LogMessageFatal::~LogMessageFatal() 
    @  0x7ffff691c3a3 caffe::Net<>::CopyTrainedLayersFromHDF5() 
    @   0x40828d ExtractFeature::ExtractFeature() 
    @   0x40ce78 main 
    @  0x7ffff5bf8f45 __libc_start_main 
    @   0x4080c9 (unknown) 

Program received signal SIGABRT, Aborted. 
0x00007ffff5c0dc37 in __GI_raise ([email protected]=6) 
    at ../nptl/sysdeps/unix/sysv/linux/raise.c:56 
56 ../nptl/sysdeps/unix/sysv/linux/raise.c: No such file or directory. 
(gdb) cd 
[17]+ Stopped     gdb ./endtoendlib 

EDIT 1:

>>h5ls model_800000.h5 command gave me 

conv1     Group 
conv2     Group 
forget_gate    Dataset {1, 250, 1, 1274} 
inception_3a    Group 
inception_3b    Group 
inception_4a    Group 
inception_4b    Group 
inception_4c    Group 
inception_4d    Group 
inception_4e    Group 
inception_5a    Group 
inception_5b    Group 
input_gate    Dataset {1, 250, 1, 1274} 
input_value    Dataset {1, 250, 1, 1274} 
ip_bbox_unscaled0.p0  Dataset {4, 250} 
ip_bbox_unscaled0.p1  Dataset {4} 
ip_bbox_unscaled1.p0  Dataset {4, 250} 
ip_bbox_unscaled1.p1  Dataset {4} 
ip_bbox_unscaled2.p0  Dataset {4, 250} 
ip_bbox_unscaled2.p1  Dataset {4} 
ip_bbox_unscaled3.p0  Dataset {4, 250} 
ip_bbox_unscaled3.p1  Dataset {4} 
ip_bbox_unscaled4.p0  Dataset {4, 250} 
ip_bbox_unscaled4.p1  Dataset {4} 
ip_conf0.p0    Dataset {2, 250} 
ip_conf0.p1    Dataset {2} 
ip_conf1.p0    Dataset {2, 250} 
ip_conf1.p1    Dataset {2} 
ip_conf2.p0    Dataset {2, 250} 
ip_conf2.p1    Dataset {2} 
ip_conf3.p0    Dataset {2, 250} 
ip_conf3.p1    Dataset {2} 
ip_conf4.p0    Dataset {2, 250} 
ip_conf4.p1    Dataset {2} 
output_gate    Dataset {1, 250, 1, 1274} 
post_fc7_conv.p0   Dataset {1024, 1024, 1, 1} 
post_fc7_conv.p1   Dataset {1024} 
+0

Ja, ich habe die .h5-Datei überprüft und es ist im Binärformat. – batuman

+0

aber ist das Binärformat korrekt? wenn du 'h5ls model_80000.h5' hast, was bekommst du? es sieht so aus, als ob caffe erwartet, dass die Datei einen "Daten" -Datensatz hat, der nicht da ist ... – Shai

+0

h5ls-Befehl gab mir wie in EDIT1. Ich sehe Dataset. – batuman

Antwort

1

Haben Sie darüber nachgedacht die net Objektmethode void CopyTrainedLayersFromHDF5(const string trained_filename);? Es scheint, als ob es das tut, wonach Sie suchen.

Wie für "HDF5Data" Schicht: Sie sind hier zwei Dinge verwirrend. Die hdf5-Datei, die Sie gespeichert haben die trainierten Parameter des Netzes. Im Gegensatz dazu speichert die "HDF5Data" Schicht die Trainingsbeispiele, die zum Trainieren des Netzes verwendet werden.

+1

ja Ihre Lösung ist korrekt. Ich muss an meiner h5-Datei arbeiten, damit sie in C++ caffe geladen werden kann. – batuman