Wie erfolgt die Eingabe von Bildern und Labels für die Semantic Instance Segmentierung mit neuronalen Netzen?

Question

Also ich weiß für ein Standard Faltungs neuronales Netzwerk können Sie das neuronale Netz (NN) eine Datei mit einer Liste von Etiketten oder einfach trennen Sie Ihre Klassen durch Ordner, sondern zum Beispiel Segmentierung Ich stelle mir vor, es ist anders richtig?

Wenn Sie beispielsweise eine Website wie labelme2 verwenden, können Sie Bilder mit Anmerkungen versehen und segmentieren und dann zusammen mit Maskendateien und XML-Dateien für Etiketten herunterladen. Muss das Originalbild, das Maskenbild und die XML-Datei anschließend in die Instanzsegmentierung NN eingegeben werden?

Vielen Dank im Voraus.

Answer 1

Sie sollten Ihr NN so trainieren, dass Sie es für die Vorhersage verwenden können.

• Wenn Sie wollen einfach nur die Klassen vorhersagen, aus dem Bild, dann alles, was Sie zu Ihrem NN senden mögen ist

  • das Originalbild (wahrscheinlich ausgeglichene Farbe) und
  • vorhersagen, die Klassen aus dem XML (konvertieren, dass in eine 1 Hot-Klasse-Codierung)

• , wenn Sie die Maske auch vorhersagen wollen, senden Sie dann

  • das Originalbild (wahrscheinlich ausgeglichene Farbe) und
  • Vorhersage die Maske und Klassen aus dem XML (konvertieren, dass in eine 1 Hot-Klasse-Codierung)

die oben genannten Ziele (nur Klassen oder Klassen + Maskenvorhersage) steuert die Entscheidung, die Klassen oder die Klassen + Maske zu speichern.