Segmentierung von Daten von einer Videokamera

Einführung

In der modernen Welt wird die Aufgabe der Segmentierung, wie sich herausstellte, ein- oder zweimal gelöst, obwohl ich dachte, es sei etwas Kompliziertes und Überraschendes. Sie müssen lediglich einige Artikel lesen, bestimmte Bibliotheken installieren und die Daten markieren. Alles an allem dauert einige Stunden, außer das Erstellen eines Testmusters.

Datenmarkup

Dieser Schritt bei der Implementierung der Segmentierung von Videostream-Frames ist einer der arbeitsintensivsten in Bezug auf die menschliche Arbeit.

Dazu müssen Sie spezielle Programme zum Markieren der Frames des Videostreams verwenden. Wir öffnen einfach die erforderliche Videodatei mit diesem Programm und markieren die Frames, nachdem wir zuvor Klassen erstellt haben, in die wir die Bilder segmentieren werden. In meinem Einführungsbeispiel sind die Rahmen in die folgenden Klassen unterteilt (Auto, Straße, Fußgängerüberweg, Rasen, Gebäude, Menschen, Bürgersteig, Straßenmarkierungen).

In der Tat Positionen wie Straße, Gebäude, Rasen, Bürgersteige, etc. Es ist möglich, es nicht zu erkennen, da die Kamera in diesem Fall starr fixiert ist und sich diese Bereiche daher immer an derselben Stelle befinden.

Zahl:  1 Programm zum Markieren von Frames eines Videostreams
Zahl: 1 Programm zum Markieren von Frames eines Videostreams

Training eines neuronalen Netzwerks zur Bildsegmentierung

( , ).

.

, . 4 (, , ... , , , ) 60 DeepLab v3+ ( ResNet-18). . 2.

, , , . .

Zahl:  2 Verwenden eines schnell trainierenden neuronalen Netzwerks zur Bildsegmentierung
. 2

, (. 3 4), .

Zahl:  3 Erstellen einer Maske für das interessierende Straßensegment
. 3
Zahl:  4 Maske des interessierenden Straßensegments erstellt
. 4

, (. 5 6).

Zahl:  6 Segmentierung des interessierenden Straßenabschnitts
. 6

, , (. 7 9). (. 8).

3%, 54%. , . , , , . .

Zahl:  7 Der prozentuale Anteil der Fläche von Autos an der Fläche der Straße und ihrer Elemente beträgt ~ 3%
. 7 ~3%
Zahl:  8 Analyse der Verkehrsstaus in Stoßzeiten
. 8
Zahl:  9 Der prozentuale Anteil der Fläche von Autos an der Fläche der Straße und ihrer Elemente beträgt ~ 54%
. 9 ~54%

, . ( ), , .

- , . ( , ), . ., . , . , , . , , , , , , .

PS Wenn jemand weiß, mit welcher Software ein Videostream von einem YouTube-Stream so einfach wie möglich aufgezeichnet werden kann?) Die Kameras schreiben einfach Daten in Form eines YouTube-Streams in einen Kreispuffer (die letzten 12 Stunden) und bilden so eine Videoüberwachung, bei der jeder Bewohner des Hauses die letzten 12 Stunden anzeigen kann.




All Articles