0
Wie erstelle ich eine PCAP-Datei in Hadoop, die die Netzwerkpakete nur mit Flume enthält?Wie erfassen Sie den Netzwerkverkehr in Hadoop mithilfe von Flume, ohne Wireshark zu verwenden?
A
Antwort
0
Sie können dafür Apache Metron verwenden.
Es verwendet nicht Flume, sondern Kafka + Storm und indiziert Ereignisse in Elasticsearch/Solr.
Sie könnten wahrscheinlich auch Apache Nifi verwenden, was schöner ist als Flume IMO.
Wenn Sie nur wollen Flume, müssen Sie die pcap-Datei (irgendwie) auf einem Server zu erzeugen, die einen Flume Agenten laufen, dann ist es nur eine Frage, dass die Agenten der Konfiguration des Quelldatei-Verzeichnis zu setzen, der Flume-Kanal und HDFS sinken entsprechend.
Verwandte Themen
- 1. Wie erfassen wir alle drahtlosen Netzwerkverkehr wireshark und wpa2?
- 2. Wie erfassen Sie den Netzwerkverkehr des Remote-Systems?
- 3. Erfassen von POP3 mit Wireshark
- 4. Erfassen Netzwerkverkehr programmgesteuert (kein Stamm)
- 5. Wireshark Remote-System-Pakete erfassen
- 6. Wie finden Sie den Paketverlust in Wireshark?
- 7. Erfassen von Netzwerkaktivität in Android-Emulator
- 8. Kann WinPcap verwendet werden, um den Netzwerkverkehr pro Prozess zu erfassen?
- 9. Wireshark zeigt nicht den gesamten Verkehr
- 10. So erfassen Sie das Ereignis "Rechtsklick" mithilfe von getMouse()
- 11. Wie alle UDP-Nachrichten wie Wireshark ohne Tropfen zu fangen?
- 12. Wie CompressionCodec in Hadoop verwenden
- 13. Wie erfassen Sie Netzwerkverkehr mit Selen-Webdriver und Browsermob-Proxy auf Python?
- 14. Android-Emulator: Wie überwacht man den Netzwerkverkehr?
- 15. Wie kann der lokale ausgehende Netzwerkverkehr in .NET ohne Verwendung von PCap abgefangen werden?
- 16. libpcap Netzwerkverkehr Interception
- 17. Messen von Netzwerkverkehr in C#
- 18. Erfassen von Tastenanschlägen ohne Fokus
- 19. Flume + Spark - Speichern von DStream in HDFS
- 20. Wie Debuggen von Firebase-Problemen von Wireshark?
- 21. Wie können Sie mithilfe von Angular UI-Grid auf Zeilenentitätsdaten zugreifen, ohne die Zeilenauswahl zu verwenden?
- 22. Sortierte Wortzählung mithilfe von Hadoop MapReduce
- 23. Wireshark: wie für ein bestimmtes SYN-Paket zu filtern
- 24. Replizieren MySQL zu Hadoop
- 25. Kann WebHDFS mit Flume verwendet werden?
- 26. Sie müssen den Dateinamen erstellen, indem Sie den Ordnernamen und den Titel mithilfe von XSLT verwenden
- 27. Reguläre Ausdrücke von Python: Erfassen von Lookahead-Werten (Erfassen von Text, ohne es zu konsumieren)
- 28. Scala wie Standardeinstellungen zu verwenden, ohne sie
- 29. Parkett ohne Hadoop?
- 30. So erfassen Sie den Sitzungsstatus
danke, jetzt habe ich die pcap-Datei erstellt und nahm den Netzwerkverkehr als Datenstrom. Gibt es eine Möglichkeit, eine JSON-Datei zu generieren, die den Stream enthält? – EngAhmed
Ich bin sicher, es gibt, aber nicht mit Flume. Das wäre etwas möglich mit einem Sturmbolzen oder einem Nifi-Prozessor, obwohl –
so gibt es einen Hinweis darauf zu tun? irgendwelche Anweisungen ?? irgendwelche Tutorials? Irgendwelche Schritt für Schritt ?? Ich habe bereits die pcap-Datei Ich möchte nur im JSON-Format irgendwelche Ideen ?? – EngAhmed