Parsen Sie mehrere Textzeilen mit Powershell und Export nach CSV

Question

Ich habe mehrere große Protokolldateien, die ich in CSV exportieren möchte. Zunächst möchte ich zwei Teile teilen, Datum und Ereignis. Das Problem, das ich habe, ist, dass nicht jede Zeile mit einem Datum beginnt.

Hier ist ein Beispiel für ein Stück Protokoll. Datum/Uhrzeit sind immer 23 Zeichen. Der Rest variiert mit dem Protokoll und der Ereignisbeschreibung.

würde ich das Endergebnis gefällt, wie diese in Excel zu suchen.

Hier ist, was ich bisher ausprobiert habe, gibt aber nur die ersten 23 Zeichen jeder Zeile.

$content = Get-Content myfile.log -TotalCount 50 
for($i = 0; $i -lt $content.Length; $i++) { 
$a = $content[$i].ToCharArray() 
$b = ([string]$a[0..23]).replace(" ","") 
Write-Host $b } 

Answer 1

Lesen Sie die Datei in rohen als String mehrzeiligen, dann RegEx verwenden zum Zeitpunkt Muster aufgeteilt und für jeden Chunk machen ein benutzerdefiniertes Objekt mit den beiden Eigenschaften, die Sie wollen, wo der erste Wert die ersten 23 Zeichen, und der zweite Wert ist der Rest der Zeichenfolge getrimmt.

(Get-Content C:\Path\To\File.csv -Raw) -split '(?m)(?=^\d{4}-\d{2}-\d{2} \d{2}:\d{2}:\d{2})'| 
    Where{$_}| 
    ForEach-Object{ 
     [PSCustomObject]@{ 
      'Col1'=$_.Substring(0,23) 
      'Col2'=$_.Substring(23).Trim() 
     } 
    } 

Dann können Sie das zu einer CSV-Pipeline oder tun was immer Sie wollen mit den Daten. Wenn die Dateien wirklich massiv sind, ist das vielleicht nicht machbar, aber es sollte bei Dateien funktionieren, die bis zu ein paar hundert MB groß sind. Verwenden des Beispieltext, den Ausgang:

 
Col1     Col2 
----     ---- 
2017-09-04 12:31:11.343 General BOECD:: ProcessStartTime: ... 
2017-09-04 12:31:11.479 General MelsecIoWrapper: Scan ended: device: 1, ScanStart: 9/4/2017 12:31:10 PM Display: False 
2017-09-04 12:31:11.705 General BOECD:: ProcessEndTime: ... 
2017-09-04 12:31:13.082 General BOECD:: DV Data: 

... Die am Ende der beiden Leitungen sind, wo sie den mehrzeiligen Wert, um es auf dem Bildschirm angezeigt wird abgeschnitten, aber der Wert ist es intakt.

(?=...) ist eine sogenannte "positive Lookahead Assertion". Solche Assertionen bewirken, dass ein regulärer Ausdruck mit dem angegebenen Muster übereinstimmt, ohne ihn tatsächlich in die zurückgegebene Übereinstimmung/Zeichenfolge aufzunehmen. In diesem Fall gibt die Übereinstimmung die leere Zeichenfolge vor einem Zeitstempel zurück, sodass die Zeichenfolge dort aufgeteilt werden kann, ohne den Zeitstempel zu entfernen.