Wir haben die cloudberry explorer pro-Lizenz für die native Multipart-Upload-Funktion erworben, wollten sie jedoch automatisieren. Ich glaube, basierend auf ihrer Dokumentation, dass die alte Chunk-Methode zugunsten ihrer neuen mehrteiligen Funktionalität veraltet ist. Wir haben die Optionen getestet, die in der Powershell-Dokumentation aufgeführt sind. Diese Optionen sind wie folgt: „Definiert eine Größe von Klumpen in KB; Dateien, die größer als ein Stück wird in Stücke geteilt werden“
Set-CloudOption -UseChunks -ChunkSizeKB
Wir haben überprüft, dass dies erfolgreich Dateien über die Beschränkung von 5 GB auf unseren S3-Bucket hochgeladen hat. Ich versuchte eine Antwort von Cloudberry zu bekommen, ob dies die alte Chunking-Methode oder die neue Multi-Part-Methode war, aber ich konnte keine klare Antwort bekommen. Sie bestätigten, dass diese Powershell-Option unterstützt wurde, weil wir pro verwendeten, aber sie konnten nicht bestätigen, welche Option der Powershell-Befehl verwendete.
Von dem, was ich sagen kann, scheint, dass Cloudberry Legacy-Chunking-Mechanismus tatsächlich nur die Datei in einzelne Dateien brechen würde und somit in S3 als mehrere Dateien erscheinen würde. Der Chunk Transparency-Mechanismus in Cloudberry Explorer würde es ermöglichen, dass mehrere Chunks als einzige Datei in der Cloudberry Explorer-GUI angezeigt werden. Da ich die Datei als einzelne Datei auf der S3-Seite sehen kann, gehe ich davon aus, dass die Powershell-Option die neue Multi-Part-Funktionalität und nicht die Legacy-Chunking-Funktionalität verwendet. Wieder konnte ich das nicht durch Cloudberry bestätigen, also sind es Spekulationen von meiner Seite.
Ich kann jedoch bestätigen, dass die Verwendung der oben genannten Powershell-Optionen bei der Verwendung von Powershell für ein Upload-Limit von 5 GB sorgt.
Danke Antoine, das war die richtige Antwort, um das 5GB Upload-Limit in Powershell zu umgehen. Wir haben damit Schluss gezogen, wie in meinem Update unten dokumentiert. – TITECHSD