Ich habe einige SQL-Anweisungen (Einfügen, Aktualisieren, Löschen, Abschneiden) in einer Transaktion ausgeführt werden, alle 5 Minuten. Ich kann die AWS-Datenpipeline nicht verwenden, da das minimale Planungsintervall 15 Minuten für die Pipeline beträgt. Gibt es Open-Source-Tools, die ich verwenden kann? Kann ich Talend Open Studio verwenden, um dies zu erreichen?Gibt es Open-Source-Planungstools für AWS Redshift?
Sie können versuchen, die Begrenzung des Zeitplanintervalls von 15 Minuten zu überwinden, indem Sie 3 Pipelines erstellen und diese 5 Minuten auseinander starten.
Eine andere Lösung wäre, OnDemand-Pipeline zu verwenden. Dann können Sie ein CloudWatch-Ereignis (mit Zeitplan) erstellen, um die Lambda-Funktion auszulösen. Innerhalb des Lambda können Sie die Pipeline-Ausführung starten.
Ich bin nicht sicher, ob es möglich ist, Einfügen, Aktualisieren, Löschen, Abschneiden auf Rotverschiebung Tabellen mit Pipeline, ist es? –
Über einen Cron-Job und eine SQL-Datei? – jbird