Clojure bekommen Daten von db, transformieren und drucken in Konsole

Question

Ich habe folgende Aufgabe.
Ich muss eine Konsole-Anwendung erstellen, die einen Parameter verwendet, der die Anzahl der zu generierenden Daten ist. Die Daten sind die Adresse und der Name der Person. Ich erstelle eine Tabelle adress mit state, city, zip-code Felder. Ich erstelle auch eine Tabelle mit first und last name Spalten. Ich benutze HugSQL, um mit PostgreSQL umzugehen. Also ich möchte Adressen, Vor- und Nachname dynamisch mischen und so das Ergebnis in die Konsole drucken, die Anzahl der generierten Werte hängt von dem Argument ab, das an die Anwendung übergeben wird. Dies ist mein Code:

(ns project.core 
    (:require 
    [project.db.get :as get])) 

(defn parse-int [s] 
    (Integer. (re-find #"\d+" s))) 

(def usa-data (get/usa)) 

(defn usa-adress-getter [] 
    (let [data (into {} (shuffle usa-data)) 
     city (get data :city) 
     state (get data :state) 
     zip (get data :zip_code)] 
    (str state " " city " " zip))) 

(defn repeater [times] 
    (dotimes [i times] 
    (println (usa-adress-getter)))) 

(defn -main [value] 
    (repeater (parse-int value))) 

Hier prüfe ich nur das Ergebnis der usa-adress-getter Funktion. Aber die Zeit der Auswertung der Funktion ist zu groß, ich habe Limit, das 1 Million Werte in 1 Minuten ist. Wie kann man die Geschwindigkeit der Auswertung erhöhen? Funktion (get/usa) rufen Sie alle Daten von adress Tabelle ab.

Answer 1

Es ist schwierig, aus diesem Stück Code zu sagen, wo die Performance-Engpässe sind, aber hier sind ein paar Tipps:

• Nutzungsart Hinweise für Hotspots. Manchmal kann der Clojure-Compiler die Typen nicht herausfinden, und dann können Tipp-Tipps die Dinge sehr beschleunigen. In diesem Fall könnten Sie die Abfrage so ändern, dass sie die verkettete Zeichenfolge aus der Datenbank zurückgibt (mithilfe einer SQL-Funktion wie concat). Auf diese Weise müssen Sie nicht die Werte aus dem Hash abrufen und die Zeichenfolge selbst erstellen.
• Drucksachen können langsam sein, also könnten Sie das beseitigen, wie @leetwinsky sagt.
• Sie müssen die Leistung Ihres Codes im Detail messen, sonst können Sie nicht feststellen, ob eine Änderung eine gewisse Geschwindigkeit erreicht hat. Zum Beispiel könnten Sie einen Timer setzen, der die Anzahl Msecs für jeweils 1000 verarbeitete Datensätze ausgibt. Natürlich nur eine Änderung gleichzeitig.

Hoffe das hilft.