In Teil eins wurde gezeigt, welche YARN Container und welche Linux Prozesse beim Aufruf der Spark Shell gestartet werden. Im zweiten Teil dieses Beitrags führt Olaf Hein aus, wie die Python Shell mit PySpark gestartet wird. Python + Spark Im letzten Beispiel wurde die Spark Shell für Scala verwendet. Bei der Verwendung von Python werden zusätzliche...
In den letzten Wochen wurde ich mehrfach von Kunden gefragt, was im Betriebssystem passiert, wenn Spark bzw. PySpark Jobs ausgeführt werden. Dabei waren vor allem die folgenden Fragen von Interesse: Welche Prozesse werden im Betriebssystem gestartet?Mit welchen Rechten werden diese Prozesse ausgeführt?Welcher Python Interpreter und welche Bibliothe...
Zusammen starten Am Ende der Planungszeit sind die Bedenken aus dem Weg geräumt und die Entscheidung gefestigt, es miteinander zu versuchen. Das neue Zuhause wird eingerichtet und der Umzugstermin festgelegt. Eine Zeit, in der neue Freunde an Bedeutung gewinnen. Zu diesen Freunden werden sicherlich dsconfig, eusm, ldapmodify und ldapsearch gehören....
Man nehme … Schauen wir uns nach dem Überblick die Umsetzung an. Die Verzeichnisdienste gehören zum Identity-Management-Paket der Fusion-Middleware. Ich bevorzuge die Lösung mit dem Oracle Unified Directory (OUD), weil es seine eigene schlanke Datenbank enthält. Über ein Web Interface zur Verwaltung von OUD-Instanzen, genannt Oracle Unified Di...
Kann man ein technisch komplexes Konzept mit dem sozialen Modell einer Ehe vergleichen? Entscheiden Sie am Ende selbst. Es ist nicht leicht, den Überblick und die Kontrolle über etwas zu behalten, was auf viele Orte verteilt ist. Datenbankbenutzer bilden da keine Ausnahme. Das weckt den Wunsch nach einem Weg, alles an einem Ort zu bündeln. Die Nut...
Am 10. September 2019 trifft sich die DOAG Regionalgruppe Rhein-Main in Wiesbaden zum Austausch und Networken. Thema des Treffen ist Big Data für den DBA. Melden Sie sich jetzt an und seien Sie dabei. ORDIX AGKreuzberger Ring 1365205 Wiesbaden 10. September 2019, 18 Uhr 18:00 UhrBegrüßung und Neues von der DOAGThomas Tretter, DOAG e.V.18:15 UhrÜber...