2 Stimmen

Direkter Zugriff auf S3 aus einer EMR-Map/Reduce-Aufgabe

Ich versuche herauszufinden, wie man direkt von einer EMR-Map-Aufgabe in den s3-Bucket schreiben kann. Ich möchte einen Python-Streaming-Auftrag ausführen, der einige Daten aus dem Internet abruft und sie in s3 speichert - ohne sie an den Reduzierungsauftrag zurückzugeben. Kann mir jemand dabei helfen?

CodeJaeger.com

CodeJaeger ist eine Gemeinschaft für Programmierer, die täglich Hilfe erhalten..
Wir haben viele Inhalte, und Sie können auch Ihre eigenen Fragen stellen oder die Fragen anderer Leute lösen.

Powered by:

X