Müssen meine Daten in den Speicher passen, um Spark zu nutzen?
Does my data need to fit in memory to use Spark?
No. Spark's operators spill data to disk if it does not fit in memory, allowing it to run well on any sized data. Likewise, cached datasets that do not fit in memory are either spilled to disk or recomputed on the fly when needed, as determined by the RDD's storage level.
Nein. Die Operatoren von Spark verschieben Daten auf die Festplatte, wenn sie nicht in den Speicher passen, sodass es mit Daten jeder Größe gut läuft. Ebenso werden zwischengespeicherte Datensätze, die nicht in den Speicher passen, entweder auf die Festplatte ausgelagert oder bei Bedarf neu berechnet, je nachdem, wie groß das RDD ist.
general_qa
de