Python get_default_spark_conf Beispiele

Programmiersprache: Python

Namespace / Paketname: tests.unit_test_utils

Methode / Funktion: get_default_spark_conf

Beispiele auf hotexamples.com: 2

Python get_default_spark_conf - 2 Beispiele gefunden. Dies sind die am besten bewerteten Python Beispiele für die tests.unit_test_utils.get_default_spark_conf, die aus Open Source-Projekten extrahiert wurden. Sie können Beispiele bewerten, um die Qualität der Beispiele zu verbessern.

Beispiel #1

Datei anzeigen

def spark(spark_conf):
    conf = unit_test_utils.get_default_spark_conf(spark_conf)
    return SparkSession.builder.config(conf=conf).getOrCreate()

Beispiel #2

Datei anzeigen

def spark(spark_conf):
    conf = unit_test_utils.get_default_spark_conf(spark_conf)
    return SparkSession.builder.config(
        conf=conf).setMaster("yarn-client").getOrCreate()