sql >> Database >  >> NoSQL >> MongoDB

Hoe Java Spark sparksessie-samplesize te configureren

Het is spark.mongodb.input.sampleSize

SparkSession spark = SparkSession.builder()
                .master("local[2]")
                .appName("SparkReadMgToHive")
                .config("spark.sql.warehouse.dir", warehouseLocation)
                .config("spark.mongodb.input.uri", "mongodb://localhost:27017/test.testcollection")
                .config("spark.mongodb.input.sampleSize", 50000)
                .enableHiveSupport()
                .getOrCreate();



  1. Mongoose:findOneAndUpdate werkt een bestaand veld niet bij

  2. MongoTemplate-methode of query voor het vinden van maximale waarden uit een bestand

  3. Mongo $exists query retourneert geen correcte documenten

  4. Hoe Redis Multi-Exec te implementeren met behulp van Spring-data-Redis