Spark kan inte hitta com.mongodb.spark.sql.DefaultSource
paketet, därav felmeddelandet.
Allt, annat ser bra ut behöver bara inkludera Mongo Spark-paketet:
> $SPARK_HOME/bin/pyspark --packages org.mongodb.spark:mongo-spark-connector_2.11:2.2.0
Eller se till att jar-filen är på rätt väg.
Se till att du kontrollerar versionen av Mongo-Spark-paketet som krävs för din version av Spark: https://spark-packages.org/package/mongodb/mongo-spark