Hur tar jag bort de tomma tweetarna med filter() i pyspark?

Om dina uppgifter så här

tweets = sc.parallelize(["title1", "", "title2", "title3", ""])

du kan använda len(x) som filtervillkor:

tweets.filter(lambda x: len(x) > 0).count()