Een optie is om spark-redis niet te gebruiken, maar rechtstreeks in Redis op te zoeken. Dit kan worden bereikt met df.mapPartitions
functie. Enkele voorbeelden voor Spark DStreams vindt u hier https://blog.codecentric.de/en/2017/07/lookup-additional-data-in-spark-streaming/. Het idee voor Structural Streaming is vergelijkbaar. Zorg ervoor dat u de Redis-verbinding correct afhandelt.