Je kunt ze verwijderen door expliciet te coderen zodat je errors="replace" kunt gebruiken of ignore De resulterende bytes zullen niet mooi zijn, maar ze zullen worden gelogd.
logging.error("Exception: " + str(ex.args[1].encode(encoding='charmap', errors='replace')))