Dit is geen psycopg-fout:het is een PostgreSQL-fout die psycopg gewoon vertrouwt.
De fout lijkt te suggereren dat er geen impliciete tekst[]->jsonb[] cast is, dus je moet een handmatige toevoegen:
INSERT INTO my_table (columns) VALUES (%s::jsonb[]);