Ik denk dat je de andere tabel moet gebruiken om te beginnen bij...
SELECT challenge.id AS challenge_id,
entries.id AS entry_id
FROM
challenge_details challenge
LEFT JOIN challenge_entries entries ON entries.challengeid = challenge.id and entries.userid = <user_id>
ORDER BY challenge.start_date
het toevoegen van een groep door kan naar wens worden gedaan...