Pap Ndiaye, un modéré déjà détesté par la droite