Visé par des accusations de violences psychologiques, Julien Bayou se met en retrait