Magin kring Kanadas Justin Trudeau är numera ett minne blott. Nu börjar han ses som en belastning för sitt parti.