김정인, '한일 해저 터널'출범 후 당내 역풍 맞았다