조세호 조폭 연루설 폭로, 결국 하차