去年七月的募款餐會，是李登輝最後一次在台聯的公開活動中現身。熟悉內情人士透露，若不是要將蔡英文介紹給支持者，李登輝根本不願出席這場餐會，「李總統站的其實是蔡英文的台」。去年選前也適逢台聯十周年黨慶，台聯事前對外宣布，大病初癒的李登輝將出席黨慶，但活動當天李登輝並未現身，黃昆輝代為宣讀李登輝賀詞，黃昆輝當時表示，李登輝是因身體狀況不佳，臨時無法出席。但親李人士卻表示，李登輝事前從未答應出席活動，也不知賀詞從何而來。
台聯人士指出，二○○七年台聯逐漸走下坡時，李找來黃接任台聯黨主席，原對他寄予厚望。然而，二○○八年立委選舉，黃昆輝多次對李登輝保證選情樂觀，事後卻以慘敗收場，已讓李登輝頗有微詞。前年五都選舉，黃昆輝不顧李登輝意願，多次要求李放下身段為議員候選人站台，最後卻仍全軍覆沒，更讓李登輝大為光火。
導致兩人決裂的導火線是在五都敗選後，黃昆輝主動求見李登輝表達辭意，李登輝也積極替台聯物色繼任黨主席人選。沒想到人都找到了，黃昆輝卻又說不辭了，讓李登輝自認被擺了一道，更不願光環繼續被台聯消耗，從此決定讓台聯「走自己的路」，再也不願過問黨務。
知情人士也透露，黃昆輝不但與李登輝疏遠，就連他一手安排的台聯立委，也經常與他發生摩擦。據了解，一位民進黨立委為經營基層，有意與台聯立委在雲林成立聯合服務處，此舉卻引發與黃昆輝友好的藍軍派系勢力不滿，計畫因此中斷，此顯示黃昆輝以自己人脈網絡介入台聯運作。
親李人士透露，由於李黃關係破裂，台聯內部也分裂為李、黃兩派，紛擾不斷。