勞委會自去年開始追討款項，關廠勞工組成的「全國關廠工人連線」在國際勞工協會、桃園縣產業總工會等勞團的協助下展開抗爭，不時發起行動，迄今已持續半年。
歷經十二次會議，勞委會昨終於端出解決方案，預計以就業安定基金補貼勞工還款，但全國關廠工人連線表示不接受這項方案。
潘世偉強調，政府當年提出的是貸款方案，提供勞工申貸，勞委會必須處理國家債權的問題，否則勞委會同仁會被追究責任。
潘世偉說，包括勞委會、就業安定基金管理委員會的勞資代表，已經想盡各種方式處理此案，並給予關廠勞工最大的寬容。
潘世偉指出，貸款不可能一筆勾銷，否則立法院、監察院也會追究，但勞委會能理解關廠勞工的心情，因此希望在訴訟之外和解，若勞工對補貼方案有意見，「細節可以再談」。他說，勞委會盡量讓勞工獲得最大程度的補貼，經濟相當困難者，甚至可以百分之百補貼，等於是免除債務。
對於全國關廠工人連線堅持此案的貸款是「代位求償」，政府未負起不用還款承諾。潘世偉說，勞委會也查了，但沒有證據顯示曾經有政府官員表示不用還款。但如果全國關廠工人連線還有疑義，可以提出訴訟，由司法進行調查。
潘世偉再三強調，「我們（勞委會）已經想盡辦法了」，他呼籲抗爭勞工不要採取激烈抗爭手段，這無助於解決問題，對勞工本身、對整個社會都不好。