雖然北京有消息指李剛涉嚴重違紀問題，主要涉及他出掌澳門中聯辦時間，但有香港政界人士指，李在港任職中聯辦副主任時間更長，與香港政、商界關係更密切，若李剛在澳門有貪腐行為，「你話佢（李剛）喺香港冇做都冇人信」，他估計今次未提李剛在港的問題，「或者係未到收網嘅時候，到郁香港中聯辦時先公開」。

李剛於2003年至2012年任香港中聯辦副主任，期間表現高調，與不少香港政、商界有交往，2010年政改方案表決前，李剛曾在中聯辦大樓接見民主黨成員，中央其後接受民主黨提出立法會超級區議會功能組別方案，民主黨轉而支持政府政改建議。

到2011年特首選舉，盛傳中聯辦力撐梁振英，有傳當時中聯辦主任彭清華及李剛有為梁拉票，而梁當選翌日即到中聯辦與李剛及彭清華會面，被批評是向中聯辦「謝票」， 2012年發生南丫海難時，李更與梁振英到醫院巡視，更搶先在梁之前發言。

不過，李剛及彭清華卻同時於2012年底突然被調離香港中聯辦，當時盛傳兩人被要求立即離開，連與在港政界人士道別機會也沒有，當時有傳兩人是犯錯調走，但本地左派人士極力否認有關說法。李剛赴澳任中聯辦副主任後，於2014年1月升任主任，去年7月被調任正部級的國僑辦副主任，上月22日遭國務院免去職務，到昨日再由全國人大發布李剛涉嚴重違紀消息。

有香港政界人士指，李剛在港任職中聯辦時間更長，他在港結交不少超級富豪，而他任內中聯辦被揭投資房地產，亦有傳中聯辦與華潤集團原董事長、被控貪污受賄的宋林有關係，「佢（李剛）如果係澳門有貪腐，你話佢係香港冇做都冇人信！」而且當年張曉明接任中聯辦主任時，首次講話就表明中聯辦日後嚴禁收禮，「根本北京一早知西環上上下下都貪」，他估計北京放風指李剛問題只涉及出掌澳門中聯辦時間，可能是北京未決定針對香港中聯辦問題「收網」，「到郁香港中聯辦時先公開」。

2010年曾以「終極普選聯盟」成員身份與李剛商討政改的工黨李卓人指，記得當年與李剛會面時，尤如「同幅牆傾計」，李剛並未多作回應，認為中央應就李剛涉嚴重違紀一事，清楚交代案件細節，「李剛個罪行，同佢做香港中聯辦副主任時有冇關係？若有需要，香港廉署應該接手調查」。李卓人又指，李剛在中共領導層只是「卒仔」，但令人聯想事件會否涉及中國主席習近平希望打擊的另一些「大老虎」。何俊仁接受本報查詢時表示，2010年是與馮巍多次進行工作會議後，才進行在中聯辦的政改會面，故對李剛認識不深。