霍光的權力合法性來自擁立、輔佐漢昭帝之功,如果替孝武衛皇后翻案,即替巫蠱之禍中的戾太子劉據翻案,這個行為會否認漢昭帝繼位的合法性,也會連帶著損害自身的合法性。
巫蠱之禍中衛皇后以皇宮的侍衛支持戾太子劉據,而戾太子劉據確實有造反的行為,試圖武裝占據首都長安,事后即使其孫漢宣帝劉詢也不敢為此事翻案,給劉據所上謚號為惡謚「戾」(不思順受曰戾),霍光更犯不著損害自身而去為衛皇后翻案了。