章诒和所著《往事并不如烟》披露说在文化大革命之前,吴晗曾同康生一样,利用其职权,强行从中国大陆文物收藏家手中廉价收购珍贵文物。 吴晗在1950及60年代批斗其他知识分子时,非常投入和卖力,最后也在政治斗争中落得同样的下场。 吴晗主张拆除北京城墙和北京的古建筑,甚至更提出过改建故宫的构想。这也让他与以梁思成为代表的反对拆毁北京古建筑派发生激烈的交锋。