1953年5月，北京市的交通事故简报称：“女三中门前发生交通事故4起，主要是因为帝王庙牌楼使交通受阻所致。牌楼的戗柱和夹杆石多次被撞，牌楼有危险。东交民巷西口路面坡度过陡，又有牌楼阻碍交通，亦属事故多发点。”

　　5月9日，中央批准了北京市委的请示：拟拆掉朝阳门、阜成门城楼和瓮城，交通取直线通过；东四、西四、帝王庙牌楼一并拆除。对古建筑的大规模拆除开始在北京展开。

　　为了让这个旧都多保留一些有价值的牌坊、琉璃宫门等古建筑，在扩大的国务院办公会议上，梁思成和吴晗争得面红耳赤。

　　梁思成是梁启超的儿子，著名的建筑学专家。他当时任北京市都市计划委员会的副主任。据记载，吴晗对梁思成说：“您是老保守，将来北京城到处建起高楼大厦，您这些牌坊、宫门在高楼包围下岂不都成了鸡笼、鸟舍，有什么文物鉴赏价值可言！”