拆违建通常归 县级以上地方人民政府的行政主管部门管。具体负责部门可能包括以下几类：城市综合执法局：负责执行拆违行动，需要其他部门的配合。城乡规划主管部门：如城乡规划局，有权对城市规划区内违反规划建设行为和非法临时建设进行查处，但在强拆前需要向县级以上地方人民政府提出申请，由县政府责成有关部门采取查封