一、行政责任
由县级以上文物主管部门责令停止违法行为、限期恢复原状，并处以5万元以上50万元以下的罚款；逾期未恢复的，相关部门可依法强制执行，产生的费用由违法主体承担。
二、民事责任
违法主体需承担对建筑产权人、使用人的侵权赔偿责任，包括结构修复费用、相关经济损失等，情节严重的还需承担相应的精神损害赔偿。
三、刑事责任
若拆改行为造成历史建筑严重损毁，构成故意损毁文物罪，可处3年以下有期徒刑或者拘役，并处或者单处罚金；情节特别严重的，处3年以上10年以下有期徒刑，并处罚金。
四、信用惩戒
违法主体会被纳入文物保护失信名单，后续无法参与各类历史建筑保护相关的项目申报、招投标活动，相关行为也会向社会公示。
