根据相关资料查询显示，不能解除买卖合同。房屋买卖不仅仅是对该部分违章建筑的买卖，是对整个房屋的所有权和土地使用权的买卖，因此根据法律规定部分合同条款的无效不影响其他合同条款的效力。