我家的砖房是在原来的基地建造的，在房屋的范围内还没有收集，因为房屋已经变成了危险的房屋，村里要求重建，国家土地部门也来了，后来的房屋还没有建造，也违反了建筑法，请问谁是违法的责任人。