这样的情况，如果追究责任的话，买方有错，卖方有错，村委会的干部更有错！
要说谁的过错大，应当是村委会干部过错大，他们应当负主要责任，土地的所有权是集体的，做为集体土地的管理者，就是村委会的干部们，如果有人买卖土地的话，就说明了村委会的干部，没有做好管理集体土地不允许买卖失职的责任，如果有人买卖了所有权是集体的土地，而且还在土地上盖房子的话，那么集体土地的管理者们还看不见，还是看见了不去过问，不管是什么样的情况，做为集体土地的管理者们，也就是村委会的干部，要负主要责任的，在《中华人民共和国土地管理法》第七章法律责任之第七十四条明确规定，“对直接负责的主管人员”，依法给予处分，构成犯罪的，依法追究刑事责任，所说的直接负责的主管人员，应当就是集体土地的直接管理者，也就是村委会的干部们！
其次要负责任的的是卖地的人，土地的所有权是集体的，农民只有土地的承包权，你把只有承包权的土地卖了出去，你就是违法的，根据《中华人民共和国土地管理法》第七章法律责任之第七十四条的规定，买卖或者以其他形式非法转让土地的，由县级已上人民政府自然资源主管部门没收非法所得，“对直接责任人员”，也就是直接卖地人员，依发给予处分，构成犯罪的，依法追究刑事责任。这就是说，你把土地卖了，要依法没收你卖地的非法所得，如果构成犯罪的，还要依法追究刑事责任的！
而买土地的人，与卖土地的人是一样的，也要负相同责任的，买了土地又在土地上盖房的，在《中华人民共和国土地管理法》第七章法律责任之第七十四章中也明确规定，擅自将农用地改为建设用地的，限期拆除在非法转让的土地上新建的建筑物和其他设施，恢复土地原状，对其他直接责任人员，依法给予处分，构成犯罪的，依法追究刑事责任，在这里，这个直接责任人员，无疑就是指买土地盖房的人了，他非法买地，又非法盖房，还要限期拆除在非法转让的土地上新建的房子了，这样就是买地的钱白花了，盖的房也要拆除，损失也是最多的了！
所以，如果有人买卖土地建房的话，不但买卖土地的双方都有责任，村委会的干部更是有责任的！