必须按照合同赔一万才能解约吗？

签了新建房的购房合同，条款对我们很不利。没有保护买方的文字。在pre dry wall meeting前，已经验了两次房。

第一次验房后发现问题，验房时连窗户都没安装完毕。另外也发现了别的问题。

他们改动了承重墙。我们做了第二次验房。承重墙本来只是水泥上边的double bottom plates之间有3mm以上的空隙，被他们改成safety Harzard. 连螺栓上的螺母都没有。与他们说的改好了，pass code根本不一样。

很害怕买那个房子，危险。所以提出退出合同。

问：我们必须按照合同赔他们一万刀吗？