我自己家盖房子，村里非让我按照他们的图纸盖，说不然拆了不赔钱，我该怎么办

拆迁不给赔偿 ，你可以向行政部门进行反映，要求依法给予你拆迁补偿。
《国有土地上房屋征收与补偿条例》第二条　为了公共利益的需要，征收国有土地上单位、个人的房屋，应当对被征收房屋所有权人（以下称被征收人）给予公平补偿。
第二十七条　实施房屋征收应当先补偿、后搬迁。作出房屋征收决定的市、县级人民政府对被征收人给予补偿后，被征收人应当在补偿协议约定或者补偿决定确定的搬迁期限内完成搬迁。任何单位和个人不得采取暴力、威胁或者违反规定中断供水、供热、供气、供电和道路通行等非法方式迫使被征收人搬迁。禁止建设单位参与搬迁活动。