农村宅基地是为了保障农民基本生活和农业生产需要而设立的土地使用权，属于国家与农民之间的一种协议性质的合同。在农村宅基地的划拨过程中，农民需要缴纳一定的费用，这部分费用包括土地出让金、建筑费、公共基础设施费用等。
如果农民在获得宅基地之后没有进行规定时间内的建造，造成该宅基地一直没有得到有效利用，那么在法律上是不允许退钱的。因为，政府和村委会为了能够给农民提供更好的生产和生活条件而划出了这些宅基地，而且划拨宅基地不仅仅是为了个人利益，也是为了整个农村的发展和建设。因此，在办理宅基地的过程中，政府部门已经明确规定，宅基地分配给农民后需要在一定的时间内开始建设，否则就会面临回收宅基地的风险，而且既不能要求政府退回部分的费用，也不能要求政府归还宅基地。
当然，在某些情况下，如银行贷款需要抵押宅基地等，农民可以通过法律途径，证明自己没有违反政策规定，来保护自己的利益。所以，我们建议农民在申请宅基地之前，一定要认真考虑，充分咨询政府部门和相关法律条款，确保自己能够在规定时间内开始建设，保障自己的合法权益。
