2018年我家开始棚改、我们村支书带着两个测量工作人员来进行了房屋测量、合同签约等、然后就叫我们可以去购房了、于是我家向街道办事处申请了房屋征收证明去购房、向银行申请了部分贷款用于购房、从2018年开始每月向银行还款至今、棚改款还未下款、因为没有棚改款下款、我家的购房剩余尾款未付清、导致现在房屋未成功交付给我们、我们还一直偿还着贷款的和银行利息、就一直等到现在也没什么结果、现在房开商要求我们退房、退还我们所支付的所有费用、我想多多少少应该有点补偿、但是政府部门和房开商都说没有、房开商告诉我们不退房、就打官司、请问现在应该怎么处理这个事情呢？