关于易地扶贫搬迁,如果搬迁者没有签订同意搬新房拆旧房的协议,并且当初去领用搬迁房的钥匙可以选择退房吗?

你好,关于易地扶贫搬迁,如果搬迁者没有签订同意搬新房拆旧房的协议,并且当初去领用搬迁房的钥匙,钥匙是政府的人直接领取的,现在政府要强制拆房,搬迁者不想拆房,可以选择退房吗?