买了二手房,房产证已经下来了,贷款没下来,和房东协商先拿到了钥匙,目前正在装修,但现在房东因贷款没下来为由要把钥匙拿回去,还没装修好,我不给可以吗?