这钥匙他不主动交出来，是不是还在等着前夫还完贷款回去接着住？