亲戚来借钱,告诉他不借后他还来缠我,咋办

我跟你碰到同样的事。我自己也正买房,差钱。目前是装穷回绝了。