帮我下忙

去年我认识个男的，由于性格和各方便都不合适，我就提出分手了，可中间他一直缠着我，4月我住院开刀，他给了我钱，我当时不要，他说不管你以后和不和我在一起，这个忙我都帮了，可现在他说 假如我不和他在一起的话，就去告我拿婚姻为目的诈骗他的钱  请问我已经怎么办？