我和现在男朋友认识快半年，他快七十岁了，他是被小他三十多岁的女人绿了，人家冷落他两年，今年分手的，分手之后认识我，可他一直留着人家的电话和微信，我叫他删除这些，免得看到伤心，但他还是不删，最近这段时间，他们反而还经常打电话和微信聊天，我心里不舒服，而他说只电话联系又没见面，我知道他舍不得别人，我该怎么处理？