老公背叛了我,我应该怎么办?要离婚吗?

我和我老公是在**里自己恋爱认识的，谈了四年并结婚，我家只有我一个女儿，所以他是做上门的，但他心里却一直不怎么愿意承认，他和我妈妈的关系不怎么好，这么多年来他都没怎么喊过我妈，也没怎么说过话，是因为当初我妈是不怎么同意我们在一起。我很爱我老公，为了能和他在一起我和我妈吵过很多的架，现在和他结婚有十多年了，女儿已经9岁，我老公现在在一个镇政府做公务员，他什么爱好都没有，就只特别喜欢打牌，一天不打就闷得慌，我和他并没有长期住在一起，他经常是个把月半个月回家一次，在单位时打牌我都知道但离得远也管不着，可是他本来就很少回家，回家了也到外面朋友家打牌，经常半夜回家或打个通霄，所以为这事我们从婚后就经常吵架，他曾经对我说过，他打牌我管不着，但不会做对不起我的事就可以了，我听了这句话心里稍稍好想了一点，就不怎么反对他打牌了。可是四个月前他的一个女同学告诉我说我老公有外遇了，就是这个女同学的生意伙伴，我当时听了如当头一棒，那个女人我认识的，而且关系还可以。我想起我老公从今年开始就有点不对头，但我太相信我老公了所以就没多想，只是以为他在外面打牌而已，没想到……，而且他和那个女人已经有半年的关系了，我查了我老公的电话，这半年来他和那女人每天要打二三十次电话，每天晚上通话都一两个多小时，多是在半晚打的，我看到这些才相信那个女同学所说的都是真的，最后问我老公他不否认，还说了一句话，说要杀了那女同学！我伤心哭了三个晚上，我问他他想怎么办？我老公一句话也没有……事后我找到那女人和她当面谈了，她却说现在的社会男人女人就是这样，还要我想开些，她说她也是有家有孩子的，没想破坏我的家，她会回去的，我真不知道这世上还有如此厚颜无耻无耻的女人……后来那女人离开回到自己老家了，我以为事情就这样过去了，可是并不是这样，我老公跟她专门买了一张电话卡，自己也备了另外一张卡，每天还是在通话，而且有一天不小心被我听到了电话里的通话录音，他说她走到天涯海角他都要找到她，那女人说他要好好对我，我老公说已经不在乎了，当我听到这些句我心里有如刀绞，我没有和他吵，一个人跑到外面哭了大半天，回到家他没有在家，打他电话关机，第二天却发现他是跑到那女人那里去了，在那个县里开了房和那女人住了一个晚上……后来的后来他在单位一个月没回来，之后请了假跑到那女人那里在县里开房住了四天才回来，回不定期也没有回家而是直接回单位了，这几个月来我们都身心疲惫，我一直提出离婚可他又逃避，这些日子他又好像好些了，可是对我却一直很冷漠，我真的感觉他已经对我没有感情了，虽然我还很爱他，但是得不到回报的爱我又总觉得生活没有意义，我应该怎么办呢，下定决心和他离婚吗？如果离婚他什么都不会有，他是出错方，我又真的不忍心，我很矛盾……能给我一些意见吗？ 收起