离婚该怎么做

我爸妈都40多岁了，我22岁，弟弟17岁了。爸爸在外有外遇3年了，这些年他一直不管家和我们，他一直不肯对我们诚认他在外有女人。我妈试问了爸爸的老板，老板说他有带老婆在那做事，与事妈妈就想办法找到爸爸那去了。可是那个女的已经到离他不远的地方去做事了，但是他们还在联系，他们租了房子在那个女的工厂附近。妈妈知道一些就都说出来，所以爸爸在妈妈面前承认，可在我和亲戚面前他不承认。 爸爸一直都是个不顾家的人，妈妈辛苦了二十多年，所以我决定查证事实。我来到爸爸做事的地方，与他做事的知道这件事情，也见过那个女的。我在的那些天爸爸也是背着我们与那女的联系，我无意间在爸爸的旧手机里看到一些那个女人发给他的暧昧信息，其它的东西全部都删除了。与是我就试着要玩他的新手机，可他怎么也不给。不到几天那个女的竟然发信息给我和弟弟，说的都是爸爸的事情，所有责任都在爸爸之类，她也在说谎。 他跟妈说：别想从他那里拿走一分钱，离婚妈什么都别想得到，而且欠的债妈妈要还。我跟爸爸谈过，可他真的是无药可救了。我想抓证据，如果有证据了不离婚，爸爸又是那样的人，他根本就是没良心的，要是离婚了妈妈已经40多了，而且对我和弟弟不好，我到底该怎么做才好吧，请你们帮助我吧。