父母情感问题

事情是这样的：
1.人物情况：父亲（53岁，小学文化），
            母亲（51岁，初中文化，很传统农家妇女），
            我（30岁，已婚，大学文化），哥（已婚，大学文化）
2.情况描述：从我小的时候到现在，爸爸大多数时间一直在沿海地区从事房屋建筑做工的工作，期间少数几年在家里务农。妈妈大多数时间在家里务农，少数几年跟爸爸在外面，帮爸爸做饭、洗衣。
    在2002年，妈妈回到家里务农，可能回的时候跟爸爸有吵架，原因是爸爸打牌输钱的事。
    在2003年，这一年我考上大学，也是在这一年，家里发现爸爸跟其他女人（第三者）在一起。这年暑假，我到了爸爸做事的工地，把他叫了回家，并且跟他说了很多要跟那个女人分开，因为两方都是有家庭的人，这样害了2个家庭。当时，爸爸跟我回到家里，但是，让他跟那个女人分开的事情效果不怎么好。爸爸在家里呆了1个月的样子，就又回到的沿海做事的地方，继续跟那个女人呆在一起。一直到这一年冬天寒假，我和哥哥（在读大学）一起到了爸爸做事的工地，跟爸爸谈了很多，最后总结跟他说：“1.他还想要我们这个家的话，就立马跟那个女人分开；2.他如果跟那个女人在一起的话，我们两兄弟就跟他脱离父子关系”。遗憾的事，不知哪根筋搭错了的爸爸硬是不悔改。
    就这样一直持续。
    期间我们上大学的学费，3/4的费用都是我们跟妈妈向亲戚朋友借来的。毕业上班工作前几年也都自己还清了这些费用。
    从2013年到现在，考虑了还是自己的亲父亲，在这期间关系缓和的时候，有5、6次过年时候爸爸还是回家里过年。爸爸骗家里已经跟那个女人分开了，但事实告诉我们爸爸在撒谎，他一直都跟那个女人在一起。
    我跟哥大学毕业，都在城市找到了稳定的工作，都在城市成了家。
    这些年来，包括上学、找工作的事都没怎么让我伤脑筋，但是爸爸的事情确实是让我很苦闷。我们想到，等他老点，做事情做不得了，可能自然会跟那个女人分开，只要爸爸自己没什么身体上的病，随他了（其实是很无奈的想法），想想别人家的爸妈从来就是为自己子女担心这、担心那的，但是自己爸爸却是这样让人费神……
     一直到上个月（2013.9月份），在得知爸爸的意图是要跟妈妈离婚，（爸爸想法是：妈妈到城市跟我们带小孩后，他跟那个女人回老家，真是太离谱了），知道这个情况后，我跟哥到了爸爸做事的工地。在跟他谈了很多道理的前提下，爸爸死不悔改。最后，我们放下话：“他这样的话，我们跟他永远跟他脱离父子关系”，我们实在是忍不住了，最后吵了一架，不欢而散。
    在2011年，爷爷过世后，妈妈除了在家里务农外，还要照顾奶奶生活。无知的爸爸还说出：“现在奶奶在世，就让妈妈照顾奶奶；哪天奶奶过世后，就把妈妈从老家赶走……”这样令人心寒的话。

我想问律师的是，我可以通过法律途径告爸爸：1.不赡养奶奶。2.非法同居……

这些罪名都成立不，法律会怎么判决？还可以通过法律途径告爸爸什么罪名？在此多谢！