没有感情的婚姻还发现老公是阳痿，我要离婚

因我父母和他父母认识有20多年，以前在同一家单位，前年遇见就撮合我和他们儿子恋爱，2年来我们的关系都是靠双方父母维系才得到发展，也没有波澜和吵架，随着年纪增长，我们也都同意今年结婚，婚前男的买了房付了首付，每个月还按揭，装修时跟我家借了几万元，但是当时我父母没有好意思开口让他们打借条，说是结了婚就还，双方也就应许。婚前我们一直都未发生关系，他从来没有亲吻的动作，我原本认为他是老实本分的人，也就没有在意，可是结婚已经三个月了，我们都没有性生活，而且对我也不冷不淡的。因为家里借了很多钱装修买房，他父母就把老屋卖了我们现在同住，老公也一直逃避我，晚上都是让我先睡着，他才睡的，这样下去我感受不了家的温暖和和谐，也没有感情的碰撞，他是一个很自私、以自我为中心的人，要面子也不愿和我谈这个问题，我还年轻如果这样下去，我还是想离婚解决吧。因为结婚的时候我家借了5万元给他家，所有家电都是我父母买的大概有2万，还有床上用品等等一万多元，我想跟他协议把这些钱还我，不知道这样可以吗？请您指点解答。谢谢！