父亲去世一个月，父亲在镇农村信用社贷款10万元，这钱作为子女该怎么处理。

我父亲2016年2月23日在镇农村信用社贷款10万元，贷款证上的用途标的是用于建房，贷款的时候镇农村信用社来我家调查贷款的用途，拍我家老房子的照片后就贷款给我父亲了，贷款期限是2年，按季度还利息，到期还本，（2016年2月24日—2018年2月23日两年太平洋保险都有买保险，具体是什么险我不懂，我理解的是贷款险）2018年2月23日贷款到期，我父亲因经济能力还不上，通过贵州“黔农e贷款APP”又转贷了两年（任何保险公司都没有保险），也就是2018年2月23日至2020年2月23日，2018年9月6日我父亲因急性脑梗死病逝，镇农村信用社打电话给我说：要求我们还我父亲贷款的钱，说父债子还，不还会影响我们的银行信用问题，影响我们今后的做各种事，我是我父亲的长子，还有个兄弟，我成家快一年，我的孩子半岁，我兄弟未成家，我母亲49岁，也因十年前左右患过精神失常，现在精神也是不正常；镇农村信用社说这个钱属于我和兄弟还，一直在问我我父亲贷款的钱用于做什么的，他当时贷这个款是修房子的，房子修了30几万，都是我和我兄弟自己出钱修的。
我想请教一下律师，这个钱是真的要父债子还吗？我该怎么处理这个贷款？有请律师给我说一下该怎么处理这个贷款。