借婚姻索取财物

我70岁的姨夫因和家人不在一起共同生活，被有夫之妇的两名妇女被骗，3年多来经常两人晚上一起到他住宅处骗出钱、衣裤等财物达10万余元，老人于今年6月分因病过逝，从他的遗产中翻出记录本有记录：通过几个银行转帐（有票证）、当面给现金（打欠条）等有6万多远，还有接待她两吃饭、当面给钱（但不打欠条）、给物等又有4万多元。请问这些钱屋当事人不肯返还，我们该怎么去追回来。