交通事故责赔偿

10月10日，我妻子的同事开车出去办事和出租车发生刮擦（车主是我妻子），没有人伤，就是出租车的保险杠和前叶子板损坏，去交警做责任认定，交警认定双方各付一半责任，我们同意，而出租车司机在认定书上拒不签字，非要说我们的责任。第二天下午其跑到我家（因为我还没下班，家里只有老人和2岁多的孩子），并且打电话给我说不赔就天天去我家，我迫于保护家人，我让他第二天处理。我给他开了个条子，写明保险杠和叶子板损坏有我承担费用，修车发票拿回来后我找保险公司报销，可条子开完后，理赔人员说双方各一半责任应由出租车的保险公司直接赔付，和我们没关系，并且告诉我出租车的保险杠本来就是坏的，而且没有责任认定书不予定损。我随后告诉出租车，让其到交警那里继续做责任认定，但其就是不去。他不去认则，我也就不给他付修车费。现在他通过法院起诉我，请问我不是肇事者也不是车主，我开的条子还有法律效力吗？我能怎么办？