工程经济纠纷

本人在公路施工方承包了土方运输工程，运输土方的车辆在运输过程中碰到了电线杆，现在电线杆主人要求公路施工方赔偿五万元，公路施工方直接扣我工程款五万元，我跟出事的司机协调他不拿这么多钱，这线顶多也就值1000块钱，我也把拉土车扣了不让他走，司机就是不打算拿钱，现在这事怎么处理。求各位帮忙。