我应该找谁要余款？

有一块土地是村集体的，村把它卖给A搞开发（合同上写土地上的遗留问题A自己解决）。
由于我在这块地上种了庄稼，我便要求A补偿我的损失。A也答应补偿，于是我与A写了一分协议书（A愿补偿我5000元，此地开发动工前先付我2000元，余款等房子做到一半后付清，双方签字），A当场就给了我2000元，他把庄稼就推平了，说过几天就动工。
可谁知现在房子已动工，我找A商量余款3000元的事，A却说不是他在做房子，他已把土地转卖给B，还叫我要钱找B，说谁做房子就找谁要钱，并要我退还他的2000元，同时还把转卖土地的凭证给我看。我找B，B却不承认有这回事，说是在A手上买的土地，根本不关我的事，我找谁签的协议就找谁要钱！
我现在应该怎么做？究竟找谁要钱？ 
问题补充：有什么法律依据吗？村在这件事上要付责吗？
我问过别人，A也确实卖了土地，听说是被黑社会的人打了，被迫卖出此地的！