我该怎么办，能否收回自己的承包地？

10年前我母亲一个人在农村，几个子女都在县城，由于母亲年老无法耕种几口人的土地，父母决定将老家的几间房屋卖掉，将自己承包的土地（自留地、责任地、山林）转包给买房屋的人，转包合同明确土地用于农作物耕种，转包年限与母亲承包年限一致，房屋买卖合同与土地转包合同各一份（没有通过村民委员会）。但2013年转包人将承包的土地赠与他人修建房屋，又将土地与他人调换，而且在我母亲承包的土地上修建房屋时镇土管所、村民委员会在审批的过程中没有通过我们原承包人同意。就这个问题我们多次联系转承包人他一直不与我们见面（在外打工），我们又多次找村民委员会回复要我们双方自行解决。
    我认为：我们只是对房屋进行了买卖，但土地我们只是进行了转包，而且在转包合同中土地只限于农作物耕种，转包人将土地赠与他人修建房屋、与他人的土地进行调换，违背了我们双方合同的本意。
请问：根据《合同法》我们能否收回自己的承包地？