父亲告我要赡养费，我家有哥俩个，我弟还在我前面成家，后来我结婚欠了许多债

父亲告我要赡养费，我家有哥俩个，我弟还在我前面成家，后来我结婚欠了许多债，父亲让我把土地分给弟弟种，哥俩个平抬我结婚债，当时弟弟是分家出去的了，就这样我把土地划给了弟弟，父亲什么都不管，每年我和弟弟要给他1600元钱，每家各给。但是我从来不见弟弟给过，我的每年都给一分不会少，父亲特别偏心弟弟，给弟弟家小孩买衣服买玩具，甚至家具什么都买给弟弟家。跟我关系闹很僵，，我俩个小孩都是自己带，老人没带过一天，我们生活在一个大院子里面，每天出进行同陌生人，小孩也不知道哪是爷爷，只知道是姐姐家爷爷，就在俩年前父亲说让我把他的土地量给弟弟，他想跟小的生活在一起，我就把土地量给了弟，并写了一张由村委会调解的赡养协议，当时写得很清楚谁种老人土地谁赡养老人，另一个不再承担一切费用，老人也表示愿意，还签字按了手印，现在又来跟我要赡养费，我不是不给，房子刚建好欠了许多债，小孩又小，我种的土地又少，我还能要回老人的另一半土地吗