为了方便耕种1997年进行土地调换，现在能要回来吗。

1997年我的第一能承包耕地与村水库地进行调换，158平米作为村医疗所的建设用地，当时村医疗所只修了100平米，还余58平米在背后，当时村医了所负责人跟我说随时用地随时划出来，同年为了方便耕种与本社田主进行同等丈尺进行调换，[口头协议说有58平米是村医了所的集体用地]当时调地没有跟村医疗所的负责人和村上的干部说，社上写了调地手续，现在村医疗所要地来扩建医疗所，我叫现田主划地出来他不划，这土地产生了纠纷，请问我现在为了还集体的土地，我不调地了各归各的土地耕种，可不可能。