关于农村土地转让

我家在93年分了15亩地，我们是2队的，随后用5亩地和同村3队的李某2亩地相换，当时口头约定15年换回，15年后，李某不承认口头协议，直到今天土地丈量发土地试用证，乡政府把所有权土地使用证写成李某的名字，与乡政府交涉后，乡政府说只有双方都同意才能更改，而李某霸占田地不协商，不更改，请问该怎么办。