门面买卖合同

供销社的门面以长租形式的方式租给承租人，承租人再以租代卖转卖给我方，当时双方有口头约定，巧借长租形式长租给我方，保证其永久性，且实际约定是买卖该门面。双方现在并未签订合同，卖方要求我们付全款，约73万，我方已付69万，门面已由我方使用，至今是3年多。现在卖方要求付清剩余款项，由于没有房产手续，我方拒绝付款，并想要卖方退还已付款项，我方愿意归还门面。但是卖方不肯退还款项，并阻止我方使用门面。请问该怎么处理该事件。