学校不给开毕业证明书该找哪个部门解决

最近要用毕业证，但是丢了，周折再三，也找不到解决的地方。
第一：学校只开具一张信纸式样的学历证明，盖有公章，我咨询所在地区广东省相关机构，答复为不认可，他们只认可毕业证明书。 
第二：学历验证要提供毕业证的原件，但是我的被偷了，广东这边说必须得原校方开具毕业证明书---不是毕业证明信。 
第三：学校目前开具的证明不符合很多地区的学历验证要求--一般都要求毕业证或者毕业证明书原件，很多地区不予受理。
第四：我有权要求学校教务处按教育部的要求开具毕业证明书吗？教育部统一印刷统一格式的，省教育厅说此事早已下放给学校办理，让我找学校。学校的答复是以前从没办过，短期内也不会考虑办，就像一个皮球踢来踢去，不知费了多少口舌和话费，。
第五：如果学校不开这个证明书，广东这边又不承认他的证明信，那么，我这样的问题该向什么部门反馈？是我学校所在省的省教育厅，还是高教部？？？ 

我十分急切得希望得到解答~！！谢谢！！！。 
另外，早在1996年，就有这样一个通知：
国家教育委员会高校学生司 

关于使用统一印制毕业证明书的通知 

教学司[1996]8号