求助！请问这样算不算勒索？我该怎么办？

前几天，有个亲戚的很不听话的小孩在佛山打劫被关到了拘留所，他爸妈在老家很担心。后面有个A老乡说他要去给律师送什么文件，顺便让我和他一起去律师所咨询一下，我就去了，到了A老乡那，这位老乡又说认识个B某，通过关系，可以把小孩弄出来，说之前有人进去过就是他们B某给弄出来的。因为A老乡是很熟悉的也没多想，（就没在去律师所了）就约了B某一起吃了个饭，后面也就是说让他们看看能不能行得通（给了B某2000元，B某说是请人吃饭的钱）？几日过后，我家亲戚说不用找B某他们了，后来B某他们就硬要我们给红包钱，说已经打通关系了，每人要500元，一共5个人，请问这个钱我们不愿意给，他们硬要，天天打电话骚扰，这要硬红包算不算是勒索？？我该怎么办？