近日，某地市民反映其在申请二胎指标时，被告知之前领取的独生子女费应如数退还。

尽管国家卫计委下发通知，允许已发放独生子女费的家庭不需退还，但该省卫计委则认为国家政策为指导性意见，各地有权追回已领取的独生子女费。

你认为对于生二胎的单独夫妇，该不该退还独生子女费呢？