需要交税。

因为根据税法规定，个人收到的服务费（如工资保证金）需要缴纳个人所得税。

而退还农民工工资保证金属于个人收入，需要按税法规定计算纳税。

具体的纳税比例和金额取决于该人2019年度的综合所得额。

若该农民工工资保证金是因为合同纠纷等原因暂扣的，则需要先解决纠纷问题后再进行退还，否则可能面临法律风险。

同时，为了避免未来出现类似问题，建议双方在签订合同时谨慎约定相关条款、明确权利义务。