正确记录发工资退回的会计凭证需要按照以下步骤进行：
1. 首先确定退回的工资金额和原来的发放工资金额是否一致。
2. 在会计凭证上，将退回的工资金额作为借方，记在应付工资科目下。
3. 根据具体情况，确定相应的贷方科目。如果是退回现金，则记在现金科目下；如果是退回银行账户，则记在银行存款科目下。
4. 在凭证上填写相关的摘要，说明退回工资的原因和具体金额。
5. 确认凭证的借贷平衡，并填写好日期、凭证号等信息。
6. 凭证制作完成后，需要经过财务主管或财务负责人的审核，并进行会计凭证的记账。

需要注意的是，退回工资的会计凭证需要及时记录，并与相关的退回工资凭证、退回工资单据进行核对，确保凭证的准确性和完整性。