退休人员劳务报酬所得按照个人所得税法的规定计算纳税。具体计算方法如下：
1. 首先，从劳务报酬所得中扣除5000元的基本减除费用，得到应纳税所得额。
2. 然后，根据个人所得税税率表，按照逐级累进的方式计算应纳个人所得税额。
3. 最后，从应纳个人所得税额中扣除已缴纳的税款和其他可以抵扣的税前扣除项目，得到应缴纳的个人所得税额。

需要注意的是，退休人员劳务报酬所得的个人所得税缴纳方式与其他个人所得税缴纳方式一致，可以选择按月、按季、按年申报缴纳。