在计算工厂利润时，非经常性收入和非经常性费用需要分别加入或减去。具体步骤如下：
1. 首先，计算工厂的净利润，即扣除所有日常经营活动相关的收入和费用后的利润。
2. 然后，将非经常性收入加入到净利润中。非经常性收入应该是与企业日常经营活动无关的收入，如出售资产所得。将这些收入加入到净利润中，可以得到工厂的利润。
3. 接下来，将非经常性费用从净利润中减去。非经常性费用是与企业日常经营活动无关的费用，如罚款、赔偿等。将这些费用从净利润中减去，可以得到工厂的利润。

最终，通过加入非经常性收入和减去非经常性费用，可以计算出工厂的利润，这样可以更准确地反映工厂的经营状况。