公司办公室装修费用应该按照以下步骤进行做账：
1. 根据装修合同或发票，确认装修费用的金额、发票号码、开票日期等信息。
2. 根据公司的会计政策，确定装修费用的归属科目。一般情况下，装修费用应该归入固定资产账户或装修费用账户。
3. 将装修费用的金额记入会计凭证中，借记固定资产账户或装修费用账户，贷记银行存款账户或应付账款账户。
4. 如果装修费用已经支付，需要开具付款凭证并将付款凭证与会计凭证进行关联。
5. 如果装修费用还未支付，需要在应付账款账户中记录该笔费用，并在支付时再进行会计处理。
6. 在月末结账时，需要对固定资产账户或装修费用账户进行折旧或摊销，将费用分摊到多个会计期间。

需要注意的是，装修费用的做账应该遵循会计准则和公司的会计政策，并保证准确、完整、合法、合规。