是的，公司向银行贷款支付的利息，可以凭银行回单做费用，允许税前扣除。根据《中华人民共和国企业所得税法》第十六条规定，企业在本期内发生的利息支出，可在当期扣除。根据《企业所得税会计准则》第216条规定，企业在本期内发生的合理的借款利息可以在当期扣除，可以凭回单证明，可以做为税前扣除费用。 除此之外，企业应向税务机关提供充分有效的证据，才能获得税前扣除。比如：应提供银行借贷合同、借款利息支出清单、银行账户流水等，以便征税机关进行审查。此外，企业还要遵守税收征管的相关规定，不得以假借他用或其他欺诈的手段逃避税收征管。