【案例分析題】

我山東一家進出口公司和某外國公司訂立進口尿素5000噸的合同，依合同規(guī)定我方開出以該外國公司為受益人的不可撤銷的跟單信用證，總金額為148萬美元。雙方約定如發(fā)生爭議則提交北京中國國際經(jīng)濟貿(mào)易仲裁委員會仲裁。1990年10月貨物裝船后，該外國公司持提單在銀行議付了貨款。貨到青島后，我公司發(fā)現(xiàn)尿素有嚴重質(zhì)量問題，立即請商檢機構(gòu)進行了檢驗，證實該批尿素是毫無實用價值的廢品。我公司持商檢證明要求銀行追回已付款項，否則將拒絕向銀行支付貨款。

公司是否有權(quán)拒絕向銀行付款？為什么？