碰到这样的供应商我该如何应对？

有一家供应商，做出的产品尺寸多处不符合图纸要求（我承认部分不符合的尺寸不影响我们公司司的实际使用），当初出于订单急的原因，在某些尺寸上允许了特采。
如今，该家供应商变得有理了，我们一发现有尺寸不符，对方就提出你们当时特采不是也用的好好的，现在却来吹毛求疵，我们不会改进了！
我是这家供应商品质方面的一个主要联络人，发现问题不提吧，我有责任，提出把，被对方上述回答顶回，本人是公司新人，没什么权利，真不知道如何对付？
各位好心人 请指点！