如何看待质量和采购对供应商来料不良的态度？

近期来料的金属件，发现一个安装孔接近下差，用下差的塞规检查很紧，不易通过，要通过需用力，显示孔径不合格。经判断可能孔内有毛刺。让供应商前来对孔进行处理，老板的弟弟，采购部经理和我为此事争议起来了，他认为增加了供应商的成本，这个孔不用处理，工艺上毛刺是没有要求处理的。我坚持为了确保客户的安装使用要求，必须满足图纸尺寸要求这个观点。最后他只得作罢。我是站在质量的立场。如何看待质量和采购对供应商来料不良的态度？