本发明涉及一种针对服装标签和吊牌实现自动化审核处理的系统，包括标签和吊牌图像采集模块，用于采集含服装标签和吊牌的图像；文本检测处理模块，与所述的标签和吊牌图像采集模块相连接，用于检测和识别文本，建立服装标注知识图谱，并审核文本；图形检测处理模块，与所述的标签和吊牌图像采集模块相连接，用于检测图形区域，分割区域图形，进行分类识别和语义解释，并审核图形内容。本发明还涉及一种实现针对服装标签和吊牌的自动化审核处理的方法。采用了该针对服装标签和吊牌实现自动化审核处理的系统及其方法，基于深度神经网络技术，将自然场景中的文本检测、文本识别、图像检测、图像识别、语义理解和知识图谱技术相结合，全自动对服装标签和吊牌进行规范化审核，且能自动输出不符合规则后的建议标注，不仅提高了服装标签和吊牌审核的工作效率，而且基本上杜绝了审核差错。