Enlink_Young的博客

安全主管老王：“兄弟们，持续一周的数据防泄漏演习中，客户名单轻易发送到了私人邮箱！数据防泄漏的关键在于对于数据的敏感性识别，除了无限量使用人力做纯“人工智能”识别，有没有更好的方案来解决这个问题？当然有，多模态AI了解一下。文字报告、财务表格、合同扫描件、会议录音、监控截图、聊天记录、设计图纸，文件格式多样，数据展示形态多样。从这里例子我们可以看出，相较于单模态的识别，多模态AI的判断会更准确，从而提供更高的准确性。图像感知，通常使用目标检测+OCR透视眼技术，主要用于处理截图中的二维码、公章、表格数据。

该机制通过将输入进行投影到多个不同的表示空间，并独立地计算注意力权重，从而提高了模型的表达能力和泛化能力，在训练过程中通过调整各空间的权重占比的方式，对于现有的训练结果进行调优，且在生成的过程中取得的结果通过向量方式提供所有可能的“下一个标记”的概率分布且并非选择概率最高的标记。从标准的Transform模型出发，其能够识别出模式和联系，并因此推荐符合该训练模型下的结论，此过程的处理逻辑与多属性判定的过程是完全吻合的，因此，可以通过相关数据替换完成对应的模型落地。当下IT各个领域技术论断，必谈及AI加持。