43、利用图变换生成图标注释

利用图变换生成图标注释

1. 引言

在相关工作中，需要从基本组件生成自然语言表述。为此，开发了一个自然语言生成模块，可输出两种语言的短语。图形语言 VCM 基于医学概念本体构建，使用 OWL - DL 表示形式定义，每个图标表达 VCM 本体中的一个概念，主要输入数据是 OWL 概念，对应要表达的医学概念。此概念用于生成图像对象和自然语言短语，在应用中通常希望生成名词短语，但也可根据需要生成句子。

2. 背景：使用场景与输入数据

• 图标组成 ：图形语言的最小“视觉表述”是图标，图标有明确的内部组成，基于标准化的视觉语法构建。图标由图形基元组成，每个基元对视觉符号的整体意义有贡献。例如，一个图标可能显示中央代表肝脏的象形图，嵌入橙色正方形（表示“风险”），左侧有代表病毒的小图形符号作为形状修饰符，右上角有蓝色正方形（表示“监测”），这种组合传达“病毒性肝炎风险监测”的概念。
• 文本生成起点 ：文本生成过程的起点与图标生成过程相同，是一个由 7 个位置字段组成的标准化代码，每个字段对应一个可能的图形基元。
• 解析步骤 ：
  • 第一步是解析，将 7 字段代码投影到概念本体上。通过字典定义图形元素和概念之间的映射，每个图形元素在部分与整体的图形关系上下文中映射到一个或多个本体条目，这些条目定义了约束“医学状态”这一最通用概念的特定属性。
  • 解析结果是一个由多个限制性属性指定的医学状态概念，可表示为图的形式。例如，图 1.a 中的图标是图 1.b 中图的视觉表达。一