信息抽取UIE

已于 2023-03-08 18:10:10 修改
阅读量1.2k 收藏 3
点赞数 2
CC 4.0 BY-SA版权
分类专栏： NLP与推荐算法 文章标签： NLP UIE 自然语言处理 信息抽取 事件抽取
于 2023-03-07 10:49:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.youkuaiyun.com/SPESEG/article/details/129377303
本文介绍了使用飞浆UIE-X进行信息抽取，特别是事件抽取和时间抽取。在处理增值税发票数据集时遇到问题，如Numpy版本不兼容，以及在Label Studio中选择错误的模板。通过调整Numpy版本、正确选择模板、解决Label Studio的bug，最终实现text文本信息抽取并部署服务。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

不是NER识别，而是信息/时间抽取，采用飞浆的UIE-X来做，之前有试，这次进一步加强。

事件抽取/信息抽取：王九胖7月8号9点在青台遇见二狗子一行，二狗子十分感谢九胖的热情接待，并赠送了自家的狗崽作为礼物。

这句话肯定要有“人物”，“时间”，“地点”，这是xinwen三要素吧，此为事件抽取，关系抽取则比较难，金九胖遇见二狗子？

  1. 例子尝试

1）安装飞浆OCR，因为数据来源是增值税发票数据集。




                

        

    

    
  


        

            

                

                

                了解本专栏
                
                
                  
                订阅专栏 解锁全文
                 
                
                    
                    超级会员免费看
                
            

            
            
            
        


    



                



	

		

			

				
					
C.1 百度飞桨：ERNIE 3.0 、通用信息抽取 UIE、paddleNLP的安装使用[一]

				
			

			

				

					丨汀、的博客
				

				

					05-30
					
					7979
					
				

			

		

		

			
				
https://github.com/PaddlePaddle/PaddleNLPhttps://github.com/PaddlePaddle/PaddleNLP

1.安装paddle

参考官网：开始使用_飞桨-源于产业实践的开源深度学习平台

首先在anaconda下创建虚拟环境：


conda create -n test  python=3.8 #test为创建的虚拟环境名称


在安装paddle


python -m pip install paddlepaddle==2.3.0 -..

			
		

	



                

            
              



	

		

			

				
					
图文实录｜UIE：基于统一结构生成的通用信息抽取

				
			

			

				

					langboat_mengzi的博客
				

				

					11-17
					
					1380
					
				

			

		

		

			
				
​第二期澜舟分享会邀请到来自中科院软件所中文信息处理实验室研究员韩先培分享演讲“UIE：基于统一结构生成的通用信息抽取”。

​

			
		

	



              


  
              

                


	

		

			

				
					
通用信息抽取 UIE(Universal Information Extraction)

				
			

			

				

					思念可是反的博客
				

				

					08-31
					
					1万+
					
				

			

		

		

			
				
通用信息抽取 - UIE 预训练模型(实体抽取、关系抽取、事件抽取、情感分析等任务)

			
		

	





	

		

			

				
					
小样本UIE 信息抽取微调快速上手(不含doccona标注)

				
			

			

				

					周周的专栏
				

				

					08-16
					
					3875
					
				

			

		

		

			
				
知其然也知其所以然，能到快速上手阶段，肯定已经了解了UIE的一些相关介绍，这里仅从偏实践角度，简短剖析一下任务细节，具体介绍可参照官方github。UIE(Universal Information Extraction) 针对少样本、低资源、不同领域等场景，实现从非结构化文本中抽取结构化信息，包含了实体识别、关系抽取、事件抽取、情感分析、评论抽取等任务。该任务的亮点在于：（1）将多任务的信息抽取统一为一个抽取模板。

			
		

	



		

			
		



	

		

			

				
					
信息抽取(UIE)技术：让保险理赔信息处理流程便捷高效

				
			

			

				

					
				

				

					02-27
					
					1820
					
				

			

		

		

			
				
在理赔过程中，用户上传的理赔资料，如医疗记录、事故报告等，需要被准确解读以提取关键信息，如疾病诊断、治疗费用等，这些信息对于案件的准确理赔至关重要。为了解决这一问题，我们引入了一种创新的保险案件信息抽取的置信度评估方法，该方法通过深度学习技术，不仅提取关键信息，还对信息抽取过程的特征进行分析，从而提高了置信度评估的准确性。这些资料中蕴含着大量的关键信息，比如患者的疾病诊断、治疗费用、事故责任方等，但这些信息往往分散在文本的不同部分，而且格式各异，给信息的提取和整合带来了巨大的挑战。

			
		

	





	

		

			

				
					
UIE: 信息抽取的大一统模型

				
			

			

				

					shawroad的博客
				

				

					07-24
					
					5819
					
				

			

		

		

			
				
信息抽取通常包含常见的四个子任务: 实体抽取、关系抽取、事件抽取以及情感分析等。在过去，因为不同的任务识别的实体、事件类型等等都不一样，所以针对特定的任务要训练特定的模型，定制化较高，不具有通用性。...

			
		

	





	

		

			

				
					
通用信息抽取 UIE

				
			

			

				

					09-01
				

			

		

		

			
				
通用信息抽取(UIE)是指一种旨在开发一种通用模型和架构的信息抽取方法，可以在不同的任务和领域上进行应用。UIE模型可以处理多种不同的抽取任务，包括命名实体识别、关系抽取、事件抽取和情感抽取等。它可以在多个...

			
		

	





	

		

			

				
					
关键信息抽取：UIE模型做图片信息提取全流程

				
			

			

				

					datayx的文章
				

				

					02-18
					
					1696
					
				

			

		

		

			
				
向AI转型的程序员都关注了这个号????????????首先上个图镇场子，里面红底的就是做图片信息提取，所需要重点关注的文件UIE理论部分UIE原始论文论文阅读笔记UIE(Universal Information Extraction)：Yaojie Lu等人在ACL-2022中提出了通用信息抽取统一框架UIE。该框架实现了实体抽取、关系抽取、事件抽取、情感分析等任务的统一建模，并使得不同任务间具备良好的迁移和泛...

			
		

	





	

		

			

				
					
智慧城市-疫情流调系列2-Prompt-UIE信息抽取

				
			

			

				

					qq_15821487的博客
				

				

					09-28
					
					1318
					
				

			

		

		

			
				
智慧城市-疫情流调系列1-Prompt-UIE信息抽取

			
		

	





	

		

			

				
					
信息抽取(UIE)：使用自然语言处理技术提升证券投资决策效率

				
			

			

				

					
				

				

					02-25
					
					1685
					
				

			

		

		

			
				
作为一名资深项目经理，我曾领导一个关键项目，旨在通过先进的信息抽取技术，从海量的文本数据中提取关键事件，如企业并购、新产品发布以及政策环境的变动。然而，为了适应特定的信息需求，如证券市场的事件识别，这些预训练模型需要进行任务特定的微调。例如，当一家制药公司宣布获得新药批准时，我们能够自动抽取出与此事件相关的所有实体，如药物名称、研发阶段、预期市场等，并构建出事件的完整图景。最后，我们解析返回的JSON数据，并输出了抽取结果，包括实体文本、在原文中的起始和结束位置以及抽取的准确率。

			
		

	





	

		

			

				
					
一种基于Prompt的通用信息抽取（UIE）框架

				
			

			

				

					阿里技术
				

				

					11-08
					
					5365
					
				

			

		

		

			
				
本文将为大家介绍一种基于Prompt的通用信息抽取框架，实验表明该模型具备优秀的小样本微调能力。

			
		

	





	

		

			

				
					
PaddleNLP信息抽取，uie微调打造自己专属的信息抽取模型

					
最新发布

				
			

			

				

					MAI44的博客
				

				

					08-13
					
					5250
					
				

			

		

		

			
				
Yaojie Lu等人在ACL-2022中提出了通用信息抽取统一框架UIE。该框架实现了实体抽取、关系抽取、事件抽取、情感分析等任务的统一建模，并使得不同任务间具备良好的迁移和泛化能力。为了方便大家使用UIE的强大能力，PaddleNLP借鉴该论文的方法，基于ERNIE 3.0知识增强预训练模型，训练并开源了首个中文通用信息抽取模型UIE。该模型可以支持不限定行业领域和抽取目标的关键信息抽取，实现零样本快速冷启动，并具备优秀的小样本微调能力，快速适配特定的抽取目标。

			
		

	





	

		

			

				
					
【自然语言处理】【信息抽取】UIE：用于通用信息抽取的统一结构生成

				
			

			

				

					bqw的博客
				

				

					04-26
					
					5328
					
				

			

		

		

			
				
用于通用信息抽取的统一结构生成
《Unified Structure Generation for Universal Information Extraction》
论文地址：https://arxiv.org/pdf/2203.12277.pdf
一、简介
​	信息抽取(IE\text{IE}IE)的目标是从无结构化文本中识别和结构化用户指定的信息。IE\text{IE}IE任务由于不同的目标(实体、关系、事件、情感等)、不同的结构(spans、triplets、record等)和特定的需求模式而高度的

			
		

	





	

		

			

				
					
通用信息抽取技术UIE产业案例解析，Prompt 范式落地经验分享！

				
			

			

				

					Kaiyuan_sjtu的博客
				

				

					02-24
					
					699
					
				

			

		

		

			
				
想了解用户的评价究竟是“真心夸赞”还是“阴阳怪气”？想快速从多角色多事件的繁杂信息中剥茧抽丝提取核心内容？想通过聚合相似事件准确地归纳出特征标签？……想了解UIE技术在产业中的实战落地经验？通用信息抽取技术 UIE 产业案例分享来了！近期Prompt 范式备受关注，实际上，Prompt 思想在产业界已经有了一些成功的应用案例。由中科院软件所和百度共同提出了大一统诸多任务的通用信息抽取技术UIE（U...

			
		

	





	

		

			

				
					
菜鸟笔记-信息抽取模型UIE代码学习-数据准备

				
			

			

				

					wmq104的博客
				

				

					03-17
					
					2632
					
				

			

		

		

			
				
说明：UIE是基于Prompt的通用信息抽取框架，本文为个人学习UIE代码的笔记，学的过程中简单翻译了一下数据准备部分readme（顺序按实际处理过程有所调整），自己添加的说明都在引用格式里。论文：Unified Structure Generation for Universal Information Extraction。源代码：https://github.com/universal-ie/UIE本内容所在文件夹：dataset_processing。

			
		

	





	

		

			

				
					
简历信息提取（二）：HR救星！用UIE Taskflow快速完成简历信息批

				
			

			

				

					m0_63642362的博客
				

				

					02-03
					
					3467
					
				

			

		

		

			
				
通过paddlenlp.Taskflow提供的文本及文档通用信息抽取能力，快速实现中文简历的批量信息抽取。

			
		

	





	

		

			

				
					
【PaddleNLP-kie】关键信息抽取2：UIE模型做图片信息提取全流程

					
热门推荐

				
			

			

				

					z5z5z5z56的博客
				

				

					04-24
					
					1万+
					
				

			

		

		

			
				
大模型时代来咯！UIE实现任意图片信息提取！本文记录我使用PaddleNLP中UIE做增值税发票信息提取的过程，同理适用于任何图片信息提取。

			
		

	





	

		

			

				
					
C.5 Paddlenlp之UIE关系抽取模型【高管关系抽取为例】

				
			

			

				

					丨汀、的博客
				

				

					07-25
					
					3158
					
				

			

		

		

			
				
本项目将演示如何通过小样本样本进行模型微调，完成关系抽取。马云浙江省杭州市人,阿里巴巴集团主要创始人之一。现任阿里巴巴集团主席和首席执行官,他是《福布斯》杂志创办50多年来成为封面人物的首位大陆企业家，曾获选为未来全球领袖。任正非是中国大陆的民营电信设备企业一-华为公司的创始人兼总裁。他关于企业“危机管理”的理论与实践曾在业内外产生过广泛影响。马化腾，是腾讯主要创办人之一现担任公司控股董事会主席兼首席执行官。作为深圳土生土长的企业家,他曾在深圳大学主修计算机及应用，于1993年取得深大理学士学位。.....

			
		

	



              




          




        



    





    



      

      

        
      

      





	

		
评论 2

	

  
	




  

    

      添加红包
      
    

    

      

        
        

          
          
        

        
请填写红包祝福语或标题

      

      

        
        

          
          个
        

        
红包个数最小为10个

      

      

        
        

          
          元
        

        
红包金额最低5元

      

      

        
        

          当前余额3.43元
          前往充值 >
        

      

      

        

          需支付：10.00元
        

        
        
      

    

  





  

    
    
  

  

    
    
  








  

    

      

        

          

            
            
成就一亿技术人!

          

          

        

        

          

          

            领取后你会自动成为博主和红包主的粉丝
            规则
          

        

      

      

        

          

            
              
            
            

              
hope_wisdom
 发出的红包
            

          

        

        

          

          

          

        

      

    

    

  





	
打赏作者

	

		

		
			
		
		

		

			
小李飞刀李寻欢

			
您的欣赏将是我奋斗路上的动力！

		

	

	

			

	

	

    ¥1
    ¥2
    ¥4
    ¥6
    ¥10
    ¥20
	

	

		

			

				

					扫码支付：¥1
				

				

					

					
					获取中
					

				

				

					
					
					扫码支付
				

			

		

		

			
您的余额不足，请更换扫码支付或充值

			
打赏作者

		

	



      
      

      
实付元

      
使用余额支付

      

        

          

            
            点击重新获取
          

        

        
扫码支付

      

      

        
          
            
          
          
        
      

      

        
        钱包余额
          0
          

            
            

              

                
抵扣说明：

                
 1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
 2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

              

            

          

      

      余额充值