Python正则表达式去除句子中的重复词

Python正则表达式去除句子中的重复词

在处理文本数据时，有时候我们需要去除句子中的重复词，以提高文本的质量和可读性。Python的正则表达式库re提供了强大的功能来处理这种情况。本文将介绍如何使用正则表达式去除句子中的重复词，并提供相应的源代码示例。

首先，我们需要导入re模块：

import re

接下来，我们定义一个函数，该函数接受一个句子作为输入，并返回去除重复词后的句子。函数的实现如下：

def remove_duplicate_words(sentence):
    # 使用正则表达式匹配重复的单词，并替换为空字符串
    pattern = r'\b(\w+)\b\s+\b\1\b'
    result