敏感词过滤资源文件 date 20230609 tags 敏感textcensorwords文件 comments true author admin 敏感词过滤资源文件 简介 本仓库提供了一个名为 CensorWordstxt 的资源文件该文件包含了用于敏感词过滤的敏感词列表通过使用该文件您可以实现以下功能 1 敏感词转化为字符串数组将敏感词列表转化为字符串数组便于程序处理 2 敏感词库路径提供敏感词库的路径方便程序读取和加载 3 敏感词替换将文本中的敏感词全部替换为等长度的 号以实现敏感词的屏蔽 4 敏感词检测返回文本中是否存在敏感词便于进行进一步的处理 5 读入TXT文件支持读入TXT格式的文件进行敏感词过滤操作 使用方法 1 下载资源文件首先下载本仓库中的 CensorWordstxt 文件 2 加载敏感词库在您的程序中通过文件路径加载 CensorWordstxt 文件将其内容读取为字符串数组 3 敏感词替换遍历文本内容将匹配到的敏感词替换为等长度的 号 4 敏感词检测在替换过程中记录是否存在敏感词并返回检测结果 示例代码 以下是一个简单的示例代码展示了如何使用 CensorWordstxt 文件进行敏感词过滤 python def loadcensorwordsfilepath with openfilepath r encodingutf8 as file return linestrip for line in file def censortexttext censorwords for word in censorwords text textreplaceword lenword return text def hassensitivewordstext censorwords for word in censorwords if word in text return True return False 加载敏感词库 censorwords loadcensorwordsCensorWordstxt 待过滤的文本 text 这是一个包含敏感词的测试文本

def load_censor_words(file_path):
    with open(file_path, 'r', encoding='utf-8') as file:
        return [line.strip() for line in file]

def censor_text(text, censor_words):
    for word in censor_words:
        text = text.replace(word, '*' * len(word))
    return text

def has_sensitive_words(text, censor_words):
    for word in censor_words:
        if word in text:
            return True
    return False

# 加载敏感词库
censor_words = load_censor_words('CensorWords.txt')

# 待过滤的文本
text = "这是一个包含敏感词的测试文本。"

# 敏感词替换
censored_text = censor_text(text, censor_words)

# 检测是否存在敏感词
if has_sensitive_words(text, censor_words):
    print("文本中存在敏感词。")
else:
    print("文本中不存在敏感词。")

print("过滤后的文本:", censored_text)