SpringBoot + Tika 实现数据泄露防护、检测敏感信息

SpringBoot+Tika实现数据泄露防护、检测敏感信息功能全流程代码讲解 支持多种文件格式,包括办公文档、PDF、HTML、XML、文本文件、图片、音视频、电子邮件和压缩文件等。能自动检测文件类型,根据文件内容而非扩展名判断文件的真实类型,并识别 MIME 类型。能提取文本和元数据,如作者、创建日期、修改日期、文件大小、版权信息等。支持 OCR,可从扫描图像或 PDF 文档中的图片提取文本信息。具备自动检测文件文本语言的功能。 阅读详情

👉 这是一个或许对你有用的社群

🐱 一对一交流/面试小册/简历优化/求职解惑,欢迎加入「芋道快速开发平台」知识星球。下面是星球提供的部分资料: 

53bde0afe569a3d7ed94b3eb98db98d7.gif

👉这是一个或许对你有用的开源项目

国产 Star 破 10w+ 的开源项目,前端包括管理后台 + 微信小程序,后端支持单体和微服务架构。

功能涵盖 RBAC 权限、SaaS 多租户、数据权限、商城、支付、工作流、大屏报表、微信公众号、ERP、CRM、AI 大模型等等功能:

  • Boot 多模块架构:https://gitee.com/zhijiantianya/ruoyi-vue-pro

  • Cloud 微服务架构:https://gitee.com/zhijiantianya/yudao-cloud

  • 视频教程:https://doc.iocoder.cn

【国内首批】支持 JDK 17/21 + SpringBoot 3.3、JDK 8/11 + Spring Boot 2.7 双版本 

来源:juejin.cn/post/
7462172001165295625

03e052b9b6e151665d72ea1c9552c0c1.jpeg


Tika 主要特性

Apache Tika 是一个功能强大的内容分析工具,它能够从多种文件格式中提取文本、元数据以及其他结构化信息。以下是 Apache Tika 的主要特性:

多格式支持

Tika 的最大特点之一就是支持广泛的文件格式。它能够解析和提取多种文档类型的内容,包括但不限于:

  • 办公文档 :如 Microsoft Word(.doc, .docx)、Excel(.xls, .xlsx)、PowerPoint(.ppt, .pptx)、OpenOffice(.odt, .ods)等。

  • PDF :提取 PDF 文档中的文本和元数据。

  • HTML / XML :解析 HTML 和 XML 格式的内容。

  • 文本文件 :如 .txt 文件等。

  • 图片和音视频 :支持图像格式(如 JPEG、PNG)和音频视频格式(如 MP3、MP4、WAV 等),并能提取相关的元数据。

  • 电子邮件 :如 EML 文件格式。

  • 压缩文件 :如 ZIP、TAR、GZ 等压缩包中的文件内容。

Tika 通过集成众多开源库(如 Apache POI、PDFBox、Tesseract OCR 等)来支持这些格式的解析。

自动文件类型检测

Tika 具有强大的文件类型自动识别功能,可以根据文件内容而非文件扩展名来判断文件的真实类型。它支持多种标准和非标准文件类型的自动识别,确保了高准确度的格式识别。

  • MIME 类型识别 :Tika 可以准确识别文件的 MIME 类型,帮助系统判断如何处理和解析文件。

文本和元数据提取

Tika 能够从多种文件中提取出文本内容和元数据。元数据通常包括作者、创建日期、修改日期、文件大小、版权信息等。

  • 文本提取 :无论文件格式如何,Tika 都能够提取其中的文本信息。

  • 元数据提取 :除了文本,Tika 还能提取各种元数据,如作者、标题、关键词、修改时间等,方便进一步的分析或索引。

支持 OCR(光学字符识别)

Tika 集成了 OCR 引擎(如 Tesseract),能够从扫描图像或 PDF 文档中的图片提取文本信息。当文件中包含图像时,Tika 可以通过 OCR 功能识别图像中的文字,并提取出来。

语言检测

Tika 具备自动检测文件文本语言的功能。通过分析提取的文本,Tika 可以识别文档的语言(如英语、中文、法语等),这一功能对多语言处理和文档分类非常有用。

支持嵌入式应用

Tika 是以 Java 为主要开发语言的,且它不仅可以作为独立应用使用,还可以嵌入到其他 Java 应用中。Tika 提供了 Java API,使得开发者能够轻松集成到各种应用程序中,进行自动化的文件内容提取和处理。

  • Tika App :命令行工具,适用于从文件提取内容并输出文本和元数据。

  • Tika Server :基于 RESTful API 的服务,适合通过 HTTP 协议与外部系统进行交互,支持远程文件解析。

多线程支持

Apache Tika 提供了并行处理的能力,允许在处理大批量文件时,通过多线程方式提高处理速度。对于需要批量文件解析和内容提取的场景,Tika 的多线程支持可以显著提高效率。

内容和元数据格式统一输出

Tika 返回统一的输出格式,不论文件类型如何,提取的文本和元数据都会按照标准的方式提供。这使得开发者能够轻松地将不同格式的文件内容统一处理。

  • JSON 格式输出 :Tika 可以将提取的内容和元数据以 JSON 格式输出,便于与其他系统集成和处理。

  • XML 格式输出 :除了 JSON 格式,Tika 也支持将内容提取结果以 XML 格式输出,适用于需要更结构化数据的场景。

支持大文件处理

Tika 支持处理大型文档和多页文档,能够高效地提取其中的内容而不会占用过多的内存。对于需要处理大量文档或大文档的应用场景(如搜索引擎、大数据处理等),Tika 能够提供可靠的支持。

与其他工具和库的集成

Tika 还可以与其他工具和库进行集成,以扩展其功能:

  • Lucene / Solr / Elasticsearch :Tika 常常与这些搜索引擎集成,用于全文索引和搜索。

  • Apache POI :Tika 使用 Apache POI 来解析 Microsoft Office 文件格式(如 .docx、.xlsx 等)。

  • PDFBox :用于解析和提取 PDF 文件内容。

  • Tesseract OCR :用于从图像中提取文本,特别适用于扫描文档和图片内容。

高度可扩展性

Tika 提供了灵活的扩展机制,用户可以根据需求自定义解析器、增加新的文件格式支持或调整文本提取策略。通过定制 Tika 配置文件(如 tika-config.xml),开发者可以配置不同类型文件的处理方式、修改默认的解析器和行为等。

Apache Tika 的主要特性包括对多种文件格式的支持、自动文件类型检测、文本和元数据提取、OCR 支持、语言检测、多线程处理、统一格式的输出、以及与其他工具的无缝集成。这些特性使得 Tika 成为一个功能强大且灵活的内容分析框架,适用于文档管理、信息提取、搜索引擎、大数据处理等各种应用场景。

基于 Spring Boot + MyBatis Plus + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/ruoyi-vue-pro

  • 视频教程:https://doc.iocoder.cn/video/

架构组件

Apache Tika 的架构组件主要包括以下几个核心部分,它们共同协作,以支持从各种文件格式中提取文本、元数据和其他信息。以下是 Apache Tika 的主要架构组件:

Tika Core

Tika Core 是 Apache Tika 的核心组件,提供了文件解析、内容提取 的基础功能。它包含了最基本的功能,如文档类型识别、解析和提取文本内容 。Tika Core 是其他功能和模块的基础。

  • 文件解析(Parser) :用于解析各种文件格式,返回提取的文本和元数据。

  • 内容提取(Content Extraction) :提取文件中的内容,包括文本、图片、音频、视频等。

  • 文件类型识别(MIME Type Detection) :根据文件的内容而不是扩展名,判断文件的实际类型(如 PDF、Word、Excel、HTML 等)。

Tika Parsers

Tika Parsers 是一组负责解析不同类型文件的组件。它们是 Tika 核心的关键组成部分,能处理多种格式,如文本文档、电子表格、PDF、图像、音频 等。Tika 会根据文件类型自动选择合适的解析器。

  • 文本解析器(Text Parsers) :解析普通文本文件(如 .txt、.xml、.html 等)。

  • 多媒体解析器(Media Parsers) :解析图片、音频、视频等多媒体文件。

  • 文档解析器(Document Parsers) :解析各类办公文档,如 Word、Excel、PowerPoint、PDF 等。

  • 元数据解析器(Metadata Parsers) :提取文件中的元数据,如作者、创建日期、修改日期、文件大小等。

Tika 提供了许多内置的解析器(基于其他开源库,如 Apache POI、PDFBox、OCR 等),可以扩展和定制以支持新的文件格式。

Tika Config (配置管理)

Tika Config 是用来管理 Tika 配置的模块,允许用户通过配置文件来定制 Tika 的行为。通过 Tika Config,用户可以指定特定的解析器、提取策略、字符集等 设置。

  • 配置文件 :可以通过 tika-config.xml 文件来配置如何解析不同类型的文件。

  • 自定义解析器和扩展 :用户可以自定义自己的解析器,并通过配置文件将其加入到 Tika 系统中。

Tika App

Tika App 是一个命令行工具,提供了一个易于使用的界面来调用 Tika 核心功能。Tika App 可以直接从命令行运行,用于文件内容提取、文本和元数据的提取 。它可以作为独立应用,也可以嵌入到其他 Java 应用中。

  • 命令行接口(CLI) :提供简洁的命令行接口,允许用户从命令行处理文件。

  • 文件处理 :支持批量文件处理,可以提取文本、元数据等信息,并输出到标准输出或文件中。

Tika Server

Tika Server 是基于 RESTful API 的服务端组件,它允许通过 HTTP 协议进行远程调用。Tika Server 为外部应用提供了一个服务端接口,支持文件的上传、内容提取和处理 。

  • RESTful API :通过 HTTP 请求与 Tika Server 交互,可以上传文件并获取解析后的内容或元数据。

  • 远程解析 :支持异步处理大文件和批量文件,适合与其他系统集成(如搜索引擎、云存储服务等)。

Tika Language Detection

Tika 还提供了内置的语言检测功能,用于自动识别提取文本的语言。语言检测对于多语言支持的项目非常有用,可以帮助在文件内容解析后识别出文本的语言类型,从而决定使用何种处理方式。

  • 语言识别 :基于文本内容,自动检测文档的语言(如英语、中文、法语等)。

  • 集成支持 :语言检测功能可与文本提取、内容分析等流程结合使用,提高内容的多语言处理能力。

Tika Extractor

Tika Extractor 是一个抽象层,提供一种统一的接口来提取文件的内容。它将不同的文件解析器统一成一个接口,简化了对文件内容的提取过程。通过 Tika Extractor,用户可以在不同的文件类型间进行统一的操作,而无需关注具体的解析实现。

  • 统一接口 :通过统一的接口来处理不同格式的文件,简化文件内容的提取流程。

  • 自定义扩展 :允许开发者根据需求扩展提取器,支持更多的文件格式或自定义的内容提取逻辑。

Tika Metadata

Tika Metadata 是用于管理文件元数据的组件。它提取并提供文件的各类元数据,如作者、创建时间、修改时间、版权信息、文件大小等。Tika 支持提取来自各种文件格式的元数据。

  • 元数据提取 :从各种文件中提取出与文件相关的附加信息,如文件属性、作者、标题等。

  • 统一格式 :返回标准化的元数据结构,方便与其他系统集成。

Tika OCR (Optical Character Recognition)

Tika 集成了 OCR 功能,利用开源的 OCR 引擎(如 Tesseract)来提取图像中的文本信息。当文件中包含扫描图像或照片时,OCR 组件可以识别图像中的文字并进行提取。

  • 图像文本识别 :提取图像或扫描文档中的文本内容。

  • 集成与扩展 :可以与其他解析器结合,自动处理包含图像或扫描文档的文件。

Apache Tika 的架构组件包括核心的解析器、配置管理、命令行工具、服务器、语言检测、OCR 处理 等多个部分。它们协同工作,使得 Tika 能够支持从多种格式中提取文本、元数据和其他信息 ,广泛应用于企业文档管理、大数据处理、内容管理、搜索引擎 等领域。

Tika 应用场景

Apache Tika 是一个开源的内容分析工具,主要用于从各种文件格式中提取文本、元数据和结构化信息 。它支持多种文件格式,包括文档、电子表格、PDF、音频、视频、图片 等,具有强大的文件内容解析能力。在真实项目中的应用场景非常广泛,以下是一些典型的应用场景:

基于 Spring Cloud Alibaba + Gateway + Nacos + RocketMQ + Vue & Element 实现的后台管理系统 + 用户小程序,支持 RBAC 动态权限、多租户、数据权限、工作流、三方登录、支付、短信、商城等功能

  • 项目地址:https://github.com/YunaiV/yudao-cloud

  • 视频教程:https://doc.iocoder.cn/video/

企业文档管理系统

在大型企业或机构中,文档管理系统通常需要处理大量不同格式的文件(如 PDF、Word、Excel 等)。通过 Apache Tika,可以自动化从这些文件中提取文本和元数据(如作者、创建时间、文件大小 等),然后将其统一存储到数据库中,便于搜索、管理和索引。这种应用使得企业能够高效地进行文档归档、搜索和分类。

示例应用
  • 自动化文档提取 :提取文件中的关键信息,如合同中的条款、报价单中的价格等,帮助员工快速定位重要数据。

  • 全文搜索功能 :通过 Tika 提取的文本内容,可以建立索引,提供快速的全文搜索功能,方便用户查找所需的文档。

内容管理系统(CMS)

在内容管理系统中,Apache Tika 可用于自动提取上传文件的内容,并将其转换为可编辑的格式。这对于包含各种文档格式(如文本、PDF、图像 等)的内容管理非常有用,尤其是在网站和平台中需要处理大量文件时,Tika 可以提供统一的处理接口。

示例应用
  • 网站文件处理 :当用户上传文件到网站时,Tika 会自动提取文件内容(如从文档中提取文本、从图像中提取元数据),以便进一步处理或存储。

  • 文件格式转换 :Tika 可以将上传的文件转换为统一的格式,方便后续编辑和展示。

数据分析与大数据平台

在大数据分析中,Apache Tika 可以被用于处理非结构化数据(如文本、PDF、图片、音频文件 等),并将这些数据转化为结构化数据。通过 Tika 提取的文本可以进一步进行数据清洗、分类、聚类或文本挖掘等分析任务。

示例应用
  • 大数据处理 :在数据湖或大数据平台中,Tika 可以帮助从不同来源(如电子邮件、文档、图片等)提取出可分析的文本数据,以便进行机器学习模型训练、情感分析或趋势预测。

  • 搜索引擎 :在搜索引擎中,Tika 提供的内容解析能够支持不同类型的文件索引和检索功能,增强搜索结果的准确性和全面性。

法律与合规性审查

在法律和合规性领域,企业常常需要对大量的合同、法律文书、电子邮件等进行分析。Apache Tika 可以帮助自动提取这些文档中的关键信息,比如合同条款、支付细节、法律条文等,供律师和合规人员审查。

示例应用
  • 合同审核与分析 :Tika 可用于从合同中提取重要的文本信息,如签署日期、金额、条款内容等,帮助审查人员快速识别文档的核心内容。

  • 合规性检查 :自动提取和分类文档中的合规信息,帮助企业检测是否符合规定,并减少人工审核的工作量。

数字资产管理(DAM)

数字资产管理系统中,Apache Tika 被广泛应用于提取多媒体文件(如图像、视频、音频文件等)的元数据和内容。通过对图片中的标签、视频中的字幕或音频文件中的元数据进行解析,可以更好地管理和索引数字资产。

示例应用
  • 图片和视频内容管理 :Tika 可以自动提取图片和视频的元数据(如拍摄时间、相机类型、分辨率等),并帮助构建数字媒体库,提供基于内容的搜索功能。

  • 自动分类和标记 :Tika 通过分析文件内容和元数据,能够自动进行分类和标记,帮助企业更高效地管理和访问数字资产。

信息安全与数据泄露防护

在信息安全领域,Apache Tika 可以用于扫描文件中的敏感数据。例如,Tika 可以帮助企业检测文件中是否包含敏感的个人信息(如身份证号、信用卡信息等),从而增强企业对数据泄露的防护能力。

示例应用
  • 敏感信息识别 :通过 Tika 提取文件内容后,进行自动化的敏感数据检测,识别可能包含个人敏感信息或机密数据的文件。

  • 数据泄露防护 :在企业系统中,Tika 可以协助检查文件上传和共享过程中的潜在风险,确保不会无意间泄露敏感信息。

自动化电子邮件分类

Apache Tika 还可以用于从电子邮件中提取内容,帮助自动分类邮件内容。在许多企业或组织中,Tika 可被用于帮助识别电子邮件中的附件、链接或关键信息,进而根据内容进行分类、存档或自动响应。

示例应用
  • 邮件内容提取与分类 :Tika 能从电子邮件中提取文本,分析邮件的主题、发件人和正文内容,帮助自动化邮件分类并减少人工操作。

  • 附件扫描与处理 :Tika 可以分析电子邮件中的附件,并根据附件类型和内容自动执行适当的处理程序。

Apache Tika 在多个领域和项目中都具有广泛的应用,尤其适用于需要从各种不同格式的文件中提取和处理数据的场景。无论是企业文档管理、法律审查、大数据分析,还是数字资产管理、信息安全等领域,Tika 都能够通过统一的接口和强大的格式支持,帮助开发人员高效地实现内容解析、数据提取和处理任务。

tika 实现信息安全与数据泄露防护

在 Spring Boot 中集成 Apache Tika 用于 敏感信息识别 和 数据泄露防护 ,我们可以在文件上传时提取文件内容,并在提取的文本中搜索潜在的敏感数据,如身份证号、信用卡信息、电话号码等。以下是一个完整的代码示例,展示了如何实现敏感信息检测和数据泄露防护。

添加必要的依赖

首先,确保在 pom.xml(Maven)或 build.gradle(Gradle)中添加了 Apache Tika 和 Spring Boot Web 依赖。

Maven 依赖
<dependencies>
    <!-- Spring Boot Web -->
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter-web</artifactId>
    </dependency>

    <!-- Apache Tika -->
    <dependency>
        <groupId>org.apache.tika</groupId>
        <artifactId>tika-core</artifactId>
        <version>2.6.0</version>
    </dependency>
    <dependency>
        <groupId>org.apache.tika</groupId>
        <artifactId>tika-parsers</artifactId>
        <version>2.6.0</version>
    </dependency>
</dependencies>

创建敏感信息检测逻辑

敏感信息的检测通常涉及正则表达式(Regex),你可以使用常见的模式来检测个人信息(如身份证号、信用卡号、电话号码等)。我们将创建一个服务类,用于扫描文件内容并检测这些敏感数据。

SensitiveInfoService.java
package com.example.tikademo.service;

import org.apache.tika.Tika;
import org.apache.tika.metadata.Metadata;
import org.apache.tika.sax.BodyContentHandler;
import org.springframework.stereotype.Service;

import java.io.IOException;
import java.io.InputStream;
import java.util.regex.Matcher;
import java.util.regex.Pattern;

@Service
public class SensitiveInfoService {

    private final Tika tika = new Tika();  // Tika 实例

    // 正则表达式模式:身份证号、信用卡号、电话号码
    private static final String ID_CARD_REGEX = "(\\d{17}[\\dXx]|\\d{15})";
    private static final String CREDIT_CARD_REGEX = "(\\d{4}-?\\d{4}-?\\d{4}-?\\d{4})";
    private static final String PHONE_REGEX = "(\\d{3}-?\\d{3}-?\\d{4})|((\\d{11})|(\\d{3})\\d{7})";

    // 提取文件内容并检测敏感信息
    public String checkSensitiveInfo(InputStream fileInputStream) throws IOException {
        // 1. 使用 Tika 提取文件内容
        String fileContent = tika.parseToString(fileInputStream);
        
        // 2. 执行敏感信息检测
        StringBuilder sensitiveInfoDetected = new StringBuilder();
        
        // 检测身份证号
        detectAndAppend(fileContent, ID_CARD_REGEX, "身份证号", sensitiveInfoDetected);
        
        // 检测信用卡号
        detectAndAppend(fileContent, CREDIT_CARD_REGEX, "信用卡号", sensitiveInfoDetected);
        
        // 检测电话号码
        detectAndAppend(fileContent, PHONE_REGEX, "电话号码", sensitiveInfoDetected);
        
        return sensitiveInfoDetected.length() > 0 ? sensitiveInfoDetected.toString() : "未检测到敏感信息";
    }

    // 通用的检测方法
    private void detectAndAppend(String content, String regex, String label, StringBuilder result) {
        Pattern pattern = Pattern.compile(regex);
        Matcher matcher = pattern.matcher(content);
        while (matcher.find()) {
            result.append(label).append(": ").append(matcher.group()).append("\n");
        }
    }
}

创建文件上传控制器

接下来,我们将创建一个控制器,通过 REST API 接受文件上传请求,提取文件内容并检测是否含有敏感信息。文件上传的处理通过 MultipartFile 接收文件。

FileController.java
package com.example.tikademo.controller;

import com.example.tikademo.service.SensitiveInfoService;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.*;
import org.springframework.web.multipart.MultipartFile;

import java.io.IOException;

@RestController
@RequestMapping("/api/files")
public class FileController {

    @Autowired
    private SensitiveInfoService sensitiveInfoService;

    @PostMapping("/upload")
    public String uploadFile(@RequestParam("file") MultipartFile file) {
        try {
            // 获取上传文件的输入流
            String result = sensitiveInfoService.checkSensitiveInfo(file.getInputStream());
            return result;
        } catch (IOException e) {
            return "文件处理错误: " + e.getMessage();
        }
    }
}

创建前端页面(可选)

为了更好地测试文件上传功能,可以创建一个简单的 HTML 页面,允许用户上传文件,并显示敏感信息检测结果。

index.html (位于 src/main/resources/static/ 目录)
<!DOCTYPE html>
<html lang="en">
<head>
    <meta charset="UTF-8">
    <meta name="viewport" content="width=device-width, initial-scale=1.0">
    <title>Upload File for Sensitive Information Detection</title>
</head>
<body>
    <h2>Upload a File for Sensitive Information Detection</h2>
    <form action="/api/files/upload" method="post" enctype="multipart/form-data">
        <input type="file" name="file" required>
        <button type="submit">Upload</button>
    </form>
</body>
</html>

测试项目

现在,你可以启动 Spring Boot 应用,访问 http://localhost:8080 页面,上传一个文件进行检测。系统会提取文件内容并根据正则表达式检测是否存在身份证号、信用卡号、电话号码等敏感信息,并将检测结果返回给用户。

扩展功能
  • 更多敏感信息识别 :你可以添加更多的正则表达式来识别其他类型的敏感信息(例如,电子邮件、地址、社保号码等)。

  • 加密存储 :如果文件中包含敏感信息,可以采取加密存储或数据屏蔽等安全措施。

  • 敏感信息日志审计 :检测到敏感信息后,可以记录日志或通过邮件通知管理员,进一步强化数据泄露防护。

为了测试上面所提到的敏感信息检测功能,你可以使用一个包含以下敏感数据的测试文档。这个文档可以是一个简单的文本文件(.txt),其中包含身份证号、信用卡号和电话号码等信息。

测试文档内容(test.txt)
尊敬的用户:

您好!感谢您使用我们的服务。以下是您的账户信息:

身份证号:123456789012345678
信用卡号:1234-5678-9876-5432
电话号码:138-1234-5678

如果您对我们的服务有任何问题,请随时联系客户支持团队。

谢谢!

此致,
敬礼!

步骤

  1. 创建测试文档 :

  • 创建一个新的文本文件,命名为 test.txt。

  • 将上述示例内容复制并粘贴到文件中。

  1. 上传文档进行测试 :

  • 启动 Spring Boot 应用并访问 http://localhost:8080 页面。

  • 在页面中选择 test.txt 文件进行上传。

  • 应用将解析该文件并检查其中是否包含敏感信息,返回检测结果。

期望的返回结果
身份证号: 123456789012345678
信用卡号: 1234-5678-9876-5432
电话号码: 138-1234-5678

此结果表明文档中包含了身份证号、信用卡号和电话号码,符合我们定义的敏感信息检测规则。

总结

通过将 Apache Tika 集成到 Spring Boot 项目中,我们能够实现文件内容的自动化解析,并通过正则表达式识别文件中的敏感信息。通过简单的 API 接口和正则表达式进行敏感数据识别,为企业提供数据泄露防护解决方案。


欢迎加入我的知识星球,全面提升技术能力。

👉 加入方式,“长按”或“扫描”下方二维码噢:

3745df357cb4a3a607577e1d7f0042cb.png

星球的内容包括:项目实战、面试招聘、源码解析、学习路线。

e53d72aadb4b3cf28262091fc8b576c9.png

0471f8a27be9c90299de2a9d7eb7b1ab.pngcce4ea26ae82523c355ebec9f90fa521.png6a25cc49f906cfffb9de957657cb0650.png4ddae868bffe0e0b6ffb36fd84ccfb4f.png

文章有帮助的话,在看,转发吧。
谢谢支持哟 (*^__^*)
Vue3 - 详细实现虚拟列表前端虚拟滚动列表解决方案,vue3长列表优化之虚拟列表,解决列表动态高度不固定高度及图片视频图文异步请求加载问题,虚拟列表DOM大量数据同时加载渲染卡顿太慢及下滑列表闪烁 vue3,vue3虚拟列表,用vue3实现一个虚拟列表,长列表高度不一致如何实现虚拟滚动加载列表,虚拟列表有图片视频,图文列表,上万条数据同时渲染解决,长列表dom渲染太卡,列表滚动条加载超多数据,瀑布流,在Vue3中如何实现列表的虚拟滚动,虚拟列表滑动白屏闪烁闪一下,虚拟列表每个项的高度不确定,可动态改变高度,vue3虚拟滚动列表,页面数据太多加载很慢怎么办,vue3实现不定高的虚拟列表,定高和不定高,虚拟列表非固定高度,vue3长列表优化之虚拟列表实现,vue3虚拟列表高度不固定,用vue3实现一个虚拟 阅读详情

相关推荐

STM32+Air724UG基于阿里云物联网平台的OTA远程升级实战指南

本文提供了一套基于STM32微控制器与Air724UG 4G Cat.1通信模组,通过阿里云物联网平台实现OTA远程升级的完整实战指南。文章详细阐述了BootLoader与用户程序的分工、云端配置、固件下载与烧写流程,并分享了关键代码实现与常见问题排查方法,帮助开发者快速为物联网设备部署稳定可靠的无线升级功能。

weixin_28285943的博客 516

Apache Tika文档内容抽取工具

官方文档 1.介绍 Tika 是一个内容抽取的工具集合 (a toolkit for text extracting) 。它集成了 POI 和 Pdfbox,并且为文本抽取工作提供了一个统一的界面。其次,Tika 也提供了便利的扩展 API,用来丰富其对第三方文件格式的支持。 2.依赖 tika-core包含Tika的核心接口和类,用于在不需要完整的parser工具集的情况下,通过下面配置添加ma...

冒烟儿的专栏 4062

到底是什么决定了二极管的最高工作频率?

硬件工程师,应该都用过二极管的吧,不过也许有一个误区,大多数人可能并不知道,或者说是理解有问题,下面就来细细说下。 一个问题 先提一个问题:到底是什么决定了二极管的最高工作频率? 估计有不少人会回答是二极管反向恢复时间Trr,也有人会说是二极管结电容,那到底谁是对的呢?或者说都一样,反向恢复时间由结电容决定? 到底什么决定了二极管的最高工作频率,我们暂且不论,不过需要知道的是,二极管的反向恢复时间和结电容根本就是两回事,反向恢复时间绝不能等同于结电容的充放电时间。 为什么我这么说呢?.

weixin_42005993的博客 4835

Java文件类型校验之Apache Tika

Apachhe Tika是基于java的内容检测和分析的工具包,可检测并提取来自上千种不同文件类型(如PPT,XLS和PDF)中的元数据和结构化文本。

梁童鞋的博客 6205

SAP MM委外加工保姆级教程:从BOM配置到MIGO发货的完整避坑指南

本文提供SAP MM模块中委外加工的完整操作指南,涵盖从BOM配置到MIGO发货的全流程。详细解析委外采购和工序委外两种模式,包括主数据配置、采购订单创建及物料移动等关键步骤,帮助用户规避常见错误,提升供应链管理效率。特别适合制造业企业实施SAP外包业务参考。

weixin_26905487的博客 530

stata:stata软件教程(人大十八讲)(1) 第一章 stata入门

第一章 stata入门1.1 安装1.2 启用和退出1.3 打开和查看数据1.4 寻求帮助与网络资源1.5 命令示例1.6 几个环境设置1.7 复习与练习1.8 附录 注:教材为:Stata 统计分析教程 stata软件教程(人大十八讲) 中国人民大学出版社 陈传波 1.1 安装 1.2 启用和退出 1.3 打开和查看数据 1.4 寻求帮助与网络资源 1.5 命令示例 1.6 几个环境设置 1.7 复习与练习 1.8 附录 ...

qq_47805483的博客 1万+

Apache Tika入门

文章目录1、基本介绍2、Tika使用2.1、解析器接口(The Parser interface)2.1.1、自定义Parser类2.2、检测器接口2.3、Tika配置 1、基本介绍 Apache Tika(文本分析工具包)能够检测并提取来自上千种不同文件类型(如PPT、XLS和PDF)的元数据和文本;所有这些文件类型都可以通过一个接口进行解析,这使得Tika在搜索引擎索引、内容分析、翻译等方面非常有用。 2、Tika使用 介绍下Tika在Maven项目中的使用,首先介绍下Tika相关的两个Maven依赖:

qgnczmnmn的博客 7007

2025软考中级《数据库系统工程师》案例模拟题合集

1.【说明】某销售企业正在实施电商平台项目,主要功能模块包括用户中心、商品中心、交易中心、支付中心、营销中心等。其中支付中心模块包括了一个账户表:Account (ano, aname, balance),其中属性含义分别为:账户号,账户名称和账户余额。 假设现在存在事务Ti对账户表Account进行余额的修改,系统记录了修改账户表的日志记录,假设更新日志记录表示为 <Ti,A,V1,V2>,表明事务Ti对账户A执行了一个写操作,写操作前账户A的余额是V1,写操作后账户A的余额为V2。<Ti,D

2301_76902257的博客 2330

SpringBoot整合Tika实现对文件类型校验和元数据读取

Tika是Apache下开源的文档处理工具,支持多种格式文件的内容解析,主要功能包括文档类型检测、内容提取、元数据提取、语言检测。Tika是一个具有内置解析器用于处理各种文档类型的程序框架。该框架公布了标准的API供应用程序调用并完成从文档中提取文本和元数据,内置解析器会在后台通过外部程序提供的API与之交互。这使得你的应用程序能够针对不同的文档类型使用相同的API。当程序需要从文档中提取文本时,Tika会找到相应的解释器。

weixin_42324005的博客 2585

(五)深入理解蓝牙BLE之“Beacon包格式详解”

蓝牙Beacon格式详解 本文重点在结合Bluetooth官网spec和几个例子来使beacon帧格式更加容易被理解。 广播帧格式: 首先beacon是蓝牙BLE广播包的一种,蓝牙广播帧格式如下: PS:其实BLE数据帧除了报头字段和数据字段定义与广播帧不同之外,前导/接入地址/长度/校验格式均相同。 广播帧数据字段格式: 数据字段最长为37个字节:6个字节的广播设备地址 + 31个字节广播数据。 广播数据的格式如下:AD Structure1 +AD Structure2 + .....

1万+

YOLOv11改进 | 注意力篇 | YOLOv11引入CBAM注意力机制

我们的实验表明各种模型的分类和检测性能得到了一致的改进,证明了 CBAM 的广泛适用性。简单介绍:CBAM的主要思想是通过关注重要的特征并抑制不必要的特征来增强网络的表示能力。模块首先应用通道注意力,关注"重要的"特征,然后应用空间注意力,关注这些特征的"重要位置"。到此本文的正式分享内容就结束了,在这里给大家推荐我的YOLOv11改进有效涨点专栏,本专栏目前为新开的,后期我会根据各种前沿顶会进行论文复现,也会对一些老的改进机制进行补充,如果大家觉得本文帮助到你了,订阅本专栏,关注后续更多的更新~

tsg6698的博客 2万+

使用tika-core 获取文件的mime类型和扩展名

使用tika-core 获取文件的mime类型和扩展名 1、依赖 <dependency> <groupId>org.dom4j</groupId> <artifactId>dom4j</artifactId> <version>2.1.3</version> </dependency> <de

lyf_zm的博客 3156

零基础快速学习 ABAP 读者意见反馈和下一步写作计划表

大家在学习教程过程中,如果有任何关于 SAP ABAP 开发方面想了解的内容,可以直接在教程各篇文章下评论留言,我会将大家的意见统一汇总到下面的表格,作为我更新教程的内容参考来源之一。

2007 年 ~ 2025 年,深耕 SAP 技术 18 年 4279

基于 Spring Boot + Apache Tika 实现数据泄露防护(DLP)和敏感信息检测代码示例

【代码】基于 Spring Boot + Apache Tika 实现数据泄露防护(DLP)和敏感信息检测代码示例。

学亮编程手记 639

Data-Structures-and-Algorithm-Analysis-in-Java.pdf

作者: Weiss, Mark A. 出版社: Addison Wesley Data Structures and Algorithm Analysis in Java is an “advanced algorithms” book that fits between traditional CS2 and Algorithms Analysis courses. In the old ACM Curriculum Guidelines, this course was known as CS7. This text is for readers who want to learn good programming and algorithm analysis skills simultaneously so that they can develop such programs with the maximum amo...

ET2012新版免狗免安装绿色软件

ET2012新版免狗免安祖昂绿色软件。,新界面,新视觉,

SpringBoot 整合 Apache Tika提取数据

它支持多种文件格式,包括文档、电子表格、PDF、音频、视频、图片等,具有强大的文件内容解析能力。用于 敏感信息识别 和 数据泄露防护,我们可以在文件上传时提取文件内容,并在提取的文本中搜索潜在的敏感数据,如身份证号、信用卡信息、电话号码等。敏感信息的检测通常涉及正则表达式(Regex),你可以使用常见的模式来检测个人信息(如身份证号、信用卡号、电话号码等)。的架构组件主要包括以下几个核心部分,它们共同协作,以支持从各种文件格式中提取文本、元数据和其他信息。

上善若泪 1942

蓝牙模块HM-10手册

蓝牙模块HM-10手册,该手册对蓝牙模块HM-10进行了详细的介绍和使用方法以及一些AT指令。

上一篇: SpringBoot + Facade Pattern:通过统一接口简化多模块业务
下一篇: 如何设计一个支持三千万用户同时在线的短视频系统?
公众号-芋道源码
博客等级 码龄10年 1639粉丝 377原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值