TikTok评论抓取工具技术文档

TikTok评论抓取工具技术文档

TikTokCommentScraper 项目地址: https://gitcode.com/gh_mirrors/ti/TikTokCommentScraper

安装指南

项目简介

本项目是一个TikTok评论抓取工具，能够从几乎任何TikTok帖子中获取所有评论。这对于抽奖、投票或其他大型社区互动非常有用。

安装步骤

1. 克隆仓库：

   • 使用Git克隆仓库：

     git clone https://github.com/cubernetes/TikTokCommentScraper
     

   • 如果没有安装Git，可以直接下载ZIP文件：

     curl -L -o "TikTokCmtScraper.zip" https://github.com/cubernetes/TikTokCommentScraper/archive/refs/heads/main.zip
     

   • 如果使用Windows 7且没有curl，可以直接从GitHub仓库下载ZIP文件并解压。

2. 使用虚拟环境：

   • 本项目包含了一个精简的Python虚拟环境（约7MB），适用于Windows系统。Linux用户需要手动安装Python和依赖项。

3. 安装依赖项（非Windows用户）：

   • 如果不想使用虚拟环境或不是Windows用户，需要手动安装以下Python依赖项：

     pip install pyperclip openpyxl
     

项目使用说明

快速使用指南

1. 打开浏览器：

   • 使用基于Chromium的浏览器（如Chrome、Brave、Chromium）。
   • 打开你想要抓取评论的TikTok帖子（确保你可以手动滚动评论）。

2. 打开开发者控制台：

   • 按F12或CTRL+SHIFT+J打开开发者控制台。

3. 复制JavaScript代码：

   • 在项目根目录下，双击运行Copy JavaScript for Developer Console.cmd文件。
   • 如果不是Windows用户，手动运行src/CopyJavascript.py文件。

4. 粘贴并运行JavaScript代码：

   • 回到开发者控制台，粘贴JavaScript代码并运行。
   • 等待直到出现“CSV copied to clipboard!”的提示。

5. 提取评论：

   • 双击运行Extract Comments from Clipboard.cmd文件。
   • 如果不是Windows用户，手动运行src/ScrapeTikTokComments.py文件。
   • 生成的Comments_<UtcTimeStamp>.xlsx文件将包含所有评论和附加信息。

详细使用说明

• JavaScript代码：

  • JavaScript代码位于src/ScrapeTikTokComments.js，用于在开发者控制台中运行。
  • 代码会自动滚动评论并加载所有评论，包括二级评论。
  • 最终将所有评论转换为CSV格式并复制到剪贴板。

• Python脚本：

  • src/ScrapeTikTokComments.py脚本用于从剪贴板提取CSV格式的评论并转换为Excel文件。

项目API使用文档

本项目主要通过JavaScript和Python脚本实现评论抓取，没有提供额外的API接口。

项目安装方式

• Windows用户：

  • 直接使用项目中包含的虚拟环境，无需额外安装Python和依赖项。

• Linux用户：

  • 需要手动安装Python和依赖项：

    pip install pyperclip openpyxl
    

注意事项

• 安全性：

  • 不要随意将任何代码粘贴到开发者控制台，复制外部代码到控制台存在安全风险。

• 性能：

  • 本工具在测试中表现良好，但在处理超过3000条评论时可能会出现轻微卡顿。

• TikTok限制：

  • TikTok可能会限制显示所有评论，导致实际抓取的评论数量少于显示的数量。

TikTokCommentScraper 项目地址: https://gitcode.com/gh_mirrors/ti/TikTokCommentScraper