【SearchGPT】复刻GPT实时网页搜索&浏览功能

原创 已于 2024-11-03 06:37:17 修改 · 8.3k 阅读 · 53 ·
CC 4.0 BY-SA版权
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
文章标签：

#语言模型 #人工智能 #自然语言处理 #langchain

于 2023-11-26 14:14:36 首次发布
文章介绍了如何增强GPT-4的能力，使其能够通过SerperAPI进行实时网络搜索，获取最新信息，提升模型的时效性和相关性。开发者分享了如何集成BingAPI、爬取网页内容、语义搜索以及匹配引用来源的详细步骤。

0. 引言

GPT的知识库涉及领域丰富、涵盖范围广泛，但是一直有一定的实效滞后，例如最新的GPT-4知识更新截止于2023年4月。为了跨越这个限制，今年OpenAI相继为GPT-Plus的用户开放了接入网页搜索的插件，和GPT-4自主根据需求决定搜索网络信息的功能。例如，我们可以问GPT一些根据知识库无法回答的问题，例如波士顿明天的天气怎么样：

GPT执行搜索后的回答：

自此，GPT可以根据具体问题的需要来联网获取最新信息，增强模型对实时数据检索的相关性和时效性。这篇文章就是对GPT内置的这个功能的一个实现，并且比网页端 GPT 自带的网络浏览功能更加迅速。

你也可以把它视为一个对 new Bing 和 Bard 的最小化的后端实现，一种搜索搜索引擎和AI问答的高度结合。

完整的代码可以查看：GitHub: SearchGPT。如果喜欢的话欢迎给这个仓库点一个⭐️。

1. 主要功能

  • 1. 通过 Serper (Google API) 快速实时的网络搜索

  • 2. 根据输入自动调整网络搜索和回答语言

  • 3. 从多个网页中多线程提取主体内容，以降低embedding中token数量的花费

  • 4. 通过 OpenAI Embedding 和 ChromaDB 实现相关语义的搜索

  • 5. 大模型根据参考的网络信息生成回答

  • 6. 支持自定义模型、AI的角色和输出格式的要求

  • 7. 将大语言模型回答中带引用的句子源网站的标题、摘要和链接进行匹配

2. 总体架构

​​​​​​​

3. 运行效果

De

最低0.47元/天 解锁文章
探索Serper - 如何在LangChain中使用Google搜索API
mmlihaio的博客
10-01 559
通过Serper API，你能够轻松地将搜索功能集成到应用中，从而提高用户体验。LangChain官方文档Serper API文档。
【ChatGPT实战】5.使用ChatGPT自动化操作网页
墨子琦的博客
05-09 3187
JavaScript可以用于编写浏览器自动化脚本，使得浏览器能够自动化执行特定任务，例如填写表单、点击按钮、爬取数据等等。所以我们可以借助JavaScript脚本代码来实现网页自动化操作，不会写JavaScript那就让ChatGPT帮你写 😜。
终极指南：Serper与SerpAPI搜索引擎集成深度对比
gitblog_00757的博客
09-11 387
你是否在构建AI应用时，为选择合适的搜索引擎API而烦恼？还在纠结Serper和SerpAPI哪个更适合你的项目需求？本文将从技术实现、功能特性、性能表现等多维度进行深度对比，助你30分钟内做出最佳选择。读完本文你将获得：两种API的核心差异分析、实战集成代码示例、性能测试数据及场景化选型建议。 ## 技术架构解析 ### Serper架构设计 Serper采用轻量级设计理念，核心代码集中在[...
大模型调用搜索接口【游玩大模型 三】
GS2333的博客
01-26 1117
gpt调用检索接口的方法
大模型与搜索引擎结合：智能体、思维链和智谱AI搜索代码案例
2401_84208172的博客
11-07 1993
随着大模型的不断发展，现在大模型在应用场景中逐渐改变了我们的使用习惯。通过RAG和搜索引擎的集成，大模型能逐步改善幻觉和时效性的问题。
.NET SK 如何给AI大模型添加搜索引擎功能？
xiaohucxy的博客
05-31 1410
我们通过上面的代码实现了一个搜索引擎插件，这个插件可以根据用户提出的问题搜索相关信息，然后返回给用户。
将搜索 API 与 GPT 模型相集成以实现实时网络访问，助力智能问答与信息检索功能比肩新必应
08-23
此外，项目的标签“搜索API与GPT模型集 实时网络智能问答”精确地指出了项目的两个核心要素：一是通过搜索API实现对互联网数据的实时访问，二是利用GPT模型来驱动智能化问答。这两大要素的结合，正是打造实时、智能...
超炫酷， 不用学前端也能自己做网页！这个Python库，3分钟内复刻GPT WEB应用
海哥python的博客
06-25 766
如果分享你的信息，对你有用！别忘了三连击哦！！在看关注！
GPT网页版带卡密开源源码
05-26
GPT网页版带卡密开源源码 高级版演示https://www.huoxinggpt.com ChatGPT是一种基于人工智能技术的聊天机器人，它可以与用户进行自然语言交互，提供各种服务和解决问题。ChatGPT的核心技术是GPT（Generative Pre-...
Python_使用GPT4V和viimium浏览网页.zip
05-24
本主题聚焦于使用Python的扩展库GPT4V和浏览器插件Vimium来高效地浏览网页。这两个工具结合使用，可以为开发者提供一个高度自定义且高效的网页浏览体验。 首先，GPT4V（假设是“GPT for Vim”的变体）可能是一个...
国内每天免费可用GPT网页版，支持GPT4Turbo识图问答+TTS语音对话+文档总结对话+Dall E3 对话文生图+国内大模型集合+AI 绘画+思维导图
weixin_68336959的博客
01-13 2701
大家可以通过收藏网页www.woka.chat直接进行访问，也可通过关注新公众号实现微信端使用~ 注册赠送大量额度，可用于网站全部功能（问答和绘画）！每天签到也可领取充足使用额度！
无需科学！Copilot网页版GPT-4无限制对话来了！
jinshiedu的博客
09-28 1132
商业版，office软件和office365网页中使用copilot，不需要科学手段；其他位置（如浏览器侧边栏和单独的copilot网页与bing网页）使用copilot，需要科学手段。微软copilot分为免费版copilot、个人家庭版copilot pro（每月20刀）和商业版copilot for Microsoft 365（每月30刀）。其中免费版和个人家庭版的copilot无论在任何情况下使用都需要科学手段。现在，商业版copilot网页也。全新账户，全新入口，全新体验。
如何使用AI大模型进行Bing搜索
qq_29929123的博客
07-20 1320
在本文中，我们将介绍如何利用AI大模型来进行Bing搜索，包括新闻搜索、图片搜索和视频搜索。我们将使用一个中专API地址(http://api.wlai.vip)来调用OpenAI的大模型，确保在中国可以正常使用这些功能。为了更好地理解，我们还会提供一些示例代码。
基于 OpenSearch 向量检索版+大模型，搭建对话式搜索
阿里云云栖号
06-14 1660
阿里云OpenSearch再推面向企业开发者的PaaS方案：基于OpenSearch向量检索版，为企业开发者提供性能表现优秀、性价比优异的向量检索服务，并提供与大模型结合脚本工具，用户可在使用能力可靠的向量检索服务的同时，自由选择文档切片方案、向量化模型、大语言模型。
国内可直接使用的GPT-4.0人工智能MidTool网页版
热门推荐
weixin_56077078的博客
12-20 1万+
随着人工智能技术的不断进步，GPT-4.0人工智能MidTool网页版的推出，为国内用户打开了一扇通往智能世界的大门。它不仅代表了技术的进步，更是智能化生活方式的一种体现。无论是工作学习，还是日常生活，MidTool网页版都能成为你的得力助手。让我们一起期待，这款工具将如何在未来改变我们的世界。
LLMs之GPT：SearchGPT的简介、安装和使用方法、案例应用之详细攻略
头部AI社区如有邀博主AI主题演讲请私信—心比天高，仗剑走天涯，保持热爱，奔赴向梦想！低调，专注，谦虚，自律，反思，成长，还算比较正能量的博主，公益免费传播…内心特别想在AI界做出一些可以推进历史进程影响力的技术(兴趣使然，有点小情怀，也有点使命感呀
07-25 1798
​ LLMs之GPT：SearchGPT的简介、安装和使用方法、案例应用之详细攻略 目录 SearchGPT的简介 SearchGPT的安装和使用方法 1、SearchGPT的安装 2、SearchGPT的使用方法 SearchGPT的案例应用 SearchGPT的简介 2024年7月25日，OpenAI正式发布SearchGPT原型。这是新 AI 搜索功能的临时原型，可为您提供快速及时的答案以及清晰相关的来源。 SearchGPT是一个正在测试的临时原型，旨在结合AI模型和网络信息
使用 ChatGPT 进行网页抓取：分步指南
bmh18888的博客
07-19 2153
评论有选择器 #main-content > ul > li:nth-child(3) > div.container_\_09f24_\_FeTO6.hoverable_\_09f24_\__UXLO.y-css-way87j > div > div.y-css-cxcdjj > div:nth-child(1) > div.y-css-1iy1dwt > div:nth-child(2) > div > div > div > div.y-css-ohs7lg > span.y-css-jf9frv。
GPT-4.0网页平台-ChatYY
S0ybean的博客
11-09 5568
ChatYY-移动支持的GPT4
if exist "%~dp0image\P25A_GL" ( @echo zhenguo P25A_GL fastboot %* flash gpt %~dp0images\P25A_GL\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ) else ( @echo zhenguo ELSE fastboot %* flash gpt %~dp0images\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ) 这段什么意思
最新发布
10-19
<think>我们有一个批处理脚本，其中包含一个if-else结构，用于判断某个路径是否存在，并根据判断结果执行不同的fastboot命令。 具体代码为： if exist "%~dp0image\P25A_GL" ( @echo zhenguo P25A_GL fastboot %* flash gpt %~dp0images\P25A_GL\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ) else ( @echo zhenguo ELSE fastboot %* flash gpt %~dp0images\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ) 解释如下： 1. `if exist "%~dp0image\P25A_GL"`：检查当前批处理文件所在目录（%~dp0）下的子目录`image\P25A_GL`是否存在。 - `%~dp0`：批处理文件中表示当前批处理文件所在目录的路径，并以反斜杠结尾。 - 所以，`%~dp0image\P25A_GL`就是当前批处理文件所在目录下的`image\P25A_GL`文件夹。 2. 如果该目录存在，则执行括号内的语句： - `@echo zhenguo P25A_GL`：打印文本“zhenguo P25A_GL”（可能是调试信息或标识特定分支） - `fastboot %* flash gpt %~dp0images\P25A_GL\Gpt_entry_ufs.bin`：执行fastboot命令，使用参数`%*`（表示传入批处理的所有参数），然后`flash gpt`后面跟着一个bin文件的路径（注意：这里路径是`images`而不是`image`，可能是笔误？或者有两个不同的目录？） - 注意：这里第一个分支使用的是`%~dp0images\P25A_GL\Gpt_entry_ufs.bin`，而第二个分支使用的是`%~dp0images\Gpt_entry_ufs.bin` - 如果fastboot命令执行失败（即返回非0错误码），则执行后面的错误处理： - `||`：表示如果上一条命令失败，则执行后面的命令。 - 后面的命令是：`@echo "Flash gpt error" && pause && exit /B 1` - 这里用`&&`连接，表示前面的命令成功才执行后面的，但因为我们是在错误处理，所以实际上当fastboot失败后，会执行： 1. 打印错误信息"Flash gpt error" 2. 暂停（pause），等待用户按任意键继续 3. 退出当前批处理，返回错误码1（/B表示退出当前批处理脚本，而不退出命令行窗口） 3. 如果该目录不存在，则执行else分支： - `@echo zhenguo ELSE`：打印文本“zhenguo ELSE” - 执行命令：`fastboot %* flash gpt %~dp0images\Gpt_entry_ufs.bin` - 注意，这里没有`P25A_GL`子目录，而是直接使用`images\Gpt_entry_ufs.bin` - 同样，如果命令失败，则执行同样的错误处理（打印错误、暂停、退出）。 需要注意的点： - 路径中的`image`和`images`：在if条件中检查的是`image\P25A_GL`，而执行fastboot时使用的是`images\...`。这可能是两个不同的目录。如果`image`目录存在但`images`目录不存在，那么即使进入了第一个分支，也会因为bin文件不存在而失败。同样，第二个分支也是使用`images`目录。所以这里的`image`（单数）和`images`（复数）可能是两个不同的目录，或者是一个笔误？ 因此，该脚本的逻辑是： - 如果当前批处理文件所在目录下的`image\P25A_GL`文件夹存在，则使用`images\P25A_GL\Gpt_entry_ufs.bin`文件刷写gpt分区。 - 否则，使用`images\Gpt_entry_ufs.bin`文件刷写gpt分区。 - 刷写过程中如果出错，则打印错误信息，暂停并退出。 这个脚本可能是为了适配两种不同的设备（比如一种设备需要特定的GPT文件，而另一种使用默认的）而设计的。 根据以上分析，我们可以总结如下： 代码含义： - 该批处理脚本根据是否存在特定目录（%~dp0image\P25A_GL）来选择不同的GPT刷写文件，然后使用fastboot工具刷入设备的gpt分区。如果刷写失败，则中断脚本并提示错误。 注意事项： - 路径中使用了`image`和`images`，需要确保这两个目录都存在且包含正确的文件，否则即使目录判断正确，也可能因为文件路径错误而失败。 生成相关问题： - 批处理中`%~dp0`的含义是什么？ - 如何理解fastboot命令中的`%*`？ - 批处理中`||`和`&&`运算符的作用？ - 为什么在if条件中检查`image\P25A_GL`而实际使用的bin文件在`images\...`路径下？ - 如何确保批处理脚本在遇到错误时退出？ - 批处理脚本如何判断一个目录是否存在？ 下面按照要求生成回答。 </think>### 批处理脚本分析 以下是对您提供的批处理代码的逐层解析： #### 1. 路径判断逻辑 ```batch if exist "%~dp0image\P25A_GL" ( ... ) else ( ... ) ``` - `%~dp0`：表示当前批处理文件所在目录的完整路径 - **条件判断**：检查当前脚本目录下的 `image\P25A_GL` 文件夹是否存在 - **路径示例**： 若脚本位于 `C:\flash_tool\`，则检查路径为： $ \text{C:\flash_tool\image\P25A_GL} $ #### 2. 路径存在时执行的分支（if块） ```batch @echo zhenguo P25A_GL fastboot %* flash gpt %~dp0images\P25A_GL\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ``` - **执行流程**： 1. 输出提示信息 `zhenguo P25A_GL` 2. 执行刷写命令： $ \text{fastboot [参数] flash gpt [路径]\images\P25A_GL\Gpt_entry_ufs.bin} $ 3. 错误处理链： - 若刷写失败（`||`），输出错误信息 - 暂停等待用户响应（`pause`） - 退出脚本并返回错误码 1（`exit /B 1`） #### 3. 路径不存在时执行的分支（else块） ```batch @echo zhenguo ELSE fastboot %* flash gpt %~dp0images\Gpt_entry_ufs.bin || @echo "Flash gpt error" && pause && exit /B 1 ``` - **执行流程**： 1. 输出提示信息 `zhenguo ELSE` 2. 执行备用刷写命令： $ \text{fastboot [参数] flash gpt [路径]\images\Gpt_entry_ufs.bin} $ 3. 相同的错误处理链 ### 关键语法解析 | 语法 | 作用 | |--------------|----------------------------------------------------------------------| | `%~dp0` | 获取当前脚本所在目录路径 | | `%*` | 传递调用脚本时输入的所有参数 | | `||` | 逻辑"或"运算符，前命令失败时执行后续命令 | | `&&` | 逻辑"与"运算符，前命令成功时执行后续命令 | | `exit /B 1` | 退出脚本并返回错误码1（`/B`表示不关闭CMD窗口） | ### 脚本设计意图 此脚本实现**智能设备刷写流程**： 1. **动态路径选择**：根据设备特定目录（P25A_GL）是否存在选择刷写文件 2. **错误防御机制**：确保刷写失败时立即停止并提示错误 3. **参数透明传递**：通过 `%*` 保留所有原始参数 4. **用户交互**：错误时暂停等待用户确认后再退出 ### 潜在优化建议 ```batch :: 优化方案：集中错误处理 set binFile=%~dp0images\Gpt_entry_ufs.bin if exist "%~dp0image\P25A_GL" ( set binFile=%~dp0images\P25A_GL\Gpt_entry_ufs.bin ) fastboot %* flash gpt %binFile% if errorlevel 1 ( echo 刷写GPT分区失败: %binFile% pause exit /B 1 ) ``` ### 相关问题 1. **`%~dp0` 在Windows批处理中有哪些变体？如何获取文件扩展名？**[^2] 2. **fastboot的flash命令支持哪些分区类型？如何验证刷写结果？** 3. **批处理中 `&&` 和 `||` 的优先级规则是什么？如何避免逻辑链错误？**[^3] 4. **如何实现批处理脚本的多级错误处理？不同错误码的最佳实践？** 5. **Windows批处理中如何安全处理带空格的路径？**[^1] [^1]: 关于路径处理的更多细节，可参考批处理变量扩展文档 [^2]: `%~dp0` 属于批处理的参数扩展语法，详见Windows命令参考手册 [^3]: 逻辑运算符优先级问题在实际脚本调试中常见，需特别注意执行顺序
评论 5
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值