手把手教你使用Python打造一款简易搜索引擎

手把手教你使用Python打造一款简易搜索引擎!第二个百度? /1 前言/ 相信大家在知识共享的这个年代一定在网上下载了很多的文件保存以供日后有时间学习吧,毕竟硬盘空间也比较有限,下面我们就来说说我们要做的这个项目,就是搜索盘搜里的资源然后进行下载。 /2 项目目标/ 实现搜索自己想要的文件,并且下载文件。 /3项目准备/ 使用sublime text 3 开发。因为此次我们需要用到交互式来完成操作,所以需要在sublime text 3 下载一个sublimeREPL插件来进行辅助开发。 /4... 阅读详情

/1 前言/

    相信大家在知识共享的这个年代一定在网上下载了很多的文件保存以供日后有时间学习吧,毕竟硬盘空间也比较有限,下面我们就来说说我们要做的这个项目,就是搜索盘搜里的资源然后进行下载。

/2 项目目标/

    实现搜索自己想要的文件,并且下载文件。

/3 项目准备/

    使用sublime text 3 开发。因为此次我们需要用到交互式来完成操作,所以需要在sublime text 3 下载一个sublimeREPL插件来进行辅助开发。

/4 项目实现/

1、打开盘搜,并随意打开一个链接,如下图所示:

2、然后可以看到这个画面,如下图所示。


3、此时这个网页地址为:
http://www.pansou.com/?q=成化十四年
由此可以看出它是一个get请求。于是requests.get搞起来,这样我们就实现了第一步,搜索。于是,可以这样写代码:
import requests 
def down(content):
  content=input('请输入要下载的文件名')
  rep=requests.get('http://www.pansou.com/?q='+str(content))
  rep.encoding='utf-8'
4、这样就得到了上个页面中的网页源代码,我们通过搜索相关关键字发现竟然搜不到:


5、那么这是怎么回事?原来这是因为ajax异步加载导致的部分关键代码显示不出来。这可就犯难了,换句话说这就触及到我的知识点盲区了。
因为小编并未学过前端,只知道有ajax这回事,哪里知道这个问题怎么产生怎么解决了。不过不用怕,还好小编有一个大绝招,那就是找接口。我找呀找,终于被我找到了,哎,功夫不负苦心人。如图所示:


6、发现这是个json格式的所以我们现在可以将他进行读取,如图:


7、不容易啊,json的坑很多,于是决定用字典。哈哈哈哈,果然适合自己的才是最香的。

找到了这些东西我们就可以把他们提取出来啦,这样我们就提取出了第一页的所有结果,要想提取第二页的结果只需将p的结果改为2即可。

最终的结果,如图:

8、接下来我们强化下程序,让他具有交互功能,供用户选择。

9、但是我们了解到callback一般都是可变的函数,所以真正能用上的就只有两个参数,q和p,于是:

这样就完成了指定页面的文件浏览。

下载的话也比较简单,直接将链接复制到浏览器中即可,这样就完成了一个最简单的搜索引擎了。

/5 小结/

1、不建议抓取太多数据,容易对服务器造成负载,浅尝辄止即可。
2、本文基于Python网络爬虫,利用爬虫库,打造了一款简易的Python搜索引擎。
3、实现的时候,总会有各种各样的问题,切勿眼高手低,勤动手,才可以理解的更加深刻。
4、如果需要本文源码的话,请在公众号后台回复“引擎”关键字进行获取,觉得不错,记得给个star噢。

end

由菜鸟学Python原班人马打造的公众号【程序员GitHub】,专注于分享GitHub上有趣的资源包括,Python,Java,Go语言前端学习等优质的学习资源,爆料程序员圈的新鲜趣事,热门干货,职场感悟,感兴趣的小伙伴可以来捧场!

程序员GitHub



长按2秒,输入:【福利】

点这里,进菜鸟学PythonB站大本营
python 实现 搜索 课程设计 代码 python 实现 搜索 课程设计 代码 二分搜索(Binary Search) 二叉树遍历(Binary Tree Traversal) 双重线性搜索(Double Linear Search) 双重线性搜索递归(Double Linear Search Recursion) 斐波那契搜索(Fibonacci Search) 爬山算法(Hill Climbing) 插值搜索(Interpolation Search) 跳跃搜索(Jump Search) 线性搜索(Linear Search) 快速选择(Quick Select) 哨兵线性搜索(Sentinel Linear Search) 简单二分搜索(Simple Binary Search) 模拟退火算法(Simulated Annealing) 禁忌搜索(Tabu Search) 三分搜索(Ternary Search) 立即下载

相关推荐

SAP ABAP VL09 BAPI VL 216

ls_batch_item-fact_unit_denom = ls_lips_split-umvkn. "销售数量转换为 SKU 的值(分母)ls_batch_item-fact_unit_nom = ls_lips_split-umvkz. "销售数量转换成SKU的分子(因子)ls_batch_item-sales_unit_iso = ls_lips_split-meins. "被拆分DN基本单位。

ChampaignWolf的专栏 2300

三十岁了从零开始学python还有前途吗?很迷茫啊

对于学习这件事,我一直认为没有时间先后,啥时候学习都不晚,不管你现在年龄多大,只要有心想学习,一切都好说。 首先,你要学的python是属于技术类的知识,对于喜欢搞技术的朋友来说,到书店或图书馆选一本有关python的资料书,然后自己制定一个详细的学习计划,然后带着问题去阅读,你会发现这样学起来真的很轻松; 其次,明白了里面的原理,那就必须上手去操作,只有通过验证,才能理解在学习中遇到的那些晦涩难通的概念与执行原理。 当然每个人看书学习的方式与效率不同,要根据自己的情况总结出适合自己的方式,只有掌握了看不

JAVAmonster12的博客 1900

Infinite-Canvas:一站式AI绘画工作流平台部署与实战指南

在 AI 绘画和内容创作领域,你是否经常遇到这样的困扰:灵感来了,却要在多个工具间来回切换——找素材、写提示词、调整参数、批量生成,整个过程繁琐且低效。创作一个系列作品时,管理不同版本的图片和提示词更是让人头疼。如果你渴望一个能整合所有流程,实现从素材管理、提示词工程到批量出图一站式完成的工作台,那么今天介绍的 Infinite-Canvas 正是为你量身打造的解决方案。 Infinite-Canvas 是一个开源的本地网页应用,它将 AI 绘画的完整工作流集成在一个界面中。无论你是想快速生成单张图片,还是

weixin_28707535的博客 340

Python实战之手写一个搜索引擎

这篇文章,我们将会尝试从零搭建一个简单的新闻搜索引擎当然,一个完整的搜索引擎十分复杂,这里我们只介绍其中最为核心的几个模块分别是数据模块、排序模块和搜索模块,下面我们会逐一讲解,这里先从宏观上看一下它们之间的工作流程。。

2301_80239908的博客 2115

IntelliJ IDEA 2025.1 + Gradle 镜像配置避坑指南:解决依赖下载慢的终极方案

本文针对IntelliJ IDEA 2025.1开发环境中Gradle依赖下载缓慢的问题,提供了详细的镜像配置避坑指南。通过解析Gradle依赖解析机制,重点指导如何正确配置阿里云等国内镜像仓库,并分享验证配置生效、排查常见错误及高级优化技巧,旨在彻底解决依赖下载难题,提升开发效率。

weixin_28835551的博客 532

GAMES101:MacOS作业环境搭建

查看gcc/clang的位置产看gcc/clang的版本1.1.2 安装cmake。

weixin_38844255的博客 719

用python制作一个搜索神器!

今天,我无聊的时候做了一个搜索文章的软件,有没有更加的方便快捷不知道,好玩就行了。基于Python tkinter 制作文章搜索软件,都是一些基础的应用。到了这里,我们这个功能就实现了,是不是很神奇。搜索文章的软件就实现了,有的人说了,何必这么麻烦,直接去官网搜索就好了啊。确实,可是通过这个练习,我们可以学到很多东西。

z099164的博客 1096

基于STM32设计的老人防摔倒报警设备(OneNet)_65

本文设计了一种基于STM32单片机的智能老人防摔倒报警设备。该系统结合MPU6050陀螺仪传感器实时监测老人的姿态变化,检测摔倒事件;通过SIM800C通信模块发送短信通知紧急联系人,并将GPS定位信息上传至云端平台,确保家属能够及时了解老人的准确位置。

1万+

深入浅出:使用Python构建一个微型搜索引擎从零开始!

我们将首先创建一个简单的爬虫来抓取网页内容,然后使用这些内容构建一个反向索引,最后实现一个简单的搜索算法来查找相关内容。那么,搜索引擎是如何工作的呢?在下一部分,我们将优化我们的搜索引擎,并提供更高级的功能。好的,我们现在有了一个可以工作的简单爬虫,但为了构建我们的搜索引擎,我们还需要其他组件。在前面的部分,我们已经构建了一个基本的搜索引擎,但为了使其更为高效和用户友好,我们需要进行一些优化和增加一些高级特性。为了完整性,我们现在需要将我们的爬虫、文本处理方法和搜索方法组合起来,创建一个简单的搜索引擎。

m0_57781768的博客 1075

★教程3:Simulink学习教程入门60例目录

1.订阅本教程用户可以免费获得本博任意1个(包括所有免费专栏和付费专栏)博文对应代码;2.本Simulink课程的所有案例(部分理论知识点除外)均由博主编写而成,供有兴趣的朋友们自己订阅学习使用。未经本人允许,禁止任何形式的商业用途;3.本课程除了介绍常见的Simulink模块介绍之外,我们更侧重于各种实例的完整设计介绍。从通信,控制器,图像处理,语音处理,电力系统等诸多常用领域介绍了相关案例,如果对于某个较为复杂的案例,初学者无法正确复现,也可以私信博主获得完整Simulink模型文件。

FPGA/MATLAB学习教程/源码/项目合作开发 1万+

【STK】手把手教你利用STK进行关联分析仿真01-STK/CAT模块介绍

今天主要介绍接近分析工具CAT。

weixin_44184852的博客 1108

Mysql基础(4)

全文本搜索: 前提:MyISAM 支持,InnoDB不支持 理解: (LIKE关键字,正则表达式 也是全文本搜索 缺点:性能,明确控制,智能化 ) Mysql创建表时,指定列中各词的一个索引,搜索可以针对这些词进行, 可以快速有效的决定哪些词匹配(哪些行包含它们),哪些词不匹配等等 全文本搜索使用 必须索引被搜索的列,而且要随着数据的改变不断重新索引,在对表列进行适当设计后,My...

qq_41553240的博客 299

Spring AI 项目实战(一):Spring AI 核心模块入门

摘要:本文探讨了Spring Boot与Spring AI在Java生态下开发智能应用的技术融合。Spring Boot通过自动配置和嵌入式服务器简化企业级应用开发,其核心架构包括Spring Application和Web MVC框架。Spring AI则提供标准化接口,整合Hugging Face、TensorFlow等AI引擎,模块化支持NLP、CV和ML任务。文章通过代码示例展示了文本分类、图像处理和机器学习预测的实现,为开发者提供了Java生态下高效构建AI应用的解决方案。

博客 1533

怎样在input里加入搜索_手把手教你使用Python打造一款简易搜索引擎

点击上方“Python爬虫与数据挖掘”,进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤一去紫台连朔漠,独留青冢向黄昏。/1 前言/相信大家在知识共享的这个年代一定在网上下载了很多的文件保存以供日后有时间学习吧,毕竟硬盘空间也比较有限,下面我们就来说说我们要做的这个项目,就是搜索盘搜里的资源然后进行下载。/2 项目目标/ 实现搜索自己想要的文件,...

weixin_39553757的博客 341

android 蓝牙通讯demo

android 下蓝牙通讯demo,实现了发现蓝牙,使能蓝牙,通过蓝牙发送消息。

TMS_WebGMaps_1.9.8.0_Full_Source

TMS_WebGMaps_1.9.8.0_Full_Source 全源码 delphi cbuilder

python怎么做简单的搜索引擎推广_手把手教你使用Python打造一款简易搜索引擎

一去紫台连朔漠,独留青冢向黄昏。/1 前言/相信大家在知识共享的这个年代一定在网上下载了很多的文件保存以供日后有时间学习吧,毕竟硬盘空间也比较有限,下面我们就来说说我们要做的这个项目,就是搜索盘搜里的资源然后进行下载。/2 项目目标/实现搜索自己想要的文件,并且下载文件。/3项目准备/使用sublime text 3 开发。因为此次我们需要用到交互式来完成操作,所以需要在sublime text...

weixin_39598584的博客 304

精雕软件(JDpaint) 5.5 绿色版

精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版精雕软件(JDpaint) 5.5 绿色版

无需API密钥!用TWINT+Elasticsearch打造Twitter实时搜索引擎

在当今信息爆炸的时代,获取有价值的社交媒体数据对研究者、市场分析师和数字营销人员至关重要。TWINT作为一款强大的Twitter数据采集工具,让你无需Twitter API密钥即可轻松抓取用户推文、关注者、话题趋势等关键信息。本文将带你探索如何将TWINT与Elasticsearch结合,构建一个功能完备的Twitter实时搜索引擎,解锁社交媒体数据的全部潜力。 ## 🌟 TWINT:突破Tw

gitblog_01180的博客 525

Camera2Demo

在Camera2 的基础上进行封装,使得Camera2一堆初始化逻辑与Activity分离,降低耦合度,完成预览拍照并保存的操作

chatgpt赋能python:如何使用Python进行搜索引擎优化研究

本文由chatgpt生成,文章没有在chatgpt生成的基础上进行任何的修改。以上只是chatgpt能力的冰山一角。作为通用的Aigc大模型,只是展现它原本的实力。对于颠覆工作方式的ChatGPT,应该选择拥抱而不是抗拒,未来属于“会用”AI的人。🧡AI职场汇报智能办公文案写作效率提升教程 🧡专注于AI+职场+办公方向。下图是课程的整体大纲下图是AI职场汇报智能办公文案写作效率提升教程中用到的ai工具。

aijinglingchat的博客 174

如何使用python从0打造一款音乐播放器

作者qq:64761294 编程/考试交流群:834531270 欢迎交流 核心播放模块(pygame内核) import time import pygame import easygui as gui file = r'D:\CloudMusic\G.E.M.邓紫棋,艾热 - 光年之外 (热爱版).mp3' #这里为音乐文件路径 pygame.mixer.init() gui.msgbo...

封亚飞的技术博客 471

python3制作一款搜索软件

用python打造一款搜索软件,可以助各位读者快速找到想要的资源,废话不多说,直接上代码,首先导入相应的模块: import random import webbrowser import re from urllib import parse from tkinter import * from tkinter import ttk import win32api import win32con...

活动的笑脸的博客 1万+

OwlLook小说搜索引擎:打造专属网络小说阅读平台

在信息爆炸的时代,网络小说爱好者常常面临一个共同的问题:如何在海量的小说资源中快速找到自己想看的内容?OwlLook小说搜索引擎应运而生,为你提供一个简洁高效的小说搜索和阅读解决方案。 ## 项目概述与核心价值 OwlLook是一个开源的网络小说搜索引擎,专注于为用户提供清新简洁的搜索和阅读体验。这个项目最大的特色在于支持**自定义部署**,让你能够在自己服务器上搭建专属的小说搜索平台,个性化

gitblog_00508的博客 2388

chatgpt赋能python:PythonWhoosh:优秀的搜索引擎库

本文由chatgpt生成,文章没有在chatgpt生成的基础上进行任何的修改。以上只是chatgpt能力的冰山一角。作为通用的Aigc大模型,只是展现它原本的实力。对于颠覆工作方式的ChatGPT,应该选择拥抱而不是抗拒,未来属于“会用”AI的人。🧡AI职场汇报智能办公文案写作效率提升教程 🧡专注于AI+职场+办公方向。下图是课程的整体大纲下图是AI职场汇报智能办公文案写作效率提升教程中用到的ai工具。

tulingtest的博客 422

学习python-day02-15---转自Python分布式爬虫打造搜索引擎Scrapy精讲

第三百五十九节,Python分布式爬虫打造搜索引擎Scrapy精讲—elasticsearch(搜索引擎)介绍以及安装 elasticsearch(搜索引擎)介绍 ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎,基于RESTful web接口。Elasticsearch是用Java开发的,并作为Apache许可条款下的开放源码发布,是第二最...

u013683613的博客 319

元宵节就要到了,手把手教你用Python打造一款3D花灯

点击上方“Python爬虫与数据挖掘”,进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤独有宦游人,偏惊物候新。1 前言说起元宵节,各位有没有觉得这是咱们中国人最...

pdcfighting的博客 739

认识 Icarus:用 Python aiohttp 与 Vue.js 打造的开源社区论坛程序

Icarus 是一款使用 Python 3 与 aiohttp 异步框架编写、前端由 Vue.js 驱动的开源社区论坛程序。它集论坛、百科、用户系统和后台管理于一体,配合 PostgreSQL、Redis 与 Elasticsearch,为自建社区提供了一套开箱即用的完整方案。无论你想搭建游戏公会论坛、技术社区还是个人兴趣小组,这款开源论坛程序都能帮你快速上线。本文将从技术栈、核心功能、安全机制到

gitblog_00980的博客 940
上一篇: 180万大奖,优先锁定高薪Offer,2020科大讯飞A.I.开发者大赛邀你挑战!
下一篇: 15 个边玩游戏边学编程的网站
菜鸟学Python
博客等级 码龄9年 8095粉丝 571原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值