Wikipedia 将来能否成为一个开发平台?

Wikipedia API使用指南 Wikipedia API https://pypi.org/project/Wikipedia-API/ https://github.com/martin-majlis/Wikipedia-API/ 安装 pip install Wikipedia-API Wikipedia-API是 基本使用 import wikipediaapi title = "china" wiki = wikipediaapi.Wikipedia( language='en', extract_forma 阅读详情

维基百科(Wikipedia)中的内容增长速度正在放缓,规模原本已经很小了的活跃编辑的数目也在下滑,Jimmy Wales 呼吁编辑们审查的内容越来越多,进一步阻碍了内容的增长。然而 Wikipedia 新鲜内容的减少并不意味着它的死亡,Wikipedia 拥有一个庞大的结构数据库,这是一个尚未被发现的宝藏。

Wikipedia 中的数据有大量来自用户创建,还有更多数据可供开发者进行分析。

SlumdogMillionaire.jpg

上图: 借助 Wikidashboard 浏览器扩展获得编辑历史记录 Edit history

这个快速成长的由用户贡献内容的知识库目前也许还处于青春期,Wiki 的发明者 Ward Cunningham 认为 Wales 要求审查内容的努力是一种不可避免的成熟表现,虽然这两种情形他都未必喜欢,未必代表 Wiki 的方向。然而 Wikipedia 数量庞大的知识库却为开发者带来了各种价值。

目前 Wikipedia 还没有 API 提供,然而它的数据却可以轻松访问,可以被下载到本地进行处理,最近,一个叫做 WikiXMLDB 的项目开始推出 XML 化的 Wikipedia,另外值得一提的还有 DBPedia,该项目将 Wikipedia 中的数据转换成结构数据库。人们开始用各种各样的方式访问这些数据并发现了一些实用价值。如果 Wikipedia 能推出几个正式 API,相信会像《纽约时报》推出 API 一样让人兴奋。

人们可以拿 Wikipedia 的数据做什么?

将 Wikipedia 作为一个重要的知识源

早期,主流媒体谈到 Wikipedia 的时候,多是对一些参与者感兴趣,那些留着及膝长须,住在新墨西哥的流浪公园的家伙喜欢发一些关于天文或厨艺的文章。Wikipedia 帮助人们释放出那些埋藏在大脑中的知识,对这些人系统地发掘只是建立在 Wikipedia 之上的众多价值之一。

Palo Alto 研究中心最近设计了一个叫做 WikiDashboard 的程序,这个工具可以分析任何一篇 Wikipedia 文章最近的修改历史。Paul Irish 曾是一个著名在线音乐博客站点的编辑,最近他设计了一个 Greasemonkey 脚本 可以直接在 Wikipedia 页面访问那些数据。

wikiragescreen.jpg

将 Wikipedia 作为新闻雷达

Wikipedia 对时事非常关注,一个叫 WikiRage 的站点根据 Wikipedia 文章被修改的频度来衡量某个话题的重要性。RWW 曾推出这样的文章,非广告目的的数据挖掘将来会很盛行,以及 Facebook 的情感引擎会很大。Wikipedia 的编辑的频度比起 Twitter 和 facebook 来说要小得多,但可能拥有很高的价值,最终会是社会媒体数据挖掘的一个重要补充。

最佳用例:平衡 Wikipedia 的结构数据

上个月,RWW 有篇文章提到,Google 好像在某些搜索结果中推出语义的结构数据,这些数据有的是 Google 自己分析的,有些很显然来自 Wikipedia,这些结构化数据会带来很多实用价值。

推荐服务网站 MSpoke 正在这样做,这个商业新闻跟踪服务使用 Wikipedia 训练它的推荐引擎。MSpoke 的的 Sean Ammirati 说,Wikipedia 的内容澄清页对帮助他们分清两个迈克尔乔丹中哪个是篮球明星,哪个是统计学家非常有帮助。在商业推荐服务中,这些信息非常有用。

通过对 Wikipedia 大量词汇的分析,MSpoke 已经可以快速理解他们从网络上发现的文章。这也是 Metaweb 和 Powerset 一直在做的事,然而 Powerset 已经被微软收购,而据传闻 Metaweb 前景也不太妙。

Wikipedia 可以让自己更多成为一个开放的数据库,而不是一个供众人修改的站点,也可能 Wikipedia 目前还没有足够流行到可以做出这样的跨越,或者它的政治纠纷,以及热情的衰退来得太早,到底怎样只有让时间来说明一切了。

本文国际来源:http://www.readwriteweb.com/archives/could_wikipedias_future_api.php
中文翻译来源:COMSHRAP CMS 官方网站

计算Wikipedia的Pagerank值 第一次写优快云的博客,感觉它的xhEditor用的不是那么顺手,这篇文章是我们课程WBIA(Web Based Information Architecture)的一个作业,是直接从作业报告word粘贴过来的,粘贴的时候挺不顺的,首先图片粘贴不过来得自己上传加上,其次格式粘贴过来有一些地方有点小问题得改。不管怎么样第一次写优快云博客,希望大家多多包涵,有想要源码的在评论给我留言。 作业要求地 阅读详情

相关推荐

解决使用wikipedia出现的问题ConnectionError: HTTPConnectionPool(host=‘en.wikipedia.org‘, port=80):

解决使用langchain访问wikipedia 出现ConnectionError: HTTPConnectionPool的问题

程序员的博客 3409

wikipedia_构建一个Wikipedia搜索应用程序

wikipediaby Ayo Isaiah 通过Ayo Isaiah 构建一个Wikipedia搜索应用程序 (Building a Wikipedia Search App) I just finished Free Code Camp’s Wikipedia Viewer app, where you pull articles side-by-side from Wikipedia u...

cumian9828的博客 816

使用Python与LangChain轻松查询Wikipedia内容

Wikipedia以其开放性和庞大的信息储备而闻名。通过程序化地访问Wikipedia数据,我们可以在AI应用开发中整合这些知识,比如问答系统、内容生成、数据分析等。LangChain是一个专注于构建语言模型应用的框架。它提供了方便的工具集,可以与第三方服务(如Wikipedia)集成,让开发者能够更高效地从这些资源中提取信息。

AWsggdrg的博客 1315

Wikipedia API Python教程

In this tutorial I’ll show you how we can implement Wikipedia API in Python to fetch information from a Wikipedia article. Let’s see how to do it. 在本教程中,我将向您展示如何在Python中实现Wikipedia API以从Wikipedia文章中获...

culing2941的博客 3541

(一)利用Wikipedia中文语料训练词向量word2vec——获取Wikipedia简体中文语料库

利用Wikipedia中文语料训练词向量一共分为两个篇章,这篇文章属于第一部分,包括下载Wikipedia语料库,并将其从繁体转换为简体。 目录第一步 下载语料库第二步 将下载好的bz2文件转换为txt(text)文件第三步 繁体转换为简体 第一步 下载语料库 Wikipedia中文语料库链接: https://dumps.wikimedia.org/zhwiki/ 打开网址后,就会看到如下的...

YiBochun-Blog 1732

Wikipedia corpus英文语料处理,获得原文

我们在预训练word vector或其他预训练任务时,需要大量的语料数据,Wikipedia开放了英文语料,大约11G:wiki英文语料下载链接 该语料库是.bz2格式,但是不能直接解压,需要使用工具处理,我们介绍两种常用的处理工具,gensim和wikiextractor。 Gensim gensim提供了处理工具,但是只能够获得文章的词列表,丢失了段落句子以及标点符号。 from ...

sigmeta的博客 5070

[深入了解如何使用Python进行Wikipedia数据检索]

Wikipedia提供了一套强大的API,可以通过编程方式访问百科全书中的大量数据。无论是用于研究目的,还是为某个应用提供支持,Wikipedia API都是一个宝贵的资源。Wikipedia是一个不可或缺的信息来源,通过合理使用其API,您可以为您的项目提供丰富的内容支持。在这篇文章中,我们讨论了如何安装相关的Python库,使用WikipediaLoader和WikipediaRetriever检索数据,并提供了一些常见问题的解决方案。

zjhnfmkh的博客 1311

[如何使用Wikipedia API:开发者必备指南]

Wikipedia API允许开发者从Wikipedia网站获取信息。你可以使用API搜索特定的词条,获取词条的详细信息,甚至是获取图片和链接。通过本文的介绍,我们希望你能够掌握如何使用Wikipedia API获取所需数据,并在开发中有效解决网络访问等常见问题。Wikipedia API官方文档wikipedia-api Python库。

dfvcbipanjr的博客 2478

探索 Wikipedia 的数据宝藏:wtf_wikipedia

探索 Wikipedia 的数据宝藏:wtf_wikipedia wtf_wikipedia a pretty-committed wikipedia markup parser 项目地址: https://gitcode.com/gh_mirrors/wt/wt...

gitblog_00008的博客 535

绝缘检测是什么? 绝缘检测原理 绝缘检测检测的是什么?那个量?电压?电流?电阻?

绝缘电阻是电气设备和电气线路最基本的绝缘指标。对于低压电气装置的交接试验,常温下电动机、配电设备和配电线路的绝缘电阻不应低于0.5MΩ(对于运行中的设备和线路,绝缘电阻不应低于1MΩ/kV)。 绝缘电阻的正确测量方法 现代生活日新月异,人们一刻也离不开电。在用电过程中就存在着用电安全问题,在电器设备中,例如电机、电缆、家用电器等。 影响因素 环境温湿度 一般材料的绝缘电阻值随环境温湿度的升高而减小。相对而言,表面电阻(率)对环境湿度比较敏感,而体电阻(率)则对温度较为敏感。 湿度增加,表面泄漏增大,导体电导

dianqicyuyan的博客 2万+

2024最新指南:如何用Python批量下载Sentinel-2数据(附避坑清单)

本文提供2024年最新Python批量下载Sentinel-2遥感数据的完整指南,涵盖环境配置、API准备、核心下载流程实现及实战避坑清单。通过智能查询器、断点续传下载器等实用工具,帮助用户高效获取遥感数据,避免常见网络问题和数据完整性验证失败。

silver的专栏 621

Py之wikipedia-api:wikipedia-api/Wikipedia的简介、安装、使用方法之详细攻略

​ Py之wikipedia-api:wikipedia-api的简介、安装、使用方法之详细攻略 目录 wikipedia-api的简介 wikipedia-api的安装 wikipedia-api的使用方法 wikipedia-api的简介 Wikipedia-API是一个易于使用的Python封装,用于访问维基百科的API。它支持从维基百科提取文本、章节、链接、分类、翻译等信息。文档提供了最常见用例的代码片段。 wikipedia-api的安装 pip install -i https

头部AI社区如有邀博主AI主题演讲请私信—心比天高,仗剑走天涯,保持热爱,奔赴向梦想!低调,专注,谦虚,自律,反思,成长,还算比较正能量的博主,公益免费传播…内心特别想在AI界做出一些可以推进历史进程影响力的技术(兴趣使然,有点小情怀,也有点使命感呀 7126

英飞凌IGBT驱动芯片2ED020I12F2去饱和电路设计总结整理收集

记录下英飞凌IGBT驱动芯片限流电阻阻值设计

nizhenyuchina的博客 5996

如何使用Python抓取Wikipedia文章

在本文中,我将使用Python创建一个网络抓取工具,该工具将抓取Wikipedia页面。 抓取工具将转到Wikipedia页面,抓取标题,然后随机链接到下一个Wikipedia页面。 我认为看到此刮板将访问哪些随机维基百科页面会很有趣! 设置刮板 首先,我将创建一个名为的新python文件scraper.py: touch scraper.py 为了发出HTTP请求,我将使用该requests库。您可以使用以下命令进行安装: pip install requests 让我们以网络抓取维基页面为起点: .

源代码杀手的博客 1669

别再手动算临界转速了!用ANSYS Workbench 2023 R2快速搞定转子坎贝尔图(附完整APDL命令流)

本文详细介绍了如何利用ANSYS Workbench 2023 R2快速生成转子坎贝尔图,实现全自动临界转速分析。通过对比传统手动计算与Workbench自动化流程的效率差异,展示了其在旋转机械设计中的革命性优势,包括大幅缩短分析周期、提升精度至98.7%。文章还提供了完整的APDL命令流和实战案例,帮助工程师快速掌握这一高效工具。

weixin_42699679的博客 475

智能体开发套件(ADK)介绍

city } ---") city_normalized = city . lower() . replace(" " , "") # 模拟天气数据库 mock_weather_db = {

lpfasd123的博客 1413

如何下载Wikipedia以便离线阅读

Have you ever wished you could download Wikipedia in its entirety, and have a copy of it on your personal computer or Android tablet? There’s actually an easy way to do this, though you will need some...

cum44153的博客 1930

【雷达】一维和二维自适应波束形成(DBF))DBF附matlab代码

1 简介 数字波束形成技术是天线波束形成原理与数字信号处理技术相结合的产物,其广泛应用于阵列信号处理领域.由于电磁工作环境的恶化和大量射频干扰的存在,在极低的信干噪比(SINR)条件下进行目标检测和信息提取十分困难.对于阵列系统,往往采用自适应数字波束形成(ADBF)技术,来抑制强干扰和方向性干扰对有用信号的影响.介绍了数字波束形成器的基本原理及其DSP的实现结构.​ 2 完整代码 clc;clear all;close all;%%%%%%%%%%%%%%%%%一维DBF%%%%%%%%%%%%%

qq_59747472的博客 7269

使用Python和LangChain加载Wikipedia内容:一个实用指南

Wikipedia是一个多语言的免费在线百科全书,由志愿者社区(称为Wikipedians)通过开放协作方式编写和维护。它使用名为MediaWiki的基于wiki的编辑系统。作为历史上最大和最受欢迎的参考工具,Wikipedia包含了海量的信息,涵盖了几乎所有领域的知识。本文介绍了如何使用Python和LangChain库来加载Wikipedia的内容。这为开发者提供了一个强大的工具,可以轻松访问和处理大量的结构化知识。

qq_29929123的博客 897

人群仿真软件:AnyLogic_(12).AnyLogic高级功能应用

在AnyLogic中,自定义行人行为是通过编写Java代码来实现的。行人行为的自定义可以包括行走路径的选择、速度变化、交互行为等。这使得仿真模型更加灵活和真实。

kkchenjj的博客 1062

无迹卡尔曼滤波 (UKF, Unscented Kalman Filter) 算法详解及案例分析

无迹卡尔曼滤波是一种用于估计非线性系统状态的递归算法。其目标是通过结合系统模型和观测数据,估计系统的最优状态。

闲人编程的博客 2632

架设Wikipedia的本地镜像

本文试图总结架设Wikipedia镜像的过程。   准备工作 首先需要安装Mediawiki软件,以及Mediawiki所依赖的软件,Apache,Php5,Mysql等,这里就不详细讲解了。对于懒人,有两个选择: 第一是安装Debian[1],这样apt-get install mediawiki就可以完成软件的安装。 第二是下载VMWare Player[...

http://john2007.javaeye.com/ 2423

efm32 入门.pdf

本PDF共计22页,介绍的是操作驱动API,下载与否自己斟酌。

【Python】wikipedia 库:用于从维基百科(Wikipedia)获取数据

wikipedia 是一个 Python 库,用于从维基百科(Wikipedia)获取数据。它提供了一个简单易用的接口,允许用户搜索维基百科页面、获取页面内容、摘要、链接、图片等信息。该库主要通过维基百科的 API(MediaWiki API)与维基百科交互,适用于快速原型开发、数据挖掘或教育用途。wikipedia 库的作用:搜索维基百科:根据关键词搜索相关页面。获取页面内容:提取维基百科页面的完整内容、摘要、标题、URL 等。多语言支持:支持访问不同语言版本的维基百科(如英文、中文、法文等)。简单接口:

彬彬侠的博客 3993

Probability and Statistics - 4th edition

Probability and Statistics - 4th edition

华为的C语言编程规范.pdf

华为技术有限公司内部技术规范。本规范制定了编写C语言程序的基本原则、规则和建议。从代码的清晰、简洁、可测试、安全、程序效率、可移植各个方面对C语言编程作出了具体指导。

安装Wikipedia2Vec提取单词特征

官网使用English Dump of Wikipedia训练的skip-gram model模型提取单词特征向量注意转换前将 单词转为小写,否则可能word2vec失败(即wikipedia2vec中是小写单词与feature vector之间的对应关系)

qq_42283621的博客 1625

快速上手Wikipedia Python库:goldsmith/Wikipedia项目指南

还在为从在线百科全书获取结构化数据而烦恼吗?每次都需要手动解析HTML、处理API请求、应对多语言支持?goldsmith/Wikipedia项目为你提供了一个优雅的Pythonic解决方案,让你在5分钟内就能轻松访问在线百科全书的海量知识! 读完本文,你将掌握: - ✅ Wikipedia库的完整安装和配置方法 - ✅ 核心API功能的实战代码示例 - ✅ 多语言支持和错误处理的最佳实践 -...

gitblog_00079的博客 559
上一篇: 海外知名 Web 开发与设计师访谈系列之:Jonathan Snook
下一篇: 跨浏览器兼容测试8大利器
comsharp
博客等级 码龄20年 1475粉丝 41原创
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付:10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值