网络爬虫,淘宝API商品详情测试(抓取详情数据)

网络爬虫是通过什么方式来寻找网络上的信息的呢

通俗来讲,网络蜘蛛是通过网页的链接地址来寻找网页的。从网站某一个页面(通常是首页)开始,读取网页的内容,找到在网页中的其它链接地址,然后通过这些链接地址寻找下一个网页,这样不断循环,不断读取网上的信息,直到把这个网站所有的网页都抓取完为止。这样看来,网络爬虫就是一个爬行程序,一个抓取网页的程序。

 为了进行淘宝的API开发,首先我们需要做下面几件事情。

注册地址

1)开发者注册一个账号,

2)然后为每个淘宝应用注册一个应用程序键(App Key) 。

3)下载淘宝API的SDK并掌握基本的API基础知识和调用,具体可以参考论坛的信息(http://dev.open.taobao.com/bbs/forum.php )里面的技术分享区等。

4)利用SDK接口和对象,传入AppKey或者必要的时候获取并传入SessionKey来进行程序开发。

5)利用淘宝平台的文档中心和API测试工具,对接口进行测试。从而了解返回信息,方便程序获取。

以上是一般淘宝API应用开发的关键流程,其中通过淘宝文档中心和API测试工具,进行概念了解和接口信息查询很重要。因为这些数据就是我们需要在逐步显示出来的。淘宝的API很多,不过都分为了好几个领域,慢慢就会了解深入了。

 然后我们也可以通过淘宝平台的API测试工具来了解返回的数据信息,每个淘宝API最下面一般都有一个API工具的内容,如下所示。其中我们选择【API Tools在线测试工具】就可以测试返回的接口数据了。

item_get - 获得淘宝商品详情

获取Key和secret

请求参数

请求参数:num_iid=520813250866&is_promotion=1

参数说明:num_iid:淘宝商品ID
is_promotion:是否获取取促销价

响应示例

Request address:
https://api-gw.onebound.cn/taobao/item_get/?key=&
&num_iid=667746579912&is_promotion=1&&lang=zh-CN&secret=
---------------------------------------
Result Object:
---------------------------------------
{
    "item": {
        "num_iid": "667746579912",
        "title": "【2022新品】ALIENWARE外星人x14 R1高端轻薄全能本笔记本电脑12代酷睿i7设计师办公商务便携学生七夕送礼物",
        "desc_short": "",
        "price": "10969",
        "orginal_price": "11999.00",
        "nick": "alienware外星人旗舰店",
        "num": "200",
        "pic_url": "//img.alicdn.com/imgextra/i1/2510050218/O1CN011N3gnO1DTt75QnvFm_!!2-item_pic.png",
        "brand": "alienware",
        "brandId": "123574",
        "rootCatId": "1101",
        "cid": "1101",
        "crumbs": [],
        "detail_url": "https://item.taobao.com/item.htm?id=667746579912",
        "desc": "<p><img src=\"http://img.alicdn.com/imgextra/i2/2510050218/O1CN0126IHje1DTt74HZYLv_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN016AZ5YM1DTt6H3dxsX_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01RacBbj1DTt70NBQXt_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i1/2510050218/O1CN01tWe5zN1DTt75HxDoE_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01LdyQCe1DTt73XPrjR_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i1/2510050218/O1CN01EiKHhz1DTt73XO3W0_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01CH3wit1DTt7CrFxkF_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01ScPDM51DTt73XScKj_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01wdNlfI1DTt78qPjIS_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01JW6X1a1DTt718ABoY_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01qRgJvk1DTt73XUUwS_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i2/2510050218/O1CN01bcooB11DTt7CrJr9u_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01mNAq7P1DTt6VKij8H_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i2/2510050218/O1CN0140iHfA1DTt6XmeHxP_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i1/2510050218/O1CN0180W12i1DTt6XmdU8f_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01oUnmKj1DTt6XfAeib_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01yFvVyW1DTt6UapZ61_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN011EF1Ja1DTt6XfBjSw_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01CwP4Aa1DTt6NTBaQJ_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i3/2510050218/O1CN01K8xJOR1DTt6y3GY3t_!!2510050218.jpg\" align=\"absmiddle\" /><img src=\"http://img.alicdn.com/imgextra/i4/2510050218/O1CN01qhC7v91DTt5pFNTjS_!!2510050218.jpg\" align=\"absmiddle\" /></p><img src=\"https://www.o0b.cn/i.php?t.png&rid=gw-1.62e8bfaaa6eb1&p=1778787198&k=i_key&t=1659420588\" style=\"display:none\" />",
        "item_imgs": [
            {
                "url": "//img.alicdn.com/imgextra/i1/2510050218/O1CN011N3gnO1DTt75QnvFm_!!2-item_pic.png"
            },
            {
                "url": "//img.alicdn.com/imgextra/i2/2510050218/O1CN01L84GlP1DTt6UjlsH5_!!2510050218.jpg"
            },
            {
                "url": "//img.alicdn.com/imgextra/i1/2510050218/O1CN01RRHxS51DTt6bSw2l5_!!2510050218.jpg"
            },
            {
                "url": "//img.alicdn.com/imgextra/i2/2510050218/O1CN01kNh6qZ1DTt63Ts19l_!!2510050218.jpg"
            },
            {
                "url": "//img.alicdn.com/imgextra/i4/2510050218/O1CN01JMo8QZ1DTt5qco75b_!!2510050218.jpg"
            }
        ],
        "item_weight": 0,
        "location": "北京",
        "post_fee": "  免运费",
        "express_fee": 0,
        "ems_fee": 0,
        "shipping_to": "",
        "has_discount": "true",
        "video": [],
        "is_virtual": "",
        "sample_id": "",
        "is_promotion": "true",
        "prop_imgs": {
            "prop_img": [
     &nb

评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值