一只C++爬虫

一只c++爬虫

一、原理

爬虫：用于在网页上抓取数据，用队列的思想，进行BFS~（将源URL放入队列，从队头取出一个URL进行遍历，并将其页面上的所有未爬过的URL放入队列中，直到队列为空。

二、实现

代码及解析如下：

int main()

{

    startupWSA();

    Go("music.163.com", 200);

    cleanupWSA();

system("pause");

    return 0;

}

void startupWSA()

{

    WSADATA wsadata;//版本信息

    WSAStartup( MAKEWORD(2,0), &wsadata);

}

 

解析：为了在应用程序当中调用任何一个Winsock API函数，首先第一件事情就是必须通过WSAStartup函数完成对Winsock服务的初始化，因此需要调用WSAStartup函数。使用Socket的程序在使用Socket之前必须调用WSAStartup函数。该函数的第一个参数指明程序请求使用的Socket版本，其中高位字节指明副版本、低位字节指明主版本；操作系统利用第二个参数返回请求的Socket的版本信息。当一个应用程序调用WSAStartup函数时，操作系统根据请求的Socket版本来搜索相应的Socket库，然后绑定找到的Socket库到该应用程序中。以后应用程序就可以调用所请求的Socket库中的其它Socket函数了。

void Go(const string &