用 PHP 爬取携讯星际争霸 2 游戏数据

携讯星际争霸 2 游戏数据的爬取需求分析

在爬取携讯星际争霸 2 游戏数据之前，需要先了解爬取的目的以及需要爬取哪些数据。本次需求的目的是获取游戏玩家的战绩数据，包括玩家的 ID、胜率、等级等数据。需要爬取的网站是《星际争霸 2》中国服务器榜单页面，因为该页面提供了所有玩家按照排名的数据以及每位玩家的详细数据页面。

抓取数据

首先，我们需要获取网页的 HTML 内容。可以使用 PHP 的 file_get_contents() 函数，该函数返回一个包含远程服务器返回内容的字符串。

$url = "http://www.battlenet.com.cn/sc2/zh/ladder/grandmaster/heart-of-the-swarm";
$html = file_get_contents($url);

接下来，我们需要解析 HTML 内容并提取出需要的数据。这里可以使用 PHP 的 DOMDocument 和 DOMXPath 类。首先，创建一个 DOMDocument 对象并使用 loadHTML() 方法将 HTML 内容加载到 DOM 中：

$doc = new DOMDocument();
$doc->loadHTML($html);

然后，使用 DOMXPath 类选取需要的节点：

$xpath = new DOMXPath($doc);
$nodes = $xpath->query('//table[@class="rankings"]/tr');

解析数据

上一步获取到了所有的数据节点，但是节点中包含很多冗余信息，需要进行进一步解析。假设我们需要玩家 ID、胜率和等级三个字段的数据，可以将节点按照表格的形式进行解析，并将每行数据存储在一个数组中：

$data = array();
foreach ($nodes as $node) {
    $cols = $node->getElementsByTagName('td');
    $row = array();
    // 解析 ID、胜率、等级字段
    $row['id'] = trim($cols[0]->nodeValue);
    $row['win_rate'] = trim($cols[3]->nodeValue);
    $row['level'] = trim($cols[4]->nodeValue);
    $data[] = $row;
}

存储数据

最后，我们需要将获取到的数据存储起来。可以使用 PHP 的数据库扩展，如 PDO 或 mysqli，将数据插入到数据库中。以 PDO 为例，先创建一个 PDO 对象，然后循环遍历 $data 数组并将每行数据插入到表格中：

$dsn = 'mysql:dbname=testdb;host=127.0.0.1';
$user = 'dbuser';
$password = 'dbpass';
try {
    $dbh = new PDO($dsn, $user, $password);
    foreach ($data as $row) {
        $stmt = $dbh->prepare("INSERT INTO players (id, win_rate, level) VALUES (?, ?, ?)");
        $stmt->execute([$row['id'], $row['win_rate'], $row['level']]);
    }
} catch (PDOException $e) {
    echo 'Connection failed: ' . $e->getMessage();
}

完成以上步骤，我们就可以通过 PHP 程序爬取携讯星际争霸 2 游戏数据了。