利用 PHP 爬虫按关键字搜索淘宝商品-CRMEB社区

利用 PHP 爬虫按关键字搜索淘宝商品

管理

编辑

删除

在电商领域，通过关键字搜索商品是常见的需求。淘宝作为国内知名的电商平台，提供了丰富的商品搜索功能。本文将详细介绍如何使用 PHP 爬虫技术按关键字搜索淘宝商品，并获取搜索结果的详细信息。

一、准备工作

1. 注册淘宝开放平台账号

要使用淘宝商品搜索 API，首先需要在淘宝开放平台（https://open.taobao.com/）注册账号，并创建应用以获取 App Key 和 App Secret。这些是调用 API 所必需的凭证。

2. 安装必要的 PHP 库

确保你的 PHP 开发环境中已经安装了以下库：

GuzzleHttp\Client：用于发送 HTTP 请求。
composer：用于依赖管理。
如果尚未安装这些库，可以通过以下命令进行安装：

bash

composer require guzzlehttp/guzzle

二、代码实现

以下是一个完整的 PHP 示例代码，展示如何按关键字搜索淘宝商品，并处理返回的数据。

1. 发送 HTTP 请求

使用 GuzzleHttp\Client 发送请求，并获取 API 返回的数据。

php

<?php
require 'vendor/autoload.php';
use GuzzleHttp\Client;

function generate_signature($app_key, $app_secret, $timestamp, $params) {
    ksort($params);
    $sign_str = $app_key . $timestamp . $app_secret;
    foreach ($params as $key => $value) {
        $sign_str .= $key . $value;
    }
    return md5($sign_str);
}

function search_taobao_products($app_key, $app_secret, $keyword, $page = 1) {
    $timestamp = date('Y-m-d H:i:s');
    $params = [
        'method' => 'taobao.item.search',
        'app_key' => $app_key,
        'timestamp' => $timestamp,
        'v' => '2.0',
        'q' => $keyword,
        'page_no' => $page,
        'page_size' => 40,
        'sign_method' => 'md5',
    ];
    $params['sign'] = generate_signature($app_key, $app_secret, $timestamp, $params);

    $client = new Client();
    $response = $client->request('GET', 'https://gw.api.taobao.com/router.json', [
        'query' => $params,
    ]);

    if ($response->getStatusCode() == 200) {
        return json_decode($response->getBody(), true);
    } else {
        echo "请求失败，状态码：" . $response->getStatusCode() . "\n";
        return null;
    }
}
?>

2. 解析返回的 JSON 数据

解析 API 返回的 JSON 数据，并提取商品的详细信息。

php

<?php
function parse_response($data) {
    if ($data['code'] == '0') {
        $items = $data['item_search_response']['items'];
        foreach ($items as $item) {
            echo "商品标题: " . $item['title'] . "\n";
            echo "商品价格: " . $item['price'] . "\n";
            echo "商品图片: " . $item['pic_url'] . "\n";
            echo "商品详情页 URL: " . $item['detail_url'] . "\n";
            echo "------------------------\n";
        }
    } else {
        echo "API 请求失败，错误信息: " . $data['error_response']['sub_msg'] . "\n";
    }
}
?>

3. 主程序

在主程序中调用上述函数，按关键字搜索商品并展示搜索结果。

php

<?php
require 'vendor/autoload.php';
use GuzzleHttp\Client;

function generate_signature($app_key, $app_secret, $timestamp, $params) {
    ksort($params);
    $sign_str = $app_key . $timestamp . $app_secret;
    foreach ($params as $key => $value) {
        $sign_str .= $key . $value;
    }
    return md5($sign_str);
}

function search_taobao_products($app_key, $app_secret, $keyword, $page = 1) {
    $timestamp = date('Y-m-d H:i:s');
    $params = [
        'method' => 'taobao.item.search',
        'app_key' => $app_key,
        'timestamp' => $timestamp,
        'v' => '2.0',
        'q' => $keyword,
        'page_no' => $page,
        'page_size' => 40,
        'sign_method' => 'md5',
    ];
    $params['sign'] = generate_signature($app_key, $app_secret, $timestamp, $params);

    $client = new Client();
    $response = $client->request('GET', 'https://gw.api.taobao.com/router.json', [
        'query' => $params,
    ]);

    if ($response->getStatusCode() == 200) {
        return json_decode($response->getBody(), true);
    } else {
        echo "请求失败，状态码：" . $response->getStatusCode() . "\n";
        return null;
    }
}

function parse_response($data) {
    if ($data['code'] == '0') {
        $items = $data['item_search_response']['items'];
        foreach ($items as $item) {
            echo "商品标题: " . $item['title'] . "\n";
            echo "商品价格: " . $item['price'] . "\n";
            echo "商品图片: " . $item['pic_url'] . "\n";
            echo "商品详情页 URL: " . $item['detail_url'] . "\n";
            echo "------------------------\n";
        }
    } else {
        echo "API 请求失败，错误信息: " . $data['error_response']['sub_msg'] . "\n";
    }
}

if (__FILE__ == __FILE__) {
    $app_key = 'your_app_key';  // 替换为你的 App Key
    $app_secret = 'your_app_secret';  // 替换为你的 App Secret
    $keyword = 'iPhone 13';  // 设置搜索关键字
    $page = 1;  // 设置搜索结果的页码

    $response_data = search_taobao_products($app_key, $app_secret, $keyword, $page);
    if ($response_data) {
        parse_response($response_data);
    }
}
?>

三、API 返回值说明

淘宝商品搜索 API 的返回值是一个 JSON 对象，其结构如下：

返回值示例

JSON

{
    "code": "0",
    "errorMessage": "success",
    "item_search_response": {
        "items": [
            {
                "title": "商品标题",
                "price": "120.00",
                "pic_url": "https://example.com/image.jpg",
                "detail_url": "https://item.taobao.com/1234567890.html"
            }
        ]
    }
}

返回值字段说明

code：返回的状态码，表示请求的结果。0 表示成功，其他值表示失败。
errorMessage：错误信息，描述了返回状态码对应的错误原因。
item_search_response：商品搜索结果的响应数据。items：商品列表，包含多个商品的详细信息。title：商品标题。price：商品当前价格。pic_url：商品图片的 URL。detail_url：商品详情页的 URL。

四、注意事项

1. API 使用限制

淘宝 API 可能对请求频率和数据量有限制。建议在实际使用中合理安排请求间隔，避免被封禁。

2. 数据隐私

确保遵守淘宝开放平台的使用条款，不要滥用数据。

3. 异常处理

在请求过程中可能会遇到网络问题、API 限制或其他错误。建议使用 try-catch 语句捕获异常，并合理处理。

4. 签名生成

根据 API 文档，生成签名是调用 API 的必要步骤。确保正确实现签名生成逻辑。

五、总结

通过上述步骤和代码，你可以使用 PHP 爬虫技术按关键字搜索淘宝商品，并解析返回的 JSON 数据。希望这个示例对你有所帮助！