C++与Selenium：如何实现动态网页的自动化测试

2501_93895086

445人浏览 · 2025-10-29 18:16:29

2501_93895086 · 2025-10-29 18:16:29 发布

C++与Selenium实现动态网页自动化测试指南

核心原理

Selenium通过WebDriver协议控制浏览器，动态网页的异步加载需结合显式等待机制处理。C++需借助第三方库实现HTTP通信，调用WebDriver REST API。

实现步骤

环境配置
- 安装浏览器驱动（如ChromeDriver）
- 启动Selenium Server：java -jar selenium-server-standalone.jar
- C++依赖库：推荐cpp-httplib或libcurl
基础代码框架

#include <httplib.h>
#include <json.hpp>

using json = nlohmann::json;

const std::string DRIVER_URL = "http://localhost:4444/wd/hub";

// 创建会话
json create_session() {
    httplib::Client cli(DRIVER_URL);
    json caps = {{"browserName", "chrome"}};
    auto res = cli.Post("/session", caps.dump(), "application/json");
    return json::parse(res->body);
}

处理动态加载的关键技术

// 显式等待元素（实现轮询检测）
bool wait_for_element(const std::string& session_id, 
                      const std::string& selector, 
                      int timeout_sec = 10) {
    httplib::Client cli(DRIVER_URL);
    json params = {{"using", "css selector"}, {"value", selector}};
    
    for(int i = 0; i < timeout_sec; ++i) {
        auto res = cli.Post("/session/" + session_id + "/element", params.dump());
        if(res && res->status == 200) return true;
        sleep(1); // 每秒检测一次
    }
    return false;
}

// 执行JavaScript获取动态数据
json execute_script(const std::string& session_id, const std::string& script) {
    httplib::Client cli(DRIVER_URL);
    json cmd = {{"script", script}, {"args", json::array()}};
    auto res = cli.Post("/session/" + session_id + "/execute/sync", cmd.dump());
    return json::parse(res->body)["value"];
}

完整操作流程

int main() {
    // 1. 创建会话
    json session = create_session();
    std::string session_id = session["sessionId"];
    
    // 2. 导航到目标页
    httplib::Client cli(DRIVER_URL);
    json nav_params = {{"url", "https://dynamic-website.com"}};
    cli.Post("/session/" + session_id + "/url", nav_params.dump());
    
    // 3. 等待异步加载完成
    wait_for_element(session_id, "#dynamic-content", 15);
    
    // 4. 获取动态数据
    json result = execute_script(session_id, 
        "return document.querySelector('#data-container').innerHTML;");
    
    // 5. 关闭会话
    cli.Delete("/session/" + session_id);
}

动态内容处理策略

AJAX加载
- 检测加载完成标志：wait_for_element("div.ajax-loaded")
- 监听网络状态：execute_script("return window.performance.timing")

无限滚动

// 滚动到底部触发加载
execute_script(session_id, 
    "window.scrollTo(0, document.body.scrollHeight);");
wait_for_element(session_id, "div.new-item:last-child");

Shadow DOM访问

json shadow_content = execute_script(session_id,
    "return document.querySelector('custom-element').shadowRoot.innerHTML;");

性能优化技巧

并行会话管理
- 多线程创建独立session
- 使用$$ \text{线程数} \leq \frac{\text{可用内存}}{\text{单浏览器内存}} $$
智能等待策略
- 动态超时调整：timeout = base_time + element_count * 0.5s
- 混合等待：先隐式等待再显式检测

资源拦截

// 拦截图片请求加速加载
execute_script(session_id,
    "window.chrome.webRequest.onBeforeRequest.addListener("
    "  function(details) { return {cancel: /\.(png|jpg)$/.test(details.url)} },"
    "  {urls: ['<all_urls>']}, ['blocking']);");

常见问题解决方案

问题现象	解决方案
元素定位失败	增加等待时间 + 使用XPath备用定位
内存泄漏	定期重启session + 使用`cli.Delete`清理
iframe切换失败	`execute_script("window.frames[0].focus()")`
验证码处理	集成第三方OCR服务 + 人工干预接口