当前位置：首页 > 行业动态 > 正文

按键识别文字并点击

admin
行业动态
2025-05-13
3

通过OCR识别界面文字，匹配目标按钮文本，获取坐标后调用自动化

技术选型与工具准备

编程语言：Python（语法简洁，适合快速开发）
自动化库：Selenium（支持浏览器操作）
解析工具：re（正则表达式，用于复杂文本匹配）
环境配置：
- 安装浏览器驱动（如ChromeDriver）
- 通过pip install selenium安装库

实现步骤与代码逻辑

定位页面中的可点击元素

通过Selenium的find_elements方法获取所有按钮或链接元素，筛选出包含目标文字的元素。

from selenium import webdriver
from selenium.webdriver.common.by import By
import time
# 初始化浏览器驱动（以Chrome为例）
driver = webdriver.Chrome()
driver.get("https://example.com")  # 替换为目标URL
# 获取所有按钮元素（包括<button>、<a>等可点击标签）
elements = driver.find_elements(By.XPATH, "//button | //a")

匹配目标文字并点击

遍历元素列表,检查.text属性是否与目标文字一致，若匹配则执行点击。

按键识别文字并点击第1张

target_text = "提交"  # 目标按钮文字
for element in elements:
    if element.text.strip() == target_text:  # 去除首尾空格后匹配
        element.click()
        print(f"已点击按钮：{target_text}")
        break
else:
    print(f"未找到文字为'{target_text}'的按钮")

处理动态加载的按钮

若按钮通过JavaScript动态生成,需等待元素出现后再操作。

from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
# 显式等待（最多等待10秒）
wait = WebDriverWait(driver, 10)
target_button = wait.until(EC.presence_of_element_located((By.XPATH, f"//button[text()='{target_text}']")))
target_button.click()

复杂场景解决方案

场景	解决方案	代码示例
按钮文字部分匹配	使用`contains()`函数或正则表达式匹配	`//button[contains(text(), '提交')]`
多按钮同名	结合父级元素或索引定位（如`//div[@class='actions']/button[2]`）	`elements[1].click()`
按钮在iframe中	切换至iframe上下文再操作	`driver.switch_to.frame('iframe_id')`
超时未找到按钮	设置超时时间并捕获异常	`try: ... except TimeoutException: print('超时未找到按钮')`

完整代码示例（含异常处理）

from selenium import webdriver
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
def click_button_by_text(url, text, timeout=10):
    driver = webdriver.Chrome()
    try:
        driver.get(url)
        # 显式等待目标按钮出现
        wait = WebDriverWait(driver, timeout)
        button = wait.until(EC.element_to_be_clickable((By.XPATH, f"//button[text()='{text}']")))
        button.click()
        print(f"成功点击按钮：{text}")
    except Exception as e:
        print(f"操作失败：{e}")
    finally:
        driver.quit()
# 调用函数
click_button_by_text("https://example.com", "立即购买")