批量自动浏览器访问url链接的程序

批量自动浏览器访问url链接的程序



创建一个python文件名为batch_url_visitor.py


代码程序

批量自动浏览器访问url程序python.zip (33.38 KB, 下载次数: 0)

2025-6-25 11:27 上传

点击文件名下载附件

1. from selenium import webdriver
   
2. from selenium.webdriver.chrome.options import Options
   
3. import time
   
4. import os
   
5. 
   
6. def read_urls(file_path):
   
7.     """读取 URL 列表文件"""
   
8.     try:
   
9.         with open(file_path, 'r', encoding='utf-8') as file:
   
10.             # 去除空行和首尾空格
    
11.             urls = [line.strip() for line in file if line.strip()]
    
12.         return urls
    
13.     except FileNotFoundError:
    
14.         print(f"错误：找不到文件 {file_path}")
    
15.         return []
    
16.     except Exception as e:
    
17.         print(f"读取文件时发生错误：{str(e)}")
    
18.         return []
    
19. 
    
20. def visit_urls(urls, wait_time=5):
    
21.     """使用 Chrome 浏览器访问 URL 列表"""
    
22.     # 设置 Chrome 选项
    
23.     chrome_options = Options()
    
24.     chrome_options.add_argument('--start-maximized')  # 最大化窗口
    
25.    
    
26.     try:
    
27.         # 初始化浏览器
    
28.         driver = webdriver.Chrome(options=chrome_options)
    
29.         
    
30.         # 依次访问每个 URL
    
31.         for index, url in enumerate(urls, 1):
    
32.             print(f"正在访问第 {index}/{len(urls)} 个 URL: {url}")
    
33.             try:
    
34.                 # 打开 URL
    
35.                 driver.get(url)
    
36.                 # 等待页面加载
    
37.                 time.sleep(wait_time)
    
38.             except Exception as e:
    
39.                 print(f"访问 {url} 时发生错误：{str(e)}")
    
40.                 continue
    
41.         
    
42.         # 关闭浏览器
    
43.         driver.quit()
    
44.         print("所有 URL 访问完成！")
    
45.         
    
46.     except Exception as e:
    
47.         print(f"浏览器操作时发生错误：{str(e)}")
    
48.         if 'driver' in locals():
    
49.             driver.quit()
    
50. 
    
51. def main():
    
52.     # URL 列表文件路径
    
53.     url_file = "urls.txt"
    
54.    
    
55.     # 检查文件是否存在
    
56.     if not os.path.exists(url_file):
    
57.         print(f"请先创建 {url_file} 文件，并在每行写入一个 URL")
    
58.         return
    
59.    
    
60.     # 读取 URL 列表
    
61.     urls = read_urls(url_file)
    
62.    
    
63.     if not urls:
    
64.         print("没有读取到有效的 URL")
    
65.         return
    
66.    
    
67.     # 访问 URL
    
68.     visit_urls(urls, wait_time=5)
    
69. 
    
70. if __name__ == "__main__":
    
71.     main()

复制代码

1.使用说明：

安装依赖：
pip install selenium

2.创建 urls.txt 文件：urls.txt

urls.txt里面批量放入url链接

3.运行程序：
python batch_url_visitor.py

功能特点：

自动读取 urls.txt 中的 URL 列表
使用 Chrome 浏览器自动访问每个 URL
每个页面默认等待 5 秒（可修改 wait_time 参数）
错误处理机制，遇到无效 URL 会继续处理下一个
最大化浏览器窗口
访问进度显示
注意事项：

确保网络连接稳定
某些网站可能有反爬机制，可能需要调整等待时间
大量 URL 访问可能需要添加随机延时以避免被封禁
使用前请确保遵守目标网站的访问政策