爬虫问题---ChromeDriver的安装和使用

一、安装

       1.查看chrome的版本

        在浏览器里面输入 chrome://version/ 回车查看浏览器版本

Chrome的版本要和ChromeDriver的版本对应，否则会出现版本问题。

2.ChromeDriver的版本选择

        114之前的版本：https://chromedriver.storage.googleapis.com/index.html

要选择对应系统的下载：

125版本以后下载地址：Chrome for Testing availability

只有后面status是绿色对勾的才可以下载，驱动大版本一致就可以使用，不需版本号一模一样；下载所需版本只需点击对应的版本名称即可跳转到对应版本的下载位置。

二、使用

        安装依赖：pip3 install selenium

from bs4 import BeautifulSoup
from selenium import webdriver
from selenium.webdriver.chrome.service import Service


def html_parser_detail(url,film_id):
    driver_path = '/Users/chromedriver'
    service = Service(executable_path=driver_path)
    driver = webdriver.Chrome(service=service)
    driver.get(url)
    html_content = driver.page_source
    # 使用BeautifulSoup解析HTML
    soup = BeautifulSoup(html_content, 'html.parser')
    downhelp_divs = soup.find_all('div', class_='w960 neworder')
    # ....解析文档
    driver.quit() # 需要写在finally中

注意：可能出现，Mac电脑打不开chromedriver驱动，无法验证开发者问题。

        需要在驱动文件所在目录下执行：xattr -d com.apple.quarantine chromedriver