JODI 数据库（jodidb.org）的 TableViewer 页面是典型的参数驱动型动态网站，直接访问基础 URL 会因缺少必要查询参数而无法加载数据；必须携带有效的 ReportId 等关键参数才能成功渲染报表内容。
jodi 数据库（jodidb.org）的 tableviewer 页面是典型的参数驱动型动态网站，直接访问基础 url 会因缺少必要查询参数而无法加载数据；必须携带有效的 `reportid` 等关键参数才能成功渲染报表内容。
JODI（Joint Organisations Data Initiative）数据库采用 ASP.NET Web Forms 架构，其报表页面 tableView.aspx 并非静态入口，而是依赖 URL 中的查询参数（如 ReportId、ProviderId、DatasetId 等）动态加载对应数据集。你当前使用的链接：
driver.get(r'https://www.php.cn/link/99298197cbb50710fee18fb3ec6993b9TableViewer/tableView.aspx')
仅打开了一个空壳页面——它没有指定任何报表，因此服务器返回的是无数据的初始界面，前端 JavaScript 也无法触发后续数据请求，导致 Selenium 看到的 DOM 中不含实际表格内容，甚至可能触发反爬逻辑或重定向失败。
✅ 正确做法：从浏览器中手动定位目标报表，复制完整 URL
- 在 Chrome/Firefox 中打开 JODI 官网 → 进入 Data → Table Viewer；
- 浏览或搜索所需报表（例如“Crude Oil Production”）；
- 点击进入后，观察地址栏——完整 URL 类似：
https://www.php.cn/link/99298197cbb50710fee18fb3ec6993b9TableViewer/tableView.aspx?ReportId=93906&ProviderId=1&DatasetId=1
其中
ReportId=93906是核心标识符，不可省略。
? 修改代码示例（推荐使用显式等待 + 异常处理）：
from selenium import webdriver
from selenium.webdriver.chrome.service import Service
from selenium.webdriver.common.by import By
from selenium.webdriver.support.ui import WebDriverWait
from selenium.webdriver.support import expected_conditions as EC
from selenium.common.exceptions import TimeoutException, WebDriverException
# 推荐：使用 Service 类替代已弃用的 executable_path
service = Service(r'C:\Users\user\Downloads\chromedriver-win64\chromedriver-win64\chromedriver.exe')
driver = webdriver.Chrome(service=service)
try:
# ✅ 使用带 ReportId 的完整 URL
url = "https://www.php.cn/link/99298197cbb50710fee18fb3ec6993b9TableViewer/tableView.aspx?ReportId=93906"
driver.get(url)
# 等待主表格容器加载（通常 class 包含 'tableContainer' 或 id='gridView'）
WebDriverWait(driver, 20).until(
EC.presence_of_element_located((By.ID, "gridView"))
)
# 可选：滚动到底部触发懒加载（如有分页/展开按钮）
driver.execute_script("window.scrollTo(0, document.body.scrollHeight);")
# 获取渲染后的 HTML 并解析（推荐用 Selenium 直接提取，而非切换回 BeautifulSoup）
html = driver.page_source
# 后续可用 pandas.read_html(html) 或 BeautifulSoup 解析表格
except TimeoutException:
print("❌ 页面加载超时：请确认 ReportId 是否有效，或检查网络/防火墙设置")
except WebDriverException as e:
print(f"❌ WebDriver 错误：{e}")
finally:
driver.quit()⚠️ 注意事项：
-
ReportId具有唯一性且可能随官网更新失效，建议定期验证链接有效性； - 部分报表需登录或接受 Cookie 同意弹窗，可添加
driver.get()后的accept_cookies_if_present()逻辑； - 若需批量抓取，可先通过 JODI 的公开 API（如 JODI REST API）获取元数据与 ReportId 列表，再构造 URL；
- 避免高频请求，遵守
robots.txt（https://www.php.cn/link/2d4e09afcf3274696320e3f549a04e64），建议添加time.sleep(1–2)间隔。
总结：Selenium 访问 JODI 表报的核心不是“绕过反爬”，而是理解其 URL 参数契约。缺失 ReportId 就如同拨打空号——页面能打开，但无人应答。务必以真实用户操作路径为基准，复现完整导航链路，才能稳定获取结构化数据。
