如何用 Python 抓取 javascript 网站？
问题内容
我正在尝试抓取一个网站。我尝试过使用两种方法，但两种方法都没有为我提供我正在寻找的完整网站源代码。我正在尝试从下面提供的网站 url 中抓取新闻标题。
网址：“https://www.todayonline.com/”
这是我尝试过但失败的两种方法。
方法一：美汤
tdy_url = "https://www.todayonline.com/" page = requests.get(tdy_url).text soup = beautifulsoup(page) soup # returns me a html with javascript text soup.find_all('h3') ### returns me empty list []登录后复制 方法2：selenium + beautifulsoup
