我试着把所有的产品都整理成:url ='https://www. danfoss. com/zh/products/dps/阀门和执行器/阀门/pvg比例阀/# tab-概述'
我的问题是最后两个产品的html标签在inspect和view页面源代码中都不存在,除非我点击显示更多,我怎么才能把它们刮下来呢?
下面是我代码:
a=soup.find('div',attrs={"class":"tile-group-component product-group"})
b=a.find_all("li")
for c in b:
d=c.find('a',href=True)
print(d['href'])
但是它没有显示最后两个
1条答案
按热度按时间rnmwe5a21#
下面是获取数据的一种方法,作为 Dataframe (从该页面抓取API端点):
最终结果: