我在抓取此link的评论时遇到了问题。
使用scrapy shell，我想知道为什么我看不到下面div部分中的评论。
['<div id="eqWall" data-project-id="53481" data-is-platform-manager="" data-replies-allowed="1"></div>']
我通过使用scrapy shell＆＃34; link＆＃34;执行response.xpath("//section[@class='main-section pin-board-section']/div/div[@id='eqWall']").extract()获得了上述输出。
任何人都可以帮助我，为什么我看不到，以及解决这些评论的解决方案是什么。
由于