如何处理Python爬虫中遇到的滚动条内嵌滚动条自动循环下滑问题？

本文共计920个文字，预计阅读时间需要4分钟。

边缘+通常在爬取页面时遇到滚动条无限可下拉的情况。浏览器自带的外边滚动条+解决方案：思路就是用scrollBy直接下拉滚动条，然后scrollTop会直接变化，当scrollTop不变时，表示已到达底部。

缘由

通常我们的爬取页面的时候会碰到滚动条无限可以下拉的情况.

浏览器自带外边的滚动条

• 解决方法：思路就是用scrollBy一直下拉滚动条，然后scrollTop会一直变化，当scrollTop不变时，说明就到底了。跳出循环即可。