基本是可以的,selenium适合动态网页抓取,因为它可以控制浏览器去点击、加载网页,requests则比较适合静态网页***集,它非常轻量化速度快,没有浏览器开销,占用***少。
当然如果不考虑***占用和速度,selenium是可以替代requests的。
但selenium需要配合一些解锁功能才能发挥作用,因为现在大网站反爬机制非常严格,已经从传统的IP识别升级到 行为分析 和 动态对抗, 像是浏览器指纹、验证码(CAPTCHA)、动态加密、异步加载等…。
{dede:pagebreak/}
为什么 J***aScript 在国外逐渐用于前端+后端开发,而国内还是只用它做前端?
有什么是你去了上海才知道的事情?
「香港四大才子」之一蔡澜去世,你对他有哪些了解?如何评价他的成就?
现在已经有5K、6K、8K分辨率显示器,那么8K之后是什么?
ant-design-vue 社区为什么不维护了?
用了几年大厂云服务器,现在想换便宜的,有推荐的吗?
浏览器解析Html一般是边下载边渲染么?如果是边下载边渲染的话,Html又使用GZIP格式传输,如何能够做到没有完全下载就可以渲染的呢?
男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
J***aScript 已经强大到什么程度了?
小腿能粗到什么地步?
什么是人生的最顶级享受?
男朋友说我穿衣服太开放,难道好身材不应该显示出来吗?
如何看待 稚晖君第五轮融资 估值将达70亿?
TailwindCSS/UnoCSS 的意义是什么?为什么我不直接在行内写 style 标签?
自己尝试组装NAS,求大佬给指点一下?
普通人需要10bit或者8抖10的显示器吗?