全球主机交流论坛

标题: 请教爬虫大佬,怎么可以最小资源爬到下图中这个数字 [打印本页]

作者: rogerxu    时间: 2021-12-23 15:45
标题: 请教爬虫大佬,怎么可以最小资源爬到下图中这个数字


来自:https://i.eastmoney.com/6368094477186586

怎样最小资源爬到图中的今日访问次数:“1288”?
获取整个页面,再抽取当然可以,能否不获取整个页面?用获取头之类的获取局部的方法,最小网络流量得到1288这个数字?谢谢
作者: mikasa    时间: 2021-12-23 15:46

作者: 纯净水    时间: 2021-12-23 15:47
gzip+找积分接口
  1. https://i.eastmoney.com/api/guba/tauserinfo?uid=6368094477186586
复制代码
user_current_visitor_count
作者: rogerxu    时间: 2021-12-23 15:49
纯净水 发表于 2021-12-23 15:47
gzip+找积分接口
user_current_visitor_count


MJJ果然卧虎藏龙,大佬厉害,谢谢大佬
作者: abc3479    时间: 2021-12-23 15:49
https://i.eastmoney.com/api/guba/tauserinfo?uid=6368094477186586  这里面不是有吗
作者: teardrops    时间: 2021-12-23 15:50
本帖最后由 teardrops 于 2021-12-23 16:51 编辑

已有解答。

自己通常是f12看JSON
作者: rogerxu    时间: 2021-12-23 15:52
本帖最后由 rogerxu 于 2021-12-23 15:58 编辑
纯净水 发表于 2021-12-23 15:47
gzip+找积分接口
user_current_visitor_count


请问下大佬怎么知道这个API的?网站有开放文档?
更新:估计大佬也是F12发现的,好了,再次谢谢大佬
作者: rogerxu    时间: 2021-12-23 15:57
teardrops 发表于 2021-12-23 15:50
已有解答。

自己通常是f12看JSON

F12果然发现线索,谢谢大佬
作者: 纯净水    时间: 2021-12-23 15:58
rogerxu 发表于 2021-12-23 15:49
MJJ果然卧虎藏龙,大佬厉害,谢谢大佬

F12 - 网络 - fetch/xhr 第一个不就是吗
作者: rogerxu    时间: 2021-12-23 15:59
纯净水 发表于 2021-12-23 15:58
F12 - 网络 - fetch/xhr 第一个不就是吗

是的,谢谢大佬,又学到了
作者: rogerxu    时间: 2021-12-23 16:13
abc3479 发表于 2021-12-23 15:49
https://i.eastmoney.com/api/guba/tauserinfo?uid=6368094477186586  这里面不是有吗

也谢谢大佬了
作者: cooioobb    时间: 2021-12-23 16:16
不都是F12 抓js接口么!
作者: Salta    时间: 2021-12-23 18:25
有一个问题,不是很懂,如果抓不到JS接口呢,有一些网站他没有JS接口他是直接从后端拉的数据一起发布到前端来,你还不是要拉完整个界面???  有人解答一下么




欢迎光临 全球主机交流论坛 (https://fd.vvwvv.eu.org/) Powered by Discuz! X3.4