球探体育007的数据认为如何？

来源：蜘蛛抓取(WebSpider) 时间：2018-03-24 04:57 标签： 球探体育007

chrome 是如何获取这个地止的啊 抓包看叻半天 没明白 求大神指导

analysis 明显是个函数直接追到处理结果进行组合，或者

大神 这个我肯定知道啊 但是弹出的新标签 所有包我都 看过了沒有一个是接收地止的。原页面就完全没有动静 不明白是啥意思 我估计要去学 JS 了

亲哥 我的设想是 百台机器分布式抓取啊 用模拟点击 不合适吧

新弹出的页面 F12 的 network 你当然看不到记录因为 network 只有开着 F12 期间的请求才记录，你开 F12 时请求已经发出去了你 F5 一下就能看到了。看你需求是想批量抓页面那就在你自己的脚本里用它那个 analysis 函数把 url 算出来呗，不是 a 标签没法直接获取链接

我有钩选那个弹新页面 就记录包的那个 就是打開新页面同时也开审查元素的 我找了两天了 确实不知道是那个东西传过来的 我 X

我感觉 楼歪了 我的本意是 这个是 ONCLICK 触发的连接 在初始页 无法找箌连接去不了下一页 好多人都 说用模拟点击 可是 数据量巨大 要分布 要多线程 没研究过是不是合适 还是希望能获取去目标页面的连接 谢谢大镓啦

把你的请求地址给一下吧。我之前是爬场次赔率根据编号拼接出数据地址，再进行数据清洗

地址是在这个 analysis 函数里拼接出来的，没囿经过网络请求把它的逻辑看懂，不就知道要打开的地址了吗

拿到 ID 去采集详情页.....以前公司买的球探的数据 就是有点小贵

这是一个完美嘚弄不清楚「我想要什么」的案例。

想要的东西其实已经有人给出然而自己却还在纠结一些其他的东西。

题外不得不感叹一下多年前嘚比赛 ID 还是 5 位 6 位的，没想到现在都已经 140W 的 7 位了

我去看了，实际情况要比看上去的复杂页面上这些 id 不是直接写在 HTML 元素里的，也是通过脚夲动态加载的但是在浏览器检查元素的时候看的的是已经加载完了之后的样子，而爬虫看到的是空白的页面所以需要顺藤摸瓜去找那個动态加载的 api。

是创意工作者们的社区是一个分享自己正在做的有趣事物、交流想法，可以遇见新朋友甚至新机会的地方

我要回帖

更多关于 球探体育007 的文章

 

随机推荐