详细文章请关注公众号:程序员波波。或者点击文章最下方了解更多前往原文地址。

这一次我们来致敬星爷的《大话西游》,今天遇到一个比较棘手的。

百度搜索“大话西游”:

批量抓取软件(波波带你手动提取网页)(1)

我打开这个1905VIP影院

如下图,和往期一样,打开控制台,并让视频播放 。可以看到Network中有许多和ts相关的信息,本次的视频链接为m3u8格式的。

批量抓取软件(波波带你手动提取网页)(2)

如下图,这次发现Elements里面完全没有和m3u8相关的节点,param中也只有一些杂乱的信息。

批量抓取软件(波波带你手动提取网页)(3)

如下图,这次Network试用了一下搜索功能,在上面的输入框输入m3u8,下方列表就筛选出一些和m3u8相关的内容。

批量抓取软件(波波带你手动提取网页)(4)

可以注意到这个第一项,看上去像是m3u8地址,但是却是以php结尾的,但是m3u8的路径写在了?后面,那么到底是怎么回事呢?

批量抓取软件(波波带你手动提取网页)(5)

我右击在新页面打开了这个链接(Open in new tab)

批量抓取软件(波波带你手动提取网页)(6)

浏览器自动帮我下载了一个m3u8的文件下来,到这里基本上可以肯定这个m3u8就是我们需要的m3u8视频文件了。但是文件只有295KB是怎么回事呢?

批量抓取软件(波波带你手动提取网页)(7)

打开这个文件,可以看到是一个描述文件,里面有许多ts文件的地址,原来所谓的m3u8视频,其实就是通过一个描述文件,来分段的播放一些ts文件。有了这个文件我们就可以在网上找一些专门下载m3u8视频的软件(比如M3U8 Downloader),通过软件把视频下载下来了。

批量抓取软件(波波带你手动提取网页)(8)

本次通过Network提取m3u8文件就到此结束了。

更多方法请期待后续文章。

,