[发明专利]基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质在审
申请号: | 201811458982.3 | 申请日: | 2018-11-30 |
公开(公告)号: | CN109614536A | 公开(公告)日: | 2019-04-12 |
发明(设计)人: | 马建强 | 申请(专利权)人: | 平安科技(深圳)有限公司 |
主分类号: | G06F16/951 | 分类号: | G06F16/951;G06F16/955 |
代理公司: | 北京鸿元知识产权代理有限公司 11327 | 代理人: | 陈英俊;袁文婷 |
地址: | 518033 广东省深圳市福田区福*** | 国省代码: | 广东;44 |
权利要求书: | 查看更多 | 说明书: | 查看更多 |
摘要: | |||
搜索关键词: | 视频 网页链接地址 可存储 插件 数据采集技术 电子表格 批量下载 下载效率 循环读取 下载 调用 粘贴 | ||
本发明涉及数据采集技术领域,提供一种基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质,其中的方法包括:将待爬取视频所对应的网页链接地址粘贴在电子表格形成待爬取视频列表;利用python循环读取待爬取视频列表中的网页链接地址,并调用youtube‑dl插件和ffmpeg插件以完成网页链接地址对应的待爬取视频的批量下载。利用本发明,能够解决目前下载效率低、不能批量进行下载等问题。
技术领域
本发明涉及数据采集技术领域,更为具体地,涉及一种基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质。
背景技术
YouTuBe是世界最大的视频网站,目前有Clip Converter、YouTuBe视频在线下载,并且只能在线单个下载视频,Chrome浏览器使用插件Tampermonkey(油猴)下载,不过其软件的缺点是最高只支持720P视频;其中,安卓软件下载YouTube视频,由于Google禁止用户下载YouTube上面的视频,Google Play里面支持下载油管视频的app全部被下架了,因此只能从app官网和其他安全的第三方下载站点去安装安卓app,这种方式进行下载,效率低,也不能进行批量下载。
为了解决上述问题,本专利提供一种基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质。
发明内容
鉴于上述问题,本发明的目的是提供一种基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质,以解决目前下载效率低、不能批量进行下载等问题。
第一方面,本发明提供一种基于YouTuBe的视频批量爬取方法,应用于电子装置,包括:
获取待爬取视频列表,其中,将待爬取视频所对应的网页链接地址粘贴在电子表格形成待爬取视频列表;
python循环读取所述待爬取视频列表中的网页链接地址,并调用youtube-dl插件和ffmpeg插件以完成待爬取视频的批量下载。
第二方面,本发明还提供一种于YouTuBe的视频批量爬取系统,其特征在于,包括:
待爬取视频列表获取单元,用于获取待爬取视频列表,其中,将待爬取视频所对应的网页链接地址粘贴在电子表格形成待爬取视频列表;
视频批量下载单元,用于python循环读取所述待爬取视频列表中的网页链接地址,并调用youtube-dl插件和ffmpeg插件以完成待爬取视频的批量下载。
第三方面,本发明还提供一种电子装置,该电子装置包括:存储器、处理器以及存储在所述存储器中并可在所述处理器上运行的计算机程序,所述处理器执行所述计算机程序时实现上述基于YouTuBe的视频批量爬取方法的步骤。
第四方面,本发明还提供一种计算机可读存储介质,所述计算机可读存储介质存储有计算机程序,其中,所述计算机程序被处理器执行时实现上述基于YouTuBe的视频批量爬取方法的步骤。
从上面的技术方案可知,本发明提供的基于YouTuBe的视频批量爬取方法、系统、装置及可存储介质,通过利用youtube-dl插件和ffmpeg插件对YouToBe视频进行批量下载处理,从而减少了人工参与,解决目前下载效率低、不能批量进行下载等问题。
为了实现上述以及相关目的,本发明的一个或多个方面包括后面将详细说明的特征。下面的说明以及附图详细说明了本发明的某些示例性方面。然而,这些方面指示的仅仅是可使用本发明的原理的各种方式中的一些方式。此外,本发明旨在包括所有这些方面以及它们的等同物。
附图说明
通过参考以下结合附图的说明,并且随着对本发明的更全面理解,本发明的其它目的及结果将更加明白及易于理解。在附图中:
该专利技术资料仅供研究查看技术是否侵权等信息,商用须获得专利权人授权。该专利全部权利属于平安科技(深圳)有限公司,未经平安科技(深圳)有限公司许可,擅自商用是侵权行为。如果您想购买此专利、获得商业授权和技术合作,请联系【客服】
本文链接:http://www.vipzhuanli.com/pat/books/201811458982.3/2.html,转载请声明来源钻瓜专利网。