使用PHP从多个URL获取所有媒体(图像、视频…)

使用PHP从多个URL获取所有媒体(图像、视频…),php,web-scraping,reddit,Php,Web Scraping,Reddit,嗨,我正在尝试编写一个PHP脚本,从subreddit下载所有图像和视频,并将它们存储在本地 我的计划是从一个URL中获取所有链接,然后处理以确定它是图像还是视频,然后下载它 如果有人能指导我或给我一个如何进行的想法,我将不胜感激。我的想法是下载网站链接,这样你就可以得到它的html版本,而不是看一下这个主题。这样,您就可以提取所有需要的标记,例如“img”标记及其href 而不仅仅是将它们加载到数组中,然后迭代curl来下载它们并在本地存储它们 另一种方法是下载html并加载基于过滤器的所有链

嗨,我正在尝试编写一个PHP脚本,从subreddit下载所有图像和视频,并将它们存储在本地

我的计划是从一个URL中获取所有链接,然后处理以确定它是图像还是视频,然后下载它


如果有人能指导我或给我一个如何进行的想法,我将不胜感激。

我的想法是下载网站链接,这样你就可以得到它的html版本,而不是看一下这个主题。这样,您就可以提取所有需要的标记,例如“img”标记及其href

而不仅仅是将它们加载到数组中,然后迭代curl来下载它们并在本地存储它们

另一种方法是下载html并加载基于过滤器的所有链接(例如“\”http://”上的Begging并以引号结尾(如果html中有单引号,也为单引号制作另一个过滤器)。 而不仅仅是迭代所有的链接并根据扩展名将它们列为白名单,如果您感兴趣的话。然后下载并存储它们

编辑:
我忘了-也别忘了修复.html和.css和.js(可能还有更多)文件中的链接。另外,请注意,注意其中包含php的图像。

谢谢你的帮助!没问题。享受项目的乐趣。在你的项目中,这似乎很有趣;)