SBWebCamCorder(数据文件下载工具)

　　SBWebCamCorder又名SBWcc，它是一款数据文件下载工具，旨在让用户从网站的单个文件下载所有内容，包括其所有页面和图像的整个网站，它还具有重复捕获功能，可让您重复捕获时变图像，例如网络摄像头图片；除了用户可以想到的内容之外，此工具还有一个扩展的设置页面，其中包含用于启用自动重启功能和对代理服务器的支持的选项，还有一个重复拒绝功能，它将拒绝重复文件并记住重复的URL；蜘蛛设置可让用户确定要捕获单个网页还是整个网站；用户还可以根据根页面的深度来限制链接；需要的用户可以下载体验

软件功能

　　捕获任何单个文件

　　捕获包含所有嵌入式图像的页面

　　支持通过蜘蛛设定来进行网站访问并捕获网站上的所有页面

　　捕获时变数据，例如WebCams

　　SBWcc被设计为通用网站下载器，它可以执行以下所有操作

　　从网站或包含所有图像的页面中捕获单个文件

　　可以访问一切网站并捕获网站上的所有页面

　　重复捕获和编号随时间变化的数据，例如WebCam（因此名称为WebCamCorder）

　　根据大小或内容类型限制下载的文件

　　SBWcc有哪些特殊功能

　　包含一个内置的缩略图（和全屏）JPEG查看器，

　　可让您在下载文件时查看它们。

　　全屏JPEG查看器支持幻灯片显示和图像尺寸调整功能

软件特色

　　功能齐全的共享软件-无残缺功能，无过期。

　　内置全屏和缩略图JPEG图像查看器，可实时显示传输情况。（适用于图片或网络摄像头网站）

　　根据字节大小拒绝数据（非HTML）文件-自动跳过太大或太小的文件。

　　能够检测重复项和/或重命名不同内容的文件。（对于捕获同一文件随时间变化的WebCam有用）

　　手动队列查看器和编辑器，允许高级用户在下载不需要的页面之前手动删除它们

　　您可以限制遵循的深度长度

　　您可以仅在需要时将链接限制为向前方向

　　有过滤器可控制下载哪些类型的页面(文本，图像，应用程序，视频，音频等)

　　身份验证使您可以为付费站点配置名称和密码。

安装步骤

　　1、用户可以点击本网站提供的下载路径下载得到对应的程序安装包

　　2、只需要使用解压功能将压缩包打开，双击主程序即可进行安装，弹出程序安装界面

　　3、可以根据自己的需要点击浏览按钮将应用程序的安装路径进行更改

　　4、弹出以下界面，用户可以直接使用鼠标点击下一步按钮

　　5、现在准备安装主程序，点击安装按钮开始安装

　　6、弹出应用程序安装进度条加载界面，只需要等待加载完成即可

　　7、根据提示点击安装，弹出程序安装完成界面，点击完成按钮即可

使用说明

　　您在网络浏览器中看到的“页面”通常由几个不同的部分组成：

　　页面本身的文本，采用HTML格式。（即主文件，由您提供的URL指定）

　　嵌入式图像，每个图像都存储为单独的文件

　　URL链接到其他页面。

　　当浏览器加载页面时，它首先加载HTML文本文件。它解析该文件，然后请求每个图像，每个图像作为一个单独的文件。关键是您在网络浏览器屏幕上看到的内容由许多文件组成。

　　所有Web文档均由统一资源定位符（URL）指定。可以将URL视为文件的地址或“文件所在的位置”。要获取特定文件，您需要知道它的URL。例如，示例URL是http://www.newsrobot.com/，即我的网站地址。所有WWW URL都以前缀“ http：//”开头。

　　默认设置：

　　SBWcc已预先配置为大多数人希望执行的默认选项：爬网整个站点并将所有文件下载到硬盘上。如果希望将SBWcc配置为仅下载单个文件或包含图像的单个页面，则必须按照以下部分的说明更改一些配置选项。新手的几个常见症结：

　　默认情况下，SBWcc将在您的硬盘驱动器上复制Web服务器的目录结构。因此，如果将下载路径设置为c：\ program files \ sbwcc，然后下载页面http://www.myhost.com/dir1/page1，则该页面将最终存储在c：\的硬盘驱动器上程序文件\ sbwcc \ dir1 \ page1。关键是：如果您对Windows文件系统不太熟悉，那么导航到所需文件可能会有些困惑-我的建议是使用Windows资源管理器，如果感到困惑，请四处浏览。

　　您也可以通过取消选中“设置/下载”页面中的选项，使SBWcc将所有文件填充到同一目录中。这消除了上面的问题，但是意味着您下载的所有内容都集中在一起（有点混乱！）

　　对整个站点进行爬网往往会花费大量时间并下载大量文件。尝试限制您的http：//规范尽可能精确，以获取所需的文件。

　　捕获单个WWW文件：

　　有时您可能希望从网络上捕获一个且只有一个文件。通常，这是如果您知道所需文件的确切URL。方法如下：

　　选择“运行”选项卡，然后在顶部的“ URL”框中键入URL。

　　选择“设置/蜘蛛”选项卡，然后在“蜘蛛方法”框中选择“单个”按钮。

　　选择“运行”选项卡，然后按<开始>

　　您输入的URL将被下载并存储在硬盘上。

　　用图像捕获页面：

　　如果要捕获页面以及该页面中存储的所有图像，请使用这种情况。这将产生多个文件-页面文本一个文件，每个图像一个JPEG / GIF文件。步骤如下：

　　选择“运行”选项卡，然后在URL框中键入URL。

　　选择“设置/蜘蛛”选项卡，然后在“蜘蛛方法”框中选择“页面”按钮

　　选择“运行”选项卡，然后按<开始>

　　首先将下载页面文本并将其另存为HTML文件，然后将每个图像下载并另存为GIF或JPG文件。

　　搜寻整个网站：

　　爬网是指请求一个页面，然后按照其链接获取其他页面的过程。Spidering可以返回非常多的文件，因为很难准确知道将要包含的内容。当您知道要将整个网站（包括所有页面，图像和链接）下载到计算机上时，爬网非常有用。步骤如下：

　　选择“运行”选项卡，然后在URL框中键入URL。

　　选择“设置/蜘蛛”选项卡，然后在“蜘蛛方法”框中选择“蜘蛛”按钮。

　　选择“运行”选项卡，然后按<开始>

　　首先将下载您输入URL的页面，然后下载所有图像。然后，将跟随每个链接，以产生更多页面和更多图像。

　　默认情况下，“蜘蛛”选项配置为仅捕获您输入的站点中的页面。例如，如果您输入“ http://www.newsrobot.com/”，则仅 跟随www.newsrobot.com上的链接。这样可以防止Spider算法进入其他潜在的意外站点并下载其内容。您可以通过选中“设置/蜘蛛”选项卡上的“蜘蛛抓取时允许非现场页面”选项来覆盖此行为。选中此选项可能会导致SBWcc永久运行，请求大量页面，因此应谨慎使用。

　　捕获WebCam输出：

　　网络摄像头通常是一种向Internet提供实时图像的摄像机。有许多不同的网络摄像头，包括：

　　风景相机

　　办公摄像机

　　奇怪/怪异的相机（宠物，民居等）

　　成人相机

　　这些摄像机通常通过WWW浏览器进行访问。通过浏览到摄像机，您可以看到该站点当前发生的情况，并且当摄像机将新数据馈送到Internet时，图像将自动更新。

　　但是，有时您希望将摄像头中的图像“捕获”或“记录”到您的个人计算机中以供以后查看。这样，您可以稍后查看数据，并查看在录制时是否发生了任何有趣的事情。由于所有图像都存储在本地硬盘驱动器上，因此可以更快地脱机查看它们。

　　第一步是确定要捕获的摄像机的URL。这个很重要：

　　您应该使用图像本身的URL，而不要使用显示图像的页面的URL。

　　确定“图片网址”的方法如下：

　　在浏览器中转到网站

　　查找您要捕获的网络摄像头的图像。右键单击 图像中间。您获得的菜单将取决于您使用的是Microsoft Internet Explorer还是Netscape Navigator。

　　如果您使用的是Internet Explorer，则将看到一个菜单，其中包含一个名为“属性”的项目。点击这个。将为您提供一个对话框，其中包含有关图像的信息，包括一条显示“地址（URL）”的行。这是图片的网址

　　如果使用的是Netscape Navigator，则将看到一个菜单，其中包含一个名为“视图图像”的项目。点击它。该图像将展开为全屏显示，并且在Netscape Navigator窗口中显示的URL将是该图像的URL。

　　如果您不知道“图片URL”，那么不用担心-如果您给它提供页面URL，SBWcc仍然可以正常工作；您将下载一些不必要的额外信息。以下是下载步骤：

　　选择“运行”选项卡，然后在URL框中输入URL。尽可能使用图片网址而不是页面网址。

　　选择“设置（下载）”选项卡。如果您在步骤＃1中使用了图像网址，则请选中“单个”复选框，否则请选中“页面”复选框。

　　选择“设置（常规）”选项卡。您将需要启用“自动重启”复选框，并在“延迟”字段中输入图片之间的近似延迟。我将在下面进一步讨论。

　　选择“运行”选项卡，然后按<开始>

　　SBWcc将下载您输入的URL。

　　下载完成后，SBWcc将暂停一段时间，该时间等于您在步骤3中在延迟字段中输入的时间。延迟完成后，SBWcc将重新开始，然后重新下载图像，并在更改后保存图像。

　　大多数WebCam不会立即更新其提要-在大多数情况下，提要会定期更新，例如，每30秒更新一次。因此，以比每30秒一次的速度更快的速度下载是没有意义的，因为任何更快的速度都会产生重复的图像。

　　这就是延迟设置的目的。根据您认为图片更新之间的延迟时间进行设置。大多数WebCam网站都会在其页面的某处包含延迟率的估计值。

　　如果您尝试下载图像的速度快于网站更新图像的速度，则将收到重复的图像。SBWcc自动查找重复项，并且不会将其保存到您的计算机中。

　　设置选项卡分为几个子选项卡，分别代表配置的不同方面：

　　常规：其他选项

　　下载：下载目录和相关设置

　　重复项：重复检查器

　　蜘蛛：蜘蛛整个网站的选项

　　下面将分别讨论这些内容：

　　一般：

　　自动重启。主要用于每次您请求内容都会更改的网站（例如网络摄像头）。在经过指定的时间间隔后，自动重新启动将导致SBWcc重新下载该页面。

　　代理服务器。代理服务器用于某些LAN设置中，其中一台计算机充当LAN上所有计算机的Web中介。

　　下载：

　　下载路径。下载路径是计算机上所有已下载文件的放置位置。

　　将URL附加到path。选中此选项将导致在硬盘驱动器上创建与网站结构相匹配的目录结构。取消选中此选项会将您下载的所有文件都放在一个目录中。

　　重复：

　　检查重复。这控制重复检查器的模式。可以将其设置为“不拒绝重复项”，在这种情况下，不拒绝任何重复项；“拒绝所有重复项”，在这种情况下，所有重复项都被拒绝，或“仅拒绝未修改的内容”。如果选中了后面的选项，则SBWcc将与Web服务器验证每个重复项，以查看是否已更改。尽管这仍然需要大量时间，但是它比重新下载所有内容要快得多。

　　URL已记住。这指定了重复检查器数据库中当前存在的URL的数量。您可以使用清除按钮清除其中的任何一个或全部。

　　蜘蛛：

　　蜘蛛法。这控制了蜘蛛算法的功能：

　　单一：仅下载您指定的页面。

　　页面：您指定的页面及其所有图像都将被下载，但是没有超链接被跟随。

　　蜘蛛：SBWcc将下载您指定的页面，所有图像，然后跟随每个超链接。这将一直持续到所有超链接都用尽为止。

　　蜘蛛选项

　　场外图片。如果当前页面包含位于另一台服务器上的图像，则将下载该图像。

　　异地页面。如果当前页面包含指向位于另一台服务器上的页面的超链接，则将下载该页面。

　　仅转发链接。如果选中，则仅跟踪比当前目录更深的目录中的链接。例如，假设当前页面为 http：// foo / bar / sam，则将 遵循 http：// foo / bar / sam / joe，但不会遵循 http：// foo / bar / tom 。

　　将链接的图像视为内联。许多面向图片的站点都包含指向JPEG / GIF图像的链接。当您单击链接时，您将获得全屏图像。但是，从技术上讲，该图像仍然是超链接，并且SBWcc通常会将其视为普通的超链接。如果选中此选项，则作为超链接包含的JPEG / GIF图像将具有特殊状态，并且像嵌入式图像一样被对待。（适合图片网站）

　　最大链接深度。SBWcc跟踪随着每个链接而深入的深度。在蜘蛛模式下，SBWcc将继续跟踪链接，直到耗尽所有链接为止，这可能需要很长时间（或无限长）。您可以指定深度SBWcc会走多少个链接的限制-这限制了事情能获得多大程度的控制。

　　处理推荐人检查

　　许多网站都在使用一种称为“引荐来源标头”的东西来检查下载的有效性。这样做是为了确保您不会在未查看整个页面（其中可能包含广告和其他垃圾）的情况下从站点请求单个图像。

　　例如，假设您正在查看网页“ www.website.com/page1.html”，并且其中包含您希望SBWcc下拉的图像“ www.website.com/image1.gif”。

　　在普通网站上，您可以在SBWcc中输入“ www.website.com/image1.gif”的URL，然后下载就可以了。但是，在经过引荐来源审核的网站上，如果输入www.website.com/'image1.gif'，则可能会弹出某种“无效请求”或“未经授权的请求”图像...

　　解决方法是在SBWcc的高级设置中使用“初始引荐来源标头”设置。要到达那里，请单击“设置”选项卡，然后单击“常规”选项卡，最后单击“高级”按钮。这将弹出高级设置对话框。我们在这里感兴趣的是“初始引荐来源标头”。

　　在初始引荐来源标头框中，您需要输入包含要下载的图像的页面的完整URL 。在我们的示例中，该名称可能是“ www.website.com/page1.html”。您的情况会有所不同。

　　支持身份验证/密码站点

　　许多网站要求使用密码才能访问。SBWcc旨在支持从这些站点下载。您将需要在SBWcc的身份验证设置中输入正确的密码信息。身份验证位于身份验证标签下，并包括所需数量的站点/ URL设置。

　　按<添加>按钮添加新的身份验证设置。系统将提示您输入以下内容：

　　主机名/网址子字符串。这是一个文本字符串，可唯一标识身份验证将应用到的URL。例如，如果您要访问的站点是 “ www.mysite.com”，则只需 在框中输入主机名 “ www.mysite.com”。某些站点可能对不同部分具有多种身份验证。例如，您可以为 “ www.mysite.com/section1/” 和 “ www.mysite.com/section2/”分别设置一个密码

　　。在这种情况下，只需输入较长的url字符串即可区分它们。一个很好的技巧是使主机名/ URL子字符串尽可能短，以唯一地标识经过身份验证的页面。如果一个简单的主机名可以使用（例如“ www.mysite.com”），则只需使用它即可。没有理由花哨。

　　认证“用户名”。这是站点管理员分配给您的身份验证用户名。

　　认证“密码”。这是站点管理员分配给您的密码。

　　AdultCheck网站：

　　许多人要求我提供有关如何访问受AdultCheck验证系统保护的网站的信息，该系统不同于传统的Web身份验证。AdultCheck验证系统的工作原理如下

　　要求用户输入他/她的AdultCheck密钥

　　按下提交按钮后，密钥将发送到AdultCheck网站进行验证

　　如果密钥正确，则将用户的浏览器重定向到原始系统上的网页（付费区域）

　　主要观察到的是，步骤3中浏览器所指向的URL通常不受保护。要从受保护的站点下载该URL，您需要将其输入SBWcc。通常，URL将由浏览器显示在浏览器窗口顶部附近。但是，情况并非总是如此-具有“框架”的网站通常会向您隐藏正确的URL，并且您可能需要进行一些调查。

　　我的目的不是为您提供有关访问网站的具体说明，但是一个很好的提示是使用您的浏览器正常访问该网站，确定付款区域的URL，然后将该URL输入SBWcc。

　　筛选选项

　　SBWcc内置了几个过滤选项。它们都位于“过滤器”标签下。首先是一盒下载文件类型。这些类型表示Internet Mime内容类型，并且与文件扩展名松散相关（即Text / Html = .html，.htm和Image / Jpeg = .jpeg，.jpe，.jpg等）。取消选中文件类型将阻止将这些文件下载到您的硬盘驱动器。

　　第二种过滤方法是按文件大小。您可以设置最小和最大文件大小。

　　应该注意的是，在Spider（或Page）模式下，SBWcc必须始终下载HTML文件。这是因为HTML文件包含蜘蛛抓取所必需的超链接。因此，过滤选项不会阻止HTML文件的下载。（取消选中“文本/ HTML”文件类型将阻止保存HTML文件，但不会传输HTML文件）