从事SEO的人员会用到很多工具,每个工具有自己的特色,产出的内容也不尽相同。Screaming Frog SEO Spider 在众多工具中表现出色,在国内被称之为尖叫青蛙。它是一款网站爬行工具,通过提取常见的SEO问题数据,来帮助网站运营人员完善站点内容与技术。
1.Screaming Frog SEO Spider 的爬取怎么开始
尖叫青蛙可以在Windows,Mac和Linux上运行,所以第一步,先根据自己电脑的系统下载正确的安装包,根据提示直接安装即可。大多数SEO工具是网页版,但这款工具做成了应用程序,需要从客户端进入。进入后的面板如下:
将要检查的URL放在Screaming Frog 后面的长方形文本框中,并点击Start。将www.adwebcloud.com放进去点击Start,工具开始爬取网站,免费版数量是有限制,只可以跑500个网址,付费版是无限个。
工具跑的时候随时可以停下来,直接点stop,继续的话点击resume就可以了,clear用来清空当前数据,重新开始。crawl30%是表示当前爬取的进度。
除了通过输入URL并单击“start”对网站进行爬取外,还可以切换到列表模式,上传URL。你如果想导出与上传相同顺序的数据,可以点击“Upload”按钮旁边的“Export”按钮。
2.Screaming Frog爬取数据如何导出?
有三种方法:
a.从顶部窗口的标签过滤器中导出:
b.部分数据导出(如:URL,进站链接,出站链接,图像信息或爬网路径报告等)
只需右键单击要从中导出数据的URL,然后选择导出选项;多个链接导出,可按住ctrl键。
c.批量导出所有数据,点击最顶部的“Bulk Export”,选择对应的导出项。
3.Screaming Frog SEO Spider的内存设置方法
如果你想爬行比较大的网站,建议增加该工具的RAM内存分配。一般建议将内存设置为比的运行内存低2GB,以便其他应用程序可以正常运行,默认情况下,32位的机器允许1GB,64位的机器允许2GB。
当然,如果想增加更多的内存给尖叫青蛙的话,可以通过选择“Configuration > System > Storage,选择Database Storage,将数据保存到磁盘上。
当然,如果不是大型网站的爬取,不建议更改工具默认的存储形式,这会影响工具的爬取速度,一般带有8GB RAM的64位计算机能够抓取数十万个URL,正常使用完全可以满足。
以上为Screaming Frog SEO Spider的入门操作、数据导出及内存设置的相关步骤,你学会了吗?