Screaming Frog SEO Spider是一款國外開發(fā)的著名鏈接檢測工具，可以應(yīng)用在Windows、MAC、Ubuntu等系統(tǒng)。可以快速分析一個(gè)網(wǎng)站的鏈接、圖片、CSS、Script等元素。可以免費(fèi)下載安裝，免費(fèi)版可以分析500個(gè)鏈接。需要的朋友們可以下載試試吧！

解壓密碼：chabaoo.cn

軟件介紹

Screaming Frog SEO Spider是一款網(wǎng)站優(yōu)化分析工具，特別為搜索引擎優(yōu)化設(shè)計(jì)和鏈接檢測來分析網(wǎng)站。Screaming Frog SEO Spider支持抓取網(wǎng)站并查找斷開的鏈接（404）和服務(wù)器錯誤、審計(jì)重定向、發(fā)現(xiàn)重復(fù)內(nèi)容、分析頁面標(biāo)題和元數(shù)據(jù)等功能，是一款非常使用的網(wǎng)站優(yōu)化和SEO工具。該工具可以從SEO的角度出發(fā)，模擬谷歌、必應(yīng)等搜索引擎對網(wǎng)頁進(jìn)行抓取，同時(shí)分析網(wǎng)頁的結(jié)構(gòu)、內(nèi)容等信息，然后為我們給出詳細(xì)的分析結(jié)果。你可以通過這款軟件來快速抓取網(wǎng)站中可能出現(xiàn)的損壞鏈接和服務(wù)器錯誤，或是識別網(wǎng)站中臨時(shí)、永久重定向的鏈接循壞，同時(shí)還能檢查出網(wǎng)址、網(wǎng)頁標(biāo)題、說明以及內(nèi)容等信息中心可能出現(xiàn)的重復(fù)問題，在經(jīng)過抓取分析之后，你就能將這些錯誤問題全部批量導(dǎo)出發(fā)送給開發(fā)人員進(jìn)行修復(fù)。另外該軟件還支持使用XPath提取數(shù)據(jù)，所以只要你的網(wǎng)站結(jié)構(gòu)簡練就不必?fù)?dān)心在抓取時(shí)可能會出現(xiàn)錯漏問題。

軟件功能

1、查找斷開的鏈接、錯誤和重定向
2、分析頁面標(biāo)題和元數(shù)據(jù)
3、審查元機(jī)器人和指令
4、審計(jì)hreflang屬性
5、發(fā)現(xiàn)重復(fù)的頁面
6、生成XML站點(diǎn)地圖
7、爬網(wǎng)限制
8、抓取配置
9、保存抓取并重新上傳
10、自定義源代碼搜索
11、自定義提取
12、Google Analytics集成
13、Search Console集成
14、鏈接指標(biāo)集成
15、JavaScript渲染抓取
16、自定義robots.txt抓取

安裝方法

1、下載軟件，雙擊“ScreamingFrogSEOSpider.exe”主程序運(yùn)行，直接傻瓜式默認(rèn)下一步完成安裝。

2、安裝成功后，直接運(yùn)行注冊機(jī)獲取用戶名和產(chǎn)品密鑰。

3、然后運(yùn)行軟件，點(diǎn)擊Licence欄下的Enterlicence選項(xiàng)，并將獲取的用戶名與注冊碼復(fù)制粘貼在該窗口中點(diǎn)擊確定即可。

軟件特色

1、找到斷開的鏈接
立即抓取網(wǎng)站，找到損壞的鏈接（404）和服務(wù)器錯誤。批量導(dǎo)出錯誤和源URL以修復(fù)或發(fā)送給開發(fā)人員。
2、審計(jì)重定向
找到臨時(shí)和永久的重定向，識別重定向鏈和循環(huán)，或者上傳一個(gè)網(wǎng)址列表，以在網(wǎng)站遷移中進(jìn)行審計(jì)。
3、分析頁面標(biāo)題和元數(shù)據(jù)
在抓取過程中分析頁面標(biāo)題和元描述，并確定在您的網(wǎng)站中過長，短小，缺失或重復(fù)的頁面標(biāo)題和元描述。
4、發(fā)現(xiàn)重復(fù)的內(nèi)容
使用md5算法檢查發(fā)現(xiàn)精確的重復(fù)網(wǎng)址、部分重復(fù)的網(wǎng)頁標(biāo)題、說明或標(biāo)題等元素，并找到內(nèi)容較低的網(wǎng)頁。
5、使用XPath提取數(shù)據(jù)
使用CSS Path，XPath或regex從網(wǎng)頁的HTML中收集任何數(shù)據(jù)。這可能包括社交元標(biāo)簽、額外的標(biāo)題、價(jià)格、SKU或更多！
6、審查機(jī)器人和指令
查看由robots.txt、meta robots或X-Robots-Tag指令（如“noindex”或“nofollow”）以及canonicals和rel=“next”和rel=“prev”阻止的URL。
7、生成XML站點(diǎn)地圖
快速創(chuàng)建XML站點(diǎn)地圖和圖像XML站點(diǎn)地圖，通過包含URL的高級配置，上次修改，優(yōu)先級和更改頻率。
8、與Google Analytics集成
連接到Google AnalyticsAPI，并抓取用戶數(shù)據(jù)，例如會話或跳出率和轉(zhuǎn)化次數(shù)，目標(biāo)，交易和著陸頁的收入。

使用方法

一、爬行抓取
1、常規(guī)抓取
在常規(guī)抓取模式下，Screaming Frog SEO Spider會抓取您輸入的子域名，并將默認(rèn)情況下所遇到的所有其他子域名視為外部鏈接（顯示在“外部”標(biāo)簽下）。在該軟件的許可版本中，您可以調(diào)整配置以選擇抓取網(wǎng)站的所有子域。搜索引擎優(yōu)化蜘蛛最常見的用途之一是在網(wǎng)站上發(fā)現(xiàn)錯誤，如斷開的鏈接，重定向和服務(wù)器錯誤。為了更好地控制抓取，請使用您的網(wǎng)站的URI結(jié)構(gòu)、SEO spider配置選項(xiàng)，例如只抓取HTML（圖像、CSS、JS等）、排除功能、自定義robots.txt、包含功能或者更改搜索引擎優(yōu)化蜘蛛的模式，并上傳一個(gè)URI列表抓取。
2、抓取一個(gè)子文件夾
SEO Spider工具默認(rèn)從子文件夾路徑向前抓取，因此如果您希望抓取站點(diǎn)上的特定子文件夾，只需輸入具有文件路徑的URI即可。例如，如果它是一個(gè)博客，它可能是：https://www.screamingfrog.co.uk/blog/，就像我們自己的博客。通過直接輸入到SEO Spider中，它將抓取/blog/sub目錄中包含的所有URI。
3、抓取網(wǎng)址列表
通過輸入網(wǎng)址并點(diǎn)擊“開始”來抓取網(wǎng)站，您可以切換到列表模式，粘貼或上傳要抓取的特定網(wǎng)址列表。例如，在審計(jì)重定向時(shí)，這對于站點(diǎn)遷移尤其有用。
二、組態(tài)
在該工具的許可版本中，您可以保存默認(rèn)的爬網(wǎng)配置，并保存可在需要時(shí)加載的配置配置文件。
1、要將當(dāng)前配置保存為默認(rèn)值，請選擇“文件>配置>將當(dāng)前配置保存為默認(rèn)值”。
2、要保存配置文件以便將來可以加載，請單擊“文件>另存為”并調(diào)整文件名（最好是描述性的）。
3、要加載配置文件，請單擊“文件>加載”，然后選擇您的配置文件或“文件>加載最近”以從最近的列表中進(jìn)行選擇。
4、要重置為原始Screaming Frog SEO Spider默認(rèn)配置，請選擇“文件>配置>清除默認(rèn)配置”。
三、出口
頂部窗口部分的導(dǎo)出功能在頂部窗口中與您當(dāng)前的視野一起工作。因此，如果您使用過濾器并單擊“導(dǎo)出”，則只會導(dǎo)出過濾選項(xiàng)中包含的數(shù)據(jù)。
有三種主要的數(shù)據(jù)導(dǎo)出方法：
1、導(dǎo)出頂層窗口數(shù)據(jù)：只需點(diǎn)擊左上角的“導(dǎo)出”按鈕，即可從頂層窗口選項(xiàng)卡導(dǎo)出數(shù)據(jù)。
2、導(dǎo)出較低的窗口數(shù)據(jù)（URL信息、鏈接、輸出鏈接、圖像信息）：要導(dǎo)出這些數(shù)據(jù)，只需在頂部窗口中右鍵單擊要導(dǎo)出數(shù)據(jù)的URL，然后單擊“導(dǎo)出”下的“URL信息”、“鏈接”、“出鏈接”或“圖片信息”。
3、批量導(dǎo)出：位于頂層菜單下，允許批量導(dǎo)出數(shù)據(jù)。您可以通過“all in links”選項(xiàng)導(dǎo)出抓取中找到的鏈接的所有實(shí)例，也可以將所有鏈接全部導(dǎo)出到具有特定狀態(tài)代碼（如2XX，3XX，4XX或5XX響應(yīng)）的URL。例如，選擇“鏈接中的客戶端錯誤4XX”選項(xiàng)將導(dǎo)出全部鏈接到所有錯誤頁面（例如404錯誤頁面）。您還可以導(dǎo)出所有圖像替代文字，所有圖像缺少替代文字和所有錨點(diǎn)文字。