Screaming Frog SEO Spider是一款國外開發(fā)的著名鏈接檢測工具，可以應(yīng)用在Windows、MAC、Ubuntu等系統(tǒng)?？梢钥焖俜治鲆粋€網(wǎng)站的鏈接、圖片、CSS、Script等元素?？梢悦赓M下載安裝，免費版可以分析500個鏈接。需要的朋友們可以下載試試吧！

解壓密碼：chabaoo.cn

軟件介紹

Screaming Frog SEO Spider是一款網(wǎng)站優(yōu)化分析工具，特別為搜索引擎優(yōu)化設(shè)計和鏈接檢測來分析網(wǎng)站。Screaming Frog SEO Spider支持抓取網(wǎng)站并查找斷開的鏈接（404）和服務(wù)器錯誤、審計重定向、發(fā)現(xiàn)重復內(nèi)容、分析頁面標題和元數(shù)據(jù)等功能，是一款非常使用的網(wǎng)站優(yōu)化和SEO工具。該工具可以從SEO的角度出發(fā)，模擬谷歌、必應(yīng)等搜索引擎對網(wǎng)頁進行抓取，同時分析網(wǎng)頁的結(jié)構(gòu)、內(nèi)容等信息，然后為我們給出詳細的分析結(jié)果。你可以通過這款軟件來快速抓取網(wǎng)站中可能出現(xiàn)的損壞鏈接和服務(wù)器錯誤，或是識別網(wǎng)站中臨時、永久重定向的鏈接循壞，同時還能檢查出網(wǎng)址、網(wǎng)頁標題、說明以及內(nèi)容等信息中心可能出現(xiàn)的重復問題，在經(jīng)過抓取分析之后，你就能將這些錯誤問題全部批量導出發(fā)送給開發(fā)人員進行修復。另外該軟件還支持使用XPath提取數(shù)據(jù)，所以只要你的網(wǎng)站結(jié)構(gòu)簡練就不必擔心在抓取時可能會出現(xiàn)錯漏問題。

軟件功能

1、查找斷開的鏈接、錯誤和重定向
2、分析頁面標題和元數(shù)據(jù)
3、審查元機器人和指令
4、審計hreflang屬性
5、發(fā)現(xiàn)重復的頁面
6、生成XML站點地圖
7、爬網(wǎng)限制
8、抓取配置
9、保存抓取并重新上傳
10、自定義源代碼搜索
11、自定義提取
12、Google Analytics集成
13、Search Console集成
14、鏈接指標集成
15、JavaScript渲染抓取
16、自定義robots.txt抓取

安裝方法

1、下載軟件，雙擊“ScreamingFrogSEOSpider.exe”主程序運行，直接傻瓜式默認下一步完成安裝。

2、安裝成功后，直接運行注冊機獲取用戶名和產(chǎn)品密鑰。

3、然后運行軟件，點擊Licence欄下的Enterlicence選項，并將獲取的用戶名與注冊碼復制粘貼在該窗口中點擊確定即可。

軟件特色

1、找到斷開的鏈接
立即抓取網(wǎng)站，找到損壞的鏈接（404）和服務(wù)器錯誤。批量導出錯誤和源URL以修復或發(fā)送給開發(fā)人員。
2、審計重定向
找到臨時和永久的重定向，識別重定向鏈和循環(huán)，或者上傳一個網(wǎng)址列表，以在網(wǎng)站遷移中進行審計。
3、分析頁面標題和元數(shù)據(jù)
在抓取過程中分析頁面標題和元描述，并確定在您的網(wǎng)站中過長，短小，缺失或重復的頁面標題和元描述。
4、發(fā)現(xiàn)重復的內(nèi)容
使用md5算法檢查發(fā)現(xiàn)精確的重復網(wǎng)址、部分重復的網(wǎng)頁標題、說明或標題等元素，并找到內(nèi)容較低的網(wǎng)頁。
5、使用XPath提取數(shù)據(jù)
使用CSS Path，XPath或regex從網(wǎng)頁的HTML中收集任何數(shù)據(jù)。這可能包括社交元標簽、額外的標題、價格、SKU或更多！
6、審查機器人和指令
查看由robots.txt、meta robots或X-Robots-Tag指令（如“noindex”或“nofollow”）以及canonicals和rel=“next”和rel=“prev”阻止的URL。
7、生成XML站點地圖
快速創(chuàng)建XML站點地圖和圖像XML站點地圖，通過包含URL的高級配置，上次修改，優(yōu)先級和更改頻率。
8、與Google Analytics集成
連接到Google AnalyticsAPI，并抓取用戶數(shù)據(jù)，例如會話或跳出率和轉(zhuǎn)化次數(shù)，目標，交易和著陸頁的收入。

使用方法

一、爬行抓取
1、常規(guī)抓取
在常規(guī)抓取模式下，Screaming Frog SEO Spider會抓取您輸入的子域名，并將默認情況下所遇到的所有其他子域名視為外部鏈接（顯示在“外部”標簽下）。在該軟件的許可版本中，您可以調(diào)整配置以選擇抓取網(wǎng)站的所有子域。搜索引擎優(yōu)化蜘蛛最常見的用途之一是在網(wǎng)站上發(fā)現(xiàn)錯誤，如斷開的鏈接，重定向和服務(wù)器錯誤。為了更好地控制抓取，請使用您的網(wǎng)站的URI結(jié)構(gòu)、SEO spider配置選項，例如只抓取HTML（圖像、CSS、JS等）、排除功能、自定義robots.txt、包含功能或者更改搜索引擎優(yōu)化蜘蛛的模式，并上傳一個URI列表抓取。
2、抓取一個子文件夾
SEO Spider工具默認從子文件夾路徑向前抓取，因此如果您希望抓取站點上的特定子文件夾，只需輸入具有文件路徑的URI即可。例如，如果它是一個博客，它可能是：https://www.screamingfrog.co.uk/blog/，就像我們自己的博客。通過直接輸入到SEO Spider中，它將抓取/blog/sub目錄中包含的所有URI。
3、抓取網(wǎng)址列表
通過輸入網(wǎng)址并點擊“開始”來抓取網(wǎng)站，您可以切換到列表模式，粘貼或上傳要抓取的特定網(wǎng)址列表。例如，在審計重定向時，這對于站點遷移尤其有用。
二、組態(tài)
在該工具的許可版本中，您可以保存默認的爬網(wǎng)配置，并保存可在需要時加載的配置配置文件。
1、要將當前配置保存為默認值，請選擇“文件>配置>將當前配置保存為默認值”。
2、要保存配置文件以便將來可以加載，請單擊“文件>另存為”并調(diào)整文件名（最好是描述性的）。
3、要加載配置文件，請單擊“文件>加載”，然后選擇您的配置文件或“文件>加載最近”以從最近的列表中進行選擇。
4、要重置為原始Screaming Frog SEO Spider默認配置，請選擇“文件>配置>清除默認配置”。
三、出口
頂部窗口部分的導出功能在頂部窗口中與您當前的視野一起工作。因此，如果您使用過濾器并單擊“導出”，則只會導出過濾選項中包含的數(shù)據(jù)。
有三種主要的數(shù)據(jù)導出方法：
1、導出頂層窗口數(shù)據(jù)：只需點擊左上角的“導出”按鈕，即可從頂層窗口選項卡導出數(shù)據(jù)。
2、導出較低的窗口數(shù)據(jù)（URL信息、鏈接、輸出鏈接、圖像信息）：要導出這些數(shù)據(jù)，只需在頂部窗口中右鍵單擊要導出數(shù)據(jù)的URL，然后單擊“導出”下的“URL信息”、“鏈接”、“出鏈接”或“圖片信息”。
3、批量導出：位于頂層菜單下，允許批量導出數(shù)據(jù)。您可以通過“all in links”選項導出抓取中找到的鏈接的所有實例，也可以將所有鏈接全部導出到具有特定狀態(tài)代碼（如2XX，3XX，4XX或5XX響應(yīng)）的URL。例如，選擇“鏈接中的客戶端錯誤4XX”選項將導出全部鏈接到所有錯誤頁面（例如404錯誤頁面）。您還可以導出所有圖像替代文字，所有圖像缺少替代文字和所有錨點文字。