Screaming Frog — jak przeskanować stronę i czytać wyniki

Screaming Frog SEO Spider to program instalowany na komputerze, który skanuje witryny na potrzeby audytu technicznego SEO. [1] Z tego artykułu dowiesz się, jak przeprowadzić skan, czytać raport i kiedy sięgnąć po analizę logów w Screaming Frog Log File Analyser. Bezpłatna wersja SEO Spider pozwala sprawdzić maksymalnie 500 adresów URL w jednym skanie [2].

Czym jest audyt w Screaming Frog SEO Spider i jak odczytać wyniki?

Audyt w Screaming Frog SEO Spider zaczyna się od skanowania adresów witryny. Program wskazuje problemy techniczne, które mogą utrudniać dostęp do stron lub ich indeksowanie: statusy HTTP, niedziałające linki, przekierowania i ustawienia indeksowania. [1]
Wynik pojedynczego adresu sprawdzaj w kontekście: skąd prowadzi do niego link i czy strona ma trafić do indeksu. Kod HTTP 404 oznacza, że serwer nie znalazł zasobu pod żądanym adresem [3].

Raport obejmuje też elementy SEO: tagi title, opisy meta, adresy kanoniczne i duplikaty treści. [1] Samo oznaczenie duplikatu nie oznacza jeszcze błędu. Sprawdź, czy podobne strony mają odrębne zadania i którą z nich wskazano jako kanoniczną. Domyślny próg podobieństwa dla niemal identycznych stron wynosi 90% [4].

O priorytecie audytu decyduje rola adresu, którego dotyczy problem. Błąd na ważnej stronie docelowej wymaga innej reakcji niż taki sam błąd pod adresem wycofanym z serwisu. Kody HTTP z grupy 5xx oznaczają błędy serwera; na istotnych stronach trzeba je pilnie ocenić [5].

W skrócie: raport wskazuje problem, ale o jego wadze decyduje rola adresu.

Czym różni się SEO Spider od Log File Analyser?

Tabela pokazuje, skąd oba narzędzia biorą dane i czego nie ustalisz na podstawie ich wyników.

Narzędzie	Źródło danych i zastosowanie	Ograniczenie
SEO Spider	Podąża za adresami i pokazuje, co crawler może odkryć podczas skanowania.	Skan nie potwierdza wizyty robota wyszukiwarki.
Log File Analyser	Czyta żądania zapisane w logach serwera i pokazuje, które z nich dotarły do serwera.	Logi nie zastępują kontroli treści ani elementów meta. Bezpłatna wersja analizuje maksymalnie 1000 wierszy zdarzeń z logów w jednym projekcie [6].

Jak skonfigurować skanowanie strony?

Przed skanowaniem w SEO Spider wybierz właściwy wariant witryny i sposób wczytywania jej treści. Dostępne tryby odczytu strony porównuje tabela [2].

Tryb	Sposób działania	Kiedy go wybrać
Text Only	Analizuje surowy HTML.	Gdy potrzebne treści i linki są dostępne w kodzie strony.
JavaScript	Renderuje stronę przed odczytaniem jej treści i linków.	Gdy witryna generuje analizowane elementy w przeglądarce.

• Adres początkowy musi prowadzić do właściwego wariantu witryny, z odpowiednim protokołem i nazwą hosta.
• Zakres skanowania powinien odpowiadać celowi audytu. Przed uruchomieniem crawla sprawdź ustawienia subdomen, ścieżek i parametrów adresów [2].
• Reguły robots.txt wpływają na dostęp crawlera do stron. Sprawdź, jak program je obsługuje, i zanotuj adresy wyłączone ze skanu.
• Renderowanie JavaScript pozwala ocenić treści generowane w przeglądarce. Włącz je, jeśli witryna w ten sposób wczytuje analizowane elementy.
• Tempo skanowania wpływa na obciążenie serwera. Dostosuj je do witryny. Przed oceną wyników upewnij się, że skan dobiegł końca i objął planowane sekcje.

Dobrze określony zakres skanu pozwala odróżnić problem witryny od adresu pominiętego przez ustawienia crawlera [2].

Jak wyeksportować wyniki do dalszej analizy?

Eksport z SEO Spider ułatwia przypisanie problemów do konkretnych adresów i kontrolę poprawek. Eksport karty Internal zawiera kolumnę Address z adresem URL oraz Status Code z kodem odpowiedzi HTTP [7].

• Widok wyników dobierz do sprawdzanego problemu. Przed eksportem zastosuj odpowiedni filtr.
• Plik z adresami powinien zawierać kolumny potrzebne do oceny: status odpowiedzi, cel przekierowania lub badany element meta.
• Lista problemów powinna wskazywać priorytet, właściciela zadania i decyzję dotyczącą każdego adresu.
• Skany sprzed zmian i po zmianach pomagają sprawdzić, czy poprawki zadziałały. Porównaj je w programie, zamiast opierać się wyłącznie na bieżącym raporcie. [8]

Porównywane eksporty muszą obejmować te same warianty adresów i taki sam zakres skanu. Adresów w wersjach HTTP i HTTPS nie traktuj jak identycznych URL-i [9].

Jak rozpoznać błędy serwera, przekierowania i problemy z elementami SEO?

Wyniki SEO Spider przeglądaj według rodzaju problemu, a potem badaj każdy adres osobno. Status mówi, jak serwer odpowiedział na żądanie; pola SEO wymagają oceny zawartości i ustawień strony.
Kod 301 oznacza trwałe przekierowanie, a 404 informuje, że żądanego zasobu nie znaleziono [3].

Tabela łączy objawy widoczne w raporcie z kontrolą potrzebną przed podjęciem decyzji. Kody odpowiedzi HTTP należą do pięciu klas: 1xx, 2xx, 3xx, 4xx i 5xx [3].

Kategoria	Objaw w wynikach	Co sprawdzić
Błąd serwera	Status 5xx	Czy dotyczy ważnego adresu i czy powtarza się przy ponownym żądaniu.
Niedziałający adres	Status 404	Skąd prowadzą do niego linki i czy istnieje odpowiednia strona zastępcza.
Przekierowanie	Status 3xx	Dokąd prowadzi i czy linki wewnętrzne wskazują już adres docelowy.
Elementy SEO	Brak lub powtórzenie tagu albo rozbieżny adres kanoniczny	Czy oznaczenie odpowiada celowi strony i wersji przeznaczonej do indeksowania.

Raport z audytu prowadzi do działania dopiero wtedy, gdy połączysz objaw z rolą adresu i ustalisz poprawkę. Jeśli chcesz sprawdzić także obecność firmy w odpowiedziach AI, ocenę może uzupełnić darmowy audyt widoczności w AI [7].

Najpierw sprawdź kod odpowiedzi, potem przeznaczenie strony.

Czym jest Screaming Frog i jak rozpocząć pracę?

Screaming Frog SEO Spider zbiera dane o adresach witryny jako crawler: odwiedza stronę startową, podąża za linkami wewnętrznymi i odkrywa kolejne URL-e. [1] Dzięki temu widzisz powiązania między stronami, których nie pokaże kontrola pojedynczego adresu. Głębokość skanowania wynosi 0 dla strony startowej i 1 dla strony osiągalnej bezpośrednio z jej linku [7].

Program działa na systemach Windows, macOS i Linux. [1] Pobierz instalator dla swojego systemu, a po uruchomieniu programu podaj adres witryny. Producent udostępnia SEO Spider dla trzech systemów operacyjnych: Windows, macOS i Linux [10].

Skanowanie pokazuje adresy odkryte przez crawler. Indeksowanie oznacza coś innego: wyszukiwarka uwzględniła stronę w swoim indeksie. URL widoczny w programie nie musi być obecny w Google. Status konkretnego adresu sprawdzisz w narzędziu Kontrola adresu URL w Google Search Console [11].

Na początek wybierz system, podaj adres i ustal zakres skanu.

Do czego służy SEO Spider?

SEO Spider pomaga prześledzić strukturę witryny i zebrać dane o odwiedzonych adresach. Raport pokazuje strony odkryte przez linki wewnętrzne oraz połączenia między nimi. Brak adresu w skanie wymaga sprawdzenia – nie dowodzi, że strona nie istnieje. Głębokość skanowania 1 może oznaczać stronę odkrytą z linku umieszczonego bezpośrednio na stronie startowej [7].

Skąd pobrać program?

Screaming Frog SEO Spider pobierz z oficjalnej strony producenta. Dobierz instalator do swojego systemu i sprawdź wymagania bieżącego wydania. Nie potrzebujesz pliku z nieoficjalnego źródła. SEO Spider wymaga 64-bitowego systemu operacyjnego [10].

Jak zainstalować i uruchomić program?

Instalację Screaming Frog SEO Spider wykonaj na komputerze, z którego będziesz prowadzić audyt. Następnie przejdź przez poniższe kroki.

• Instalator SEO Spider uruchom zgodnie z instrukcjami wyświetlanymi w używanym systemie operacyjnym.
• Program SEO Spider otwórz po instalacji. Sprawdź, czy widzisz pole do wpisania adresu witryny.
• Adres witryny wpisz w polu startowym. Uwzględnij właściwy protokół i nazwę hosta.
• Skanowanie witryny rozpocznij w programie. Z oceną wyników poczekaj do końca przebiegu.

Skan utworzy listę odkrytych adresów. Sprawdź później, czy obejmuje zaplanowany zakres.

Czym jest Screaming Frog Log File Analyser?

Screaming Frog Log File Analyser analizuje dzienniki serwera i pokazuje, jakie adresy URL odwiedziły roboty wyszukiwarek. [12] Log serwera zapisuje obsłużone żądania. Czytając go, sprawdzasz wizyty odnotowane przez serwer, a nie tylko adresy możliwe do odkrycia podczas skanowania.

Analiza logów pomaga znaleźć strony pomijane przez roboty oraz adresy, które odwiedzają mimo niewielkiej wartości dla wyszukiwarki. Producent podaje 1 GB pamięci jako wymaganie programu. Wartość 2 GB oznacza domyślny przydział pamięci na komputerach 64-bitowych, a nie zalecenie dotyczące wolnej pamięci RAM. [12] Zanim przypiszesz żądania konkretnemu robotowi, sprawdź dane pozwalające go zidentyfikować – sama nazwa w raporcie nie wystarczy [6].

Logi uzupełniają skan: pokazują żądania zarejestrowane przez serwer.

Po co analizować logi serwera w SEO?

Screaming Frog Log File Analyser pozwala sprawdzić, które adresy odwiedzają roboty i jakie odpowiedzi otrzymują. Wskazuje błędy serwera oraz problematyczne przekierowania napotkane podczas tych wizyt. [12] Pomaga też ocenić crawl budget – zasoby przeznaczane przez wyszukiwarkę na odwiedzanie witryny. W logach zobaczysz, czy roboty kierują żądania również do adresów nieprzeznaczonych do promowania w wynikach.

Jakie dane o wizytach robotów pokazuje analiza logów?

Screaming Frog Log File Analyser pokazuje częstotliwość i historię wizyt robotów dla poszczególnych adresów URL. [12] Możesz dzięki temu sprawdzić, czy robot wrócił do ważnej strony po zmianie oraz które adresy występują w logach. Brak wizyty w badanym wycinku oznacza tylko tyle, że w tym wycinku nie zapisano żądania.

Na jakich danych oprzeć wnioski z analizy logów?

Wnioski z Log File Analyser opieraj na zakresie logów, adresach żądań, czasie wizyt i odpowiedziach serwera. Sprawdź też, jak zidentyfikowano roboty. Program pozwala badać identyfikatory user agent, czyli nazwy oprogramowania deklarowane w żądaniach. [12] Sam user agent nie potwierdza tożsamości robota, bo nadawca może podać dowolną nazwę. Przy analizie Googlebota lub Bingbota zweryfikuj również pochodzenie żądań.

Kiedy analiza logów uzupełnia skanowanie strony?

Screaming Frog Log File Analyser przydaje się, gdy chcesz porównać adresy dostępne dla crawlera z wizytami robotów zapisanymi na serwerze. Do programu można zaimportować dane z SEO Spider i zestawić zeskanowane adresy z tymi odwiedzonymi przez boty. [12]

• Adresy obecne w skanie i logach sprawdź pod kątem odpowiedzi serwera otrzymywanych przez roboty.
• Adresy obecne tylko w skanie oceń w świetle zakresu i okresu dostępnych logów. Brak zapisu nie dowodzi, że robot stale pomija stronę.
• Adresy obecne tylko w logach sprawdź pod kątem wcześniejszych wersji URL-i, parametrów i linków spoza skanowanego zakresu.

Zestawienie skanu z logami oddziela możliwość odkrycia strony od zarejestrowanej wizyty robota.

Licencja i inne sposoby przeprowadzenia audytu technicznego

Licencję Screaming Frog SEO Spider dobierz do wielkości audytu i sposobu pracy z wynikami. Wersja darmowa ma limit 500 URL na skan. [1] Płatna licencja daje dostęp do harmonogramów, zapisywania skanów i eksportu danych. [1]

Zakres audytu pokaże, czy wystarczy Ci wersja darmowa. Jeśli wracasz do kontroli po zmianach, sprawdź też, czy potrzebujesz zachowywać skany i eksportować dane [10].

Liczy się nie tylko wielkość witryny, lecz także sposób pracy z raportem.

Tabela porównuje wersje pod względem limitu skanowania i funkcji pracy z wynikami.

Wariant	Praca z wynikami
Wersja darmowa	Harmonogramy, zapisywanie skanów i eksport danych wymagają płatnej licencji.
Płatna licencja	Harmonogramy, zapisywanie skanów i eksport danych są dostępne.

Wersja darmowa wystarczy do audytu mieszczącego się w jej limicie, jeśli nie potrzebujesz funkcji płatnych.

Płatna licencja sprawdzi się przy powtarzanych audytach wymagających zapisu i eksportu. Do kontroli mieszczącej się w zakresie wersji darmowej nie jest konieczna.

Jak sprawdzić warunki licencji?

Warunki licencji Screaming Frog SEO Spider sprawdź w aktualnej dokumentacji przed zakupem lub rozpoczęciem audytu.

• Limit adresów porównaj z planowanym zakresem skanowania witryny.
• Harmonogramy sprawdź, jeśli audyt ma uruchamiać się ponownie bez Twojego udziału.
• Zapisywanie skanów sprawdź, jeśli chcesz wrócić do wyników po zakończeniu pracy.
• Eksport danych oceń pod kątem formatu potrzebnego do dalszej analizy.

Licencję wybieraj według potrzebnych funkcji, nie tylko liczby stron.

Jak przeprowadzić audyt techniczny bez tego programu?

Audyt techniczny bez Screaming Frog SEO Spider możesz wykonać ręcznie dla wybranych adresów. Wyniki każdej kontroli zapisuj w arkuszu.

• Lista adresów powinna obejmować strony ważne dla audytu i wskazywać ich oczekiwane wersje.
• Odpowiedź serwera pokaże, czy adres otwiera właściwą stronę, zwraca błąd lub przekierowuje użytkownika. Sprawdź ją osobno dla każdego adresu.
• Linki wewnętrzne powinny prowadzić do działających stron docelowych. Skontroluj je na wybranych stronach.
• Elementy strony obejmują tytuł, opis i adres kanoniczny. Odczytaj je w kodzie źródłowym.
• Arkusz wyników powinien łączyć adres z wykrytym problemem, oczekiwanym stanem i decyzją o poprawce [7].

Ręczny audyt pozwala dokładnie skontrolować wybrane strony. Każdy adres trzeba jednak sprawdzić osobno; bez przejścia przez cały ustalony zakres nie uzyskasz pełnego obrazu witryny [13].

Funkcje crawlera przydatne w audycie technicznym

Screaming Frog SEO Spider pomaga badać treść po renderowaniu, linki, mapę witryny i dane przypisane do URL-i. Każda funkcja odpowiada na inne pytanie. Możesz sprawdzić, co zawiera strona, jak do niej dotrzeć, które adresy są w mapie i jakie dane masz do oceny.

Renderowanie JavaScript uruchamia kod strony przed analizą zawartości. Głębokość podstrony określa jej położenie względem adresu początkowego w strukturze linków. Żaden z tych wyników nie potwierdza sam w sobie, że wyszukiwarka zaindeksowała adres.

Dobierz funkcję do pytania, na które szukasz odpowiedzi.

Tabela pokazuje obszary analizy i wyniki przydatne w audycie.

Obszar	Funkcja i zastosowanie
Strony renderowane w JavaScript	Screaming Frog SEO Spider analizuje treści i linki widoczne po wyrenderowaniu strony w JavaScript. [1] Wynik pomaga ocenić zawartość po wykonaniu skryptów.
Linkowanie wewnętrzne	Screaming Frog SEO Spider pozwala ocenić głębokość podstron i układ linków wewnętrznych. [1] Wynik pokazuje połączenia między stronami witryny.
Mapa witryny XML	Screaming Frog SEO Spider generuje mapy witryny XML, także mapy obrazów. [1] Sprawdź listę adresów przed udostępnieniem jej wyszukiwarce.
Dane z usług Google	Screaming Frog SEO Spider integruje dane z Google Analytics, Google Search Console i PageSpeed Insights. [1] Możesz rozpatrywać je w kontekście skanowanych adresów.

Funkcje crawlera są użyteczne wtedy, gdy odpowiadają na konkretne pytanie audytowe. Nie traktuj pojedynczego wyniku jak automatycznej oceny strony.

Dlaczego skanowanie pomija adresy URL lub pokazuje niepełne dane?

Screaming Frog SEO Spider może pominąć adresy, których nie odkryje w ustalonym zakresie. Raport będzie też niepełny, jeśli domyślnie nie zbiera potrzebnego elementu. Strona bez linku wewnętrznego może nie trafić do skanu, choć figuruje w mapie witryny. Porównanie skanu z mapą pomaga znaleźć potencjalne strony osierocone – pozbawione prowadzących do nich linków wewnętrznych w badanym zakresie. [1]

Adresu brakującego w wynikach szukaj najpierw w kontekście ustawień skanu. Sprawdź host, ścieżkę i dostęp crawlera do strony. Obecność w mapie przy braku w skanie to powód do kontroli, nie dowód osierocenia. Rozstrzygną linki prowadzące do adresu.

Brak odkrytego adresu to inna sytuacja niż brak pola w raporcie.

Niepełny raport treści nie dowodzi, że na stronie brakuje badanego elementu. Funkcja custom extraction – własna reguła odczytu danych z kodu – pozwala pobrać informacje o nagłówkach H3, których program domyślnie nie zbiera. [8] Gdy brakuje Ci pola, sprawdź dane dostępne standardowo i ustaw ekstrakcję dla potrzebnego elementu [14].

Przy weryfikacji pominięć oddziel adresy nieodkryte przez crawler od danych obecnych na stronie, lecz nieujętych w domyślnym raporcie.

Historia i rozwój narzędzia do skanowania stron

Screaming Frog rozwija SEO Spider jako narzędzie do analizy technicznej witryn; z historią firmy związany jest Dan Sharp. Program zmienia się z kolejnymi wydaniami. Instrukcja napisana dla starszej wersji może więc nie odpowiadać dzisiejszemu układowi ustawień.

Aktualna dokumentacja SEO Spider pomoże Ci sprawdzić dostępne funkcje i sposób ich ustawienia. Zanim oprzesz audyt na starszej instrukcji, porównaj ją z interfejsem zainstalowanej wersji.

Pracuj z dokumentacją odpowiadającą wersji programu na Twoim komputerze.

Czy analiza logów jest dostępna bezpłatnie?

Bezpłatny dostęp do Screaming Frog Log File Analyser pozwala zacząć analizę logów. Płatna licencja służy do przetwarzania większego zbioru. O wyborze powinny decydować objętość plików i planowany zakres pracy.

Przed wyborem sprawdź, jak duży zbiór chcesz przeanalizować.

Tabela porównuje oba warianty pod względem zakresu przetwarzania, zastosowania i ograniczeń.

Wariant	Zakres przetwarzania	Zastosowanie	Ograniczenie przy wyborze
Dostęp bezpłatny	Ograniczony zakres logów	Analiza mieszcząca się w dostępnym zakresie	Nie wystarcza do przetwarzania większego zbioru [15]

Objętość logów wpływa na wybór wariantu. Sprawdź wielkość zbioru przed importem.

Bezpłatny dostęp do Log File Analyser wystarczy, jeśli zbiór mieści się w dostępnym zakresie.

Płatna licencja Log File Analyser sprawdzi się przy większym zbiorze. Nie musisz jej kupować, jeśli wystarcza Ci dostęp bezpłatny.

Bezpłatny audyt widoczności w AI

Audyt widoczności w AI może uzupełnić ocenę problemów technicznych witryny o jej obecność w odpowiedziach AI. Jeśli chcesz sprawdzić swoją stronę pod tym kątem, zgłoś się po bezpłatny audyt.

To osobna kontrola, która odnosi techniczne problemy witryny do odpowiedzi AI.

Najczęściej zadawane pytania

Czy adres widoczny w Screaming Frog SEO Spider jest zaindeksowany w Google?

Nie musi być. SEO Spider pokazuje adresy odkryte podczas skanowania, a ich status w Google sprawdzisz w Kontroli adresu URL w Google Search Console.

Czy nazwa Googlebota w polu user agent potwierdza, że żądanie wysłał Googlebot?

Nie. Nadawca może podać dowolną nazwę user agent, dlatego trzeba też zweryfikować pochodzenie żądania.

Czy brak adresu w badanym wycinku logów oznacza, że robot nigdy go nie odwiedził?

Nie. Oznacza tylko, że w analizowanym wycinku nie zapisano żądania.

Czy podobieństwo stron na poziomie 90% samo w sobie oznacza błąd duplikacji?

Nie. Sprawdź, czy strony mają różne zadania i która z nich została wskazana jako kanoniczna.

Czy adresy HTTP i HTTPS można traktować jako ten sam URL przy porównywaniu skanów?

Nie. Wersje HTTP i HTTPS to różne adresy, więc porównywane skany powinny obejmować te same warianty.

Źródła

1. Screaming Frog – crawler SEO | Double Digital — https://double-digital.pl/slownik/sreaming-frog/
2. Screaming Frog — SEO Spider Configuration. — https://www.screamingfrog.co.uk/seo-spider/user-guide/configuration/
3. Screaming Frog — HTTP Status Codes — https://www.screamingfrog.co.uk/learn-seo/http-status-codes/
4. Screaming Frog — How To Check For Duplicate Content — https://www.screamingfrog.co.uk/seo-spider/tutorials/how-to-check-for-duplicate-content/
5. Google — How HTTP Status Codes Affect Google’s Crawlers — https://developers.google.com/crawling/docs/troubleshooting/http-status-codes
6. Screaming Frog — Log File Analyser FAQ oraz Configuration. — https://www.screamingfrog.co.uk/log-file-analyser/faq/
7. Screaming Frog — SEO Spider Tabs. — https://www.screamingfrog.co.uk/seo-spider/user-guide/tabs/
8. How to Use Screaming Frog SEO Spider for Website Audits — https://neilpatel.com/blog/screaming-frog/
9. Google Search Central — What is URL Canonicalization — https://developers.google.com/search/docs/crawling-indexing/canonicalization
10. Screaming Frog — SEO Spider FAQ. — https://www.screamingfrog.co.uk/seo-spider/faq/
11. Google — URL Inspection tool — https://support.google.com/webmasters/answer/9012289?hl=en
12. Screaming Frog Log File Analyser – jak zoptymalizować serwis z wykorzystaniem analizy logów? – SEO-WWW.PL – Pozycjonowanie stron i sklepów internetowych — https://seo-www.pl/blog/screaming-frog-log-file-analyser-jak-zoptymalizowac-serwis-z-wykorzystaniem-analizy-logow/
13. Screaming Frog — SEO Spider: About The Tool. — https://www.screamingfrog.co.uk/seo-spider/
14. Screaming Frog — Web Scraping & Custom Extraction Using The SEO Spider. — https://www.screamingfrog.co.uk/seo-spider/tutorials/web-scraping/
15. Screaming Frog — Log File Analyser Pricing. — https://www.screamingfrog.co.uk/log-file-analyser/pricing/