Przewodnik po robotach TechSEO360 — mapy witryn i techniczne audyty SEO

Od 10 lat robot, którego używam do technicznych audytów witryn SEO, które wykonuję w Search Engine People, nazywa się obecnie TechSEO360. Ukryty klejnot; opłacalny, wydajny (indeksuje dowolną witrynę o dowolnym rozmiarze), patrzący w przyszłość (np. miał obsługę AJAX przed innymi tego typu narzędziami typu crawler). Pisałem o tym robotze indeksującym witrynę wcześniej, ale chciałem napisać bardziej obszerny post typu „wszystko w jednym”.

Wyjaśnienie TechSEO360

TechSEO360 to techniczny robot SEO, którego najważniejsze cechy to:

• Oprogramowanie natywne dla systemów Windows i Mac.
• Potrafi od razu indeksować bardzo duże witryny.
• Elastyczna konfiguracja robota dla tych, którzy tego potrzebują.
• Korzystaj z wbudowanych lub niestandardowych raportów do analizy zebranych danych strony internetowej (chociaż zwykle polegam na eksporcie wszystkich danych do Excela i użyciu jego potężnych filtrów, przestawianiu, automatycznym formatowaniu itp.).
• Twórz mapy witryn graficznych, wideo i hreflang XML oprócz wizualnych map witryn.

Jak skonstruowany jest ten przewodnik

Ten przewodnik obejmuje wszystkie najważniejsze funkcje SEO, które można znaleźć w tym oprogramowaniu.

• Będziemy korzystać ze strony demonstracyjnej https://Crawler.TechSEO360.com we wszystkich naszych przykładach.
• Wszystkie zrzuty ekranu będą pochodzić z wersji Windows – ale wersja na Maca zawiera te same funkcje i narzędzia.
• Będziemy używać TechSEO360 w trybie darmowym, który jest stanem przełączonym po zakończeniu początkowej, w pełni funkcjonalnej bezpłatnej 30 wersji próbnej.
• Będziemy używać domyślnych ustawień indeksowania i analizy witryny, chyba że zaznaczono inaczej.
• Zaczniemy od pokazania, jak skonfigurować indeksowanie witryny, a następnie przejdziemy do technicznego SEO, raportów i map witryn.

Konfigurowanie i rozpoczynanie indeksowania

Większość witryn będzie dobrze indeksować przy użyciu ustawień domyślnych. Oznacza to, że jedyną wymaganą konfiguracją będzie zwykle wprowadzenie ścieżki witryny, którą chcesz przeanalizować - niezależnie od tego, czy znajduje się ona w Internecie, serwerze lokalnym czy na dysku lokalnym.

Jako łatwą alternatywę dla konfiguracji ręcznej, możliwe jest również zastosowanie różnych „szybkich ustawień wstępnych”, które konfigurują podstawowe ustawienia. Przykładami mogą być:

• Wiesz, że chcesz stworzyć mapę witryny wideo i chcesz mieć pewność, że możesz wygenerować najlepszą możliwą.
• Używasz określonego CMS-a witryny, który generuje wiele adresów URL o małej treści, które należy wykluczyć.

Dla tych, którzy chcą zagłębić się w ustawienia, możesz zapewnić prawie pełną kontrolę nad procesem indeksowania, w tym:

Silnik gąsienicowy

To jest miejsce, w którym możesz zadzierać z głębszymi wewnętrznymi mechanizmami wykonywania żądań HTTP. Jedną szczególną rzeczą jest to, jak możesz zwiększyć prędkość indeksowania: po prostu zwiększ liczbę jednoczesnych wątków i jednoczesnych połączeń - po prostu upewnij się, że Twój komputer i witryna internetowa poradzą sobie z dodatkowym obciążeniem.

Filtry dla webmasterów

Kontroluj, w jakim stopniu robot indeksujący powinien przestrzegać noindex, nofollow, robots.txt i podobnych.

Filtry analizy

Skonfiguruj reguły, dla których adresy URL powinny mieć analizowaną zawartość. Dostępnych jest wiele opcji filtrowania „wyklucz” i „ogranicz do”, w tym wzorce adresów URL, rozszerzenia plików i typy MIME.

Filtry wyjściowe

Podobny do „Skanuj witrynę | Filtry analizy”, ale zamiast tego służy do kontrolowania, które adresy URL zostaną „otagowane” w celu usunięcia po zakończeniu indeksowania witryny.

Adresy URL wykluczone przez opcje znajdujące się w „Skanuj witrynę | Filtry webmastera” i „Skanuj witrynę | Filtry wyjściowe” mogą być nadal zachowywane i wyświetlane po zatrzymaniu indeksowania witryny, jeśli opcja „Skanuj witrynę | Opcje robota | Zastosuj webmastera i filtry wyjściowe po przeskanowaniu witryny zatrzymuje się” nie jest zaznaczone. Dzięki tej kombinacji:

• Zachowaj wszystkie informacje zebrane przez robota, dzięki czemu możesz wszystko sprawdzić.
• Nadal unikaj dołączania adresów URL podczas tworzenia map witryn HTML i XML.
• Nadal otrzymuj prawidłowe „tagowanie” podczas tworzenia raportów i eksportów.

Postęp indeksowania

Podczas indeksowania witryny możesz zobaczyć różne statystyki, które pokazują, ile adresów URL przeanalizowano swoją zawartość, ile rozwiązano ich linków i odnośników oraz ile adresów URL wciąż czeka w kolejkach.

Przegląd witryny po indeksowaniu

Po zakończeniu indeksowania witryny program otwiera widok z kolumnami danych po lewej stronie:

Jeśli wybierzesz adres URL, możesz wyświetlić dalsze szczegóły po prawej stronie:

Oto miniatura tego, jak może wyglądać na pełnowymiarowym ekranie:

Lewa strona

Tutaj znajdziesz adresy URL i powiązane dane znalezione podczas skanowania witryny. Domyślnie wyświetlanych jest tylko kilka najważniejszych kolumn danych. Powyżej znajduje się panel składający się z pięciu przycisków i pola tekstowego. Ich cele to:

#1
Menu z predefiniowanymi „szybkimi raportami”. Za ich pomocą można szybko skonfigurować:

• Które kolumny danych są widoczne.
• Które „opcje szybkiego filtrowania” są włączone.
• Aktywny „tekst szybkiego filtra”, aby jeszcze bardziej ograniczyć to, co jest wyświetlane.

#2
Menu rozwijane umożliwiające przełączanie między wyświetlaniem wszystkich adresów URL w witrynie jako płaską „listę” a „drzewo”.

#3
Menu rozwijane do konfiguracji, które kolumny danych są widoczne.

#4
W porównaniu z powyższym włączenie widoczności kolumny danych „Przekierowania do ścieżki” wygląda tak:

# 5
Menu rozwijane umożliwiające skonfigurowanie wybranych „opcji szybkiego filtrowania”.

#6
Przycisk włączania/wyłączania do włączania/wyłączania wszystkich funkcji „szybkich filtrów”.

#7
Pole zawierające „tekst szybkiego filtra”, który służy do dalszego dostosowywania wyświetlanych treści.

Jak korzystać z funkcji „szybkich raportów” i „szybkich filtrów” zostanie wyjaśnione później z przykładami.

Prawa strona

Tutaj możesz zobaczyć dodatkowe szczegóły wybranego adresu URL po lewej stronie. Obejmuje to listę „Połączone przez” z dodatkowymi szczegółami, listę „Linki [wewnętrzne]”, listę „Używane przez”, „Podsumowanie katalogu” i inne.

Aby zrozumieć, jak tego używać podczas badania szczegółów, porównaj następujące dwa scenariusze.

#1
Po lewej stronie wybraliśmy adres URL http://crawler.techseo360.com/noindex-follow.html - widzimy też, że robot oznaczył go "[noindex][follow]" w kolumnie danych "Flagi URL":

Po prawej stronie zakładki „Linki [wewnętrzne]” możemy potwierdzić, że wszystkie linki zostały użyte, w tym i wyświetlić dodatkowe szczegóły .

#2
Po lewej stronie wybraliśmy adres URL http://crawler.techseo360.com/nofollow.html - widzimy również, że robot oznaczył go "[index][nofollow]" w kolumnie danych "Flagi URL".:

Po prawej stronie zakładki „Linki [wewnętrzne]” możemy potwierdzić, że nie zastosowano żadnych linków .

Korzystanie z szybkich raportów

Jak powiedziałem, nie używam ich często, wolę pokazywać wszystkie kolumny danych, a następnie eksportować do programu Excel. Ale dla tych, którzy lubią tego rodzaju wbudowane raporty w innych narzędziach, oto niektóre z najczęściej używanych szybkich raportów:

Wszystkie rodzaje przekierowań

Wbudowany „szybki raport”, który pokazuje wszystkie rodzaje przekierowań, w tym informacje niezbędne do śledzenia łańcuchów przekierowań:

Zasadniczo ma to:

1. Zmieniono widoczność kolumn danych na najbardziej odpowiednie.
2. Ustaw tekst filtra na:
   [httpredirect|canonicalredirect|metarefreshredirect] -[noindex] 200 301 302 307
3. Aktywowane filtry:
   • Only show URLs with all [filter-text] found in "URL state flags" column
   • Only show URLs with any filter-text-number found in "response code" column

Dzięki temu adres URL musi spełniać następujące trzy warunki, aby był wyświetlany:

1. Musi wskazywać na inny adres URL przez przekierowanie HTTP, instrukcję kanoniczną lub metaodświeżanie „0 sekund”.
2. Nie może zawierać instrukcji „noindex”.
3. Musi mieć kod odpowiedzi 200, 301, 302 lub 307.

404 Nie Znaleziono

Jeśli potrzebujesz szybko zidentyfikować uszkodzone linki i odnośniki do adresów URL, ten raport jest dobrym wyborem. Dzięki temu widoczne są kolumny danych "Linked.List" (np. tag "a"), "Used.List" (np. atrybut "src") i "Redirected.List".

Noindeks

Szybko przeglądaj wszystkie strony z instrukcją „noindex”.

Zduplikowane tytuły #1

Szybko wyświetlaj wszystkie strony z zduplikowanymi tytułami, w tym z duplikatami pustych tytułów.

Zduplikowane tytuły #2

Jeśli nie są zastępowane przez inne filtry, tekst filtru pasuje do zawartości we wszystkich widocznych kolumnach danych. Tutaj zawęziliśmy nasz raport o zduplikowanych tytułach do tych, które zawierają słowo „przykład”.

Liczba znaków w tytule

Ogranicz wyświetlane adresy URL według liczby znaków tytułu. Możesz kontrolować próg i jeśli jest wyższy lub niższy. Podobne są dostępne dla opisów.

Liczba pikseli tytułu

Ogranicz adresy URL wyświetlane według liczby pikseli tytułu. Możesz kontrolować próg i jeśli jest wyższy lub niższy. Podobne są dostępne dla opisów.

Obrazy i brakujący tekst Alt/kotwicy

Wyświetlaj tylko adresy URL obrazów, które zostały użyte bez tekstu alternatywnego lub połączone bez tekstu kotwicy.

Inne narzędzia

Analiza na stronie

Domyślnie podczas indeksowania serwisu przeprowadzana jest kompleksowa analiza tekstu na wszystkich stronach. Opcja znaleziona dla tego znajduje się w „Skanuj witrynę | Zbieranie danych”, co daje wyniki takie jak:

Jednak zawsze możesz również analizować pojedyncze strony bez indeksowania całej witryny:

Zauważ, że możesz zobaczyć, które słowa kluczowe i frazy są kierowane w całej witrynie, jeśli użyjesz przycisku „podsumuj wyniki dla wybranych stron”.

Listy słów kluczowych

Elastyczny kreator list słów kluczowych, który pozwala łączyć listy słów kluczowych i przeprowadzać kompleksowe porządki.

Narzędzia internetowe innych firm

Jeśli potrzebujesz więcej narzędzi, możesz dodać je samodzielnie, a nawet zdecydować, które powinny być dostępne na kartach, a nie tylko na liście rozwijanej.

Oprogramowanie automatycznie przekaże wybrany adres URL lub podobny do wybranego narzędzia online. Każde narzędzie online jest konfigurowane za pomocą pliku tekstowego, który określa, jakie dane są przekazywane i jak to się robi.

Mapy witryn

Typy plików mapy witryny

Dzięki 13 różnym formatom plików map witryn prawdopodobnie Twoje potrzeby zostaną zaspokojone. Obejmuje to mapy witryn XML, mapy witryn wideo i mapy witryn graficznych.

Mapy witryn XML i Hreflang

Nawet jeśli Twoja witryna nie zawiera żadnych znaczników hreflang, TechSEO360 często będzie w stanie generować mapy witryn XML z odpowiednimi alternatywnymi informacjami o hreflang, jeśli Twoje adresy URL zawierają części zawierające odniesienie do kultury języka lub kraju.

Mapy witryn obrazów i wideo w formacie XML

Zwykle możesz przyspieszyć konfigurację, korzystając z jednego z „Szybkich ustawień wstępnych”:

• Mapa witryny wideo Google
• Mapa witryny wideo Google (witryna zawiera filmy hostowane zewnętrznie)
• Mapa witryny obrazu Google
• Mapa witryny grafiki Google (witryna zawiera obrazy hostowane zewnętrznie)

Jeśli zamierzasz tworzyć zarówno mapy witryn graficznych, jak i wideo, użyj jednej z opcji wideo, ponieważ zawierają one również całą konfigurację optymalną dla map witryn graficznych.

TechSEO360 wykorzystuje różne metody do obliczania, które strony, filmy i obrazy należą do siebie w wygenerowanych mapach witryn XML – co może być trudne, jeśli obraz lub film jest używany w wielu miejscach.

Mapy witryn HTML

Wybierz jeden z wbudowanych szablonów HTML lub zaprojektuj własny, w tym rzeczywisty kod HTML/CSS/JS i różne opcje używane podczas tworzenia map witryn.

Inne funkcje

Obsługa JavaScript i AJAX

Możesz skonfigurować TechSEO360 do wyszukiwania w kodzie JavaScript odnośników do plików i adresów URL, zaznaczając opcję „Skanuj witrynę | Opcje robota | Spróbuj wyszukać w JavaScript”.

Jeśli masz do czynienia z witryną AJAX, możesz przełączyć się na rozwiązanie obsługujące AJAX w „Skanuj witrynę | Silnik robota | Domyślny typ ścieżki i procedura obsługi”.

Niestandardowe wyszukiwanie tekstu i kodu

Często przydatne może być wyszukiwanie tekstu i kodu w całej witrynie — np. w celu znalezienia stron przy użyciu starego kodu Google Analytics lub podobnego.

Możesz skonfigurować wiele wyszukiwań w „Skanuj witrynę | Zbieranie danych” | Wyszukaj niestandardowe ciągi, kody i wzorce tekstowe”.

Wyniki są wyświetlane w kolumnie danych „Wyszukiwania niestandardowe strony”, pokazując liczbę dla każdego wyszukiwania – opcjonalnie z treścią wyodrębnioną z dopasowania do wzorca.

Obliczony wynik ważności

TechSEO360 oblicza znaczenie wszystkich stron na podstawie wewnętrznych linków i wewnętrznych przekierowań.

Możesz to zobaczyć, włączając widoczność kolumny danych „Skalowana ocena ważności”.

Wykrywanie podobnych treści

Czasami strony są podobne, ale nie są dokładnymi duplikatami. Aby je znaleźć, możesz przed skanowaniem włączyć opcję „Skanuj witrynę | Zbieranie danych | Śledzenie i przechowywanie rozszerzonych danych | Przeprowadź analizę słów kluczowych dla wszystkich stron”.

Podczas przeglądania wyników włącz widoczność kolumny danych „Duplikaty treści strony (widok wizualny)”, a otrzymasz graficzną reprezentację treści.

Interfejs wiersza poleceń (CLI)

Jeśli korzystasz z wersji próbnej lub płatnej, możesz skorzystać z wiersza poleceń - oto przykład:
"techseo.exe" -exit -scan -build ":my-project.ini" @override_rootpath=http://example.com@
Powyższe przekazuje plik projektu ze wszystkimi zdefiniowanymi opcjami, nadpisuje domenę witryny i nakazuje TechSEO360 uruchomienie pełnego indeksowania, kompilacji map witryn i wyjścia.

Importowanie danych

Funkcjonalność „Plik | Importuj...” działa inteligentnie i może być używana do:

• Importuj listy adresów URL. Jeśli importowane adresy URL pochodzą z domen mieszanych, TechSEO360 określi, czy istnieje domena podstawowa i zaimportuje je odpowiednio do zakładek „Wewnętrzne” i „Zewnętrzne”.
• TechSEO360 może również wykryć różne inne źródła danych, które zamiast tego zostaną dodane do istniejących danych:
  • Serwer Apache rejestruje „tag” adresy URL odwiedzane przez Googlebota „[googlebot]” i wykrywa adresy URL, które nie są wewnętrznie połączone/używane „[orphan]”.
  • Narzędzia Google dla webmasterów eksportują do „tagów” ​​adresów URL indeksowanych przez Google „[googleindexed]” oraz danych dotyczących kliknięć i wyświetleń.
  • Eksport Majestic do pliku CSV dla danych punktacji linków zwrotnych.

  Powyższy „[...]” może być używany przez „tekst szybkich filtrów” do generowania dalszych niestandardowych raportów.

Eksportowanie danych

Funkcjonalność „Plik | Eksportuj...” umożliwia eksportowanie danych do plików CSV, Excel, HTML i innych, w zależności od tego, co eksportujesz. Używać:

• Wybierz kontrolkę z danymi, które chcesz wyeksportować.
• Zastosuj opcje, aby kontrolka zawierała tylko dane, które chcesz wyeksportować. (Może to np. obejmować „kolumny danych”, „opcje szybkiego filtrowania” i „tekst szybkiego filtrowania”)
• Kliknij przycisk „Eksportuj” i masz teraz żądane dane w żądanym formacie.

Ceny TechSEO360

Zasadniczo istnieją trzy różne stany:

1. Kiedy po raz pierwszy pobierzesz oprogramowanie, otrzymasz w pełni funkcjonalną 30-dniową bezpłatną wersję próbną .
2. Po wygaśnięciu wersji próbnej nadal działa w trybie darmowym, co pozwala na indeksowanie 500 stron w witrynach internetowych.
3. Przy zakupie rocznej subskrypcji cena wynosi 99 USD za licencję dla jednego użytkownika, z której można korzystać zarówno w systemie Windows, jak i Mac.

Możesz pobrać wersję próbną dla systemów Windows i Mac pod adresem https://TechSEO360.com .