Mapa strony XML i plik robots.txt - po co są

Krótka odpowiedź: Mapa strony XML i plik robots.txt to dwa techniczne elementy, które pomagają wyszukiwarce poprawnie odczytać Twoją stronę. Mapa strony XML to lista adresów Twoich podstron w formacie dla wyszukiwarki, ułatwiająca Google odkrycie i zaindeksowanie wszystkich stron. Plik robots.txt to instrukcje dla robotów wyszukiwarek, mówiące, których części strony mogą lub nie powinny przeglądać. Mała firma zwykle nie musi tworzyć ich ręcznie, bo zajmuje się tym system strony lub jej wykonawca, ale warto rozumieć ich rolę i upewnić się, że są poprawne, bo błędy potrafią zaszkodzić widoczności. Poprawne podstawy techniczne sprzedają. Flowtellect to polska agencja web design, która tworzy strony internetowe w abonamencie dla małych firm w całej Polsce.

Mapa strony XML i plik robots.txt brzmią technicznie i odstraszająco, ale ich rola jest prosta, a zrozumienie jej pomaga zadbać o poprawne podstawy widoczności. Te dwa elementy pomagają wyszukiwarce poprawnie odczytać Twoją stronę, co łączy się z kwestią indeksowania, którą poruszaliśmy przy Google Search Console. Wyjaśnimy je maksymalnie przystępnie: czym są, po co służą, czym się różnią i co właściciel małej firmy naprawdę powinien o nich wiedzieć, bez wchodzenia w zbędne szczegóły techniczne. To rozwinięcie podstaw z przewodnika SEO dla małej firmy. Fundamentem dla każdej firmy pozostaje pytanie czy mała firma potrzebuje strony.

Spis treści

1. Co to są i po co, w skrócie
2. Czym jest mapa strony XML
3. Po co jest mapa strony XML
4. Czym jest plik robots.txt
5. Po co jest plik robots.txt
6. Mapa XML a robots.txt: czym się różnią
7. Czy mała firma musi się tym zajmować sama
8. Jak sprawdzić, czy strona je ma
9. Najczęstsze błędy i pułapki
10. Co właściciel naprawdę powinien wiedzieć

Co to są i po co, w skrócie

Krótko: Mapa strony XML i plik robots.txt to dwa techniczne elementy pomagające wyszukiwarce poprawnie odczytać i zrozumieć Twoją stronę. Mapa pokazuje Google listę Twoich stron, a robots.txt mówi robotom, gdzie mogą wchodzić. To fundament techniczny widoczności, którym zwykle zajmuje się strona lub wykonawca, więc warto rozumieć jego rolę, nie trzeba być ekspertem.

Cała praca tych dwóch plików odbywa się, zanim jakikolwiek klient cokolwiek zobaczy: to rozmowa między Twoją witryną a robotem wyszukiwarki, prowadzona poza wzrokiem ludzi. Robot, który przychodzi poznać stronę, dostaje od niej dwie informacje: wykaz tego, co jest do obejrzenia, czyli mapę strony XML, oraz wskazówki, gdzie ma wstęp, czyli robots.txt. Ta rozmowa wraca regularnie, bo roboty odwiedzają strony cyklicznie, a nie raz, więc oba pliki pracują dla Ciebie bez przerwy, niezależnie od tego, czy o nich pamiętasz.

Z tej pary wynika prosty podział obowiązków, który rozwiniemy po kolei, oraz jedna zasada nadrzędna: oba pliki mają po prostu być poprawne. Sedno uspokojenia niesie cytat obok. Twoim zadaniem nie jest pisanie tych plików, tylko pewność, że nie robią szkody. Dobra wiadomość jest taka, że poprawność to stan domyślny porządnie zrobionej strony, a nie coś, co trzeba wywalczyć.

Plan wpisu: najpierw każdy element z osobna, potem różnice między nimi, a na końcu część praktyczna: kto się tym zajmuje, jak to sprawdzić i jaki błąd potrafi zdjąć stronę z wyników. Po drodze ani razu nie zajrzymy w kod, bo do roli właściciela żaden kod nie jest potrzebny.

Mapa XML i robots.txt brzmią groźnie, ale to techniczny fundament działający w tle. Nie musisz być ekspertem, by zadbać, że są poprawne.

Czym jest mapa strony XML

Krótko: Mapa strony XML to lista adresów wszystkich ważnych podstron Twojej witryny, przygotowana w specjalnym formacie zrozumiałym dla wyszukiwarek. To swego rodzaju spis treści strony dla Google. Nie jest to mapa dla odwiedzających, lecz techniczna lista dla wyszukiwarki, która pomaga jej poznać wszystkie Twoje strony, więc warto rozumieć, że to po prostu uporządkowany wykaz podstron.

Mapa strony XML to plik z wykazem adresów wszystkich liczących się podstron w Twojej witrynie, zapisany w języku maszyn. Działa jak lista zawartości naklejona na paczkę: odbiorca i tak zajrzy do środka, ale dzięki niej wie, czego szukać i czy czegoś nie brakuje. Końcówka XML oznacza tylko sposób zapisu czytelny dla programów; nie musisz umieć go czytać, tak jak nie czytasz kodu kreskowego. W odróżnieniu od treści nikt nie pisze go zdanie po zdaniu, bo to wykaz, który system składa z istniejących podstron, czasem z drobnymi dopiskami w rodzaju daty ostatniej zmiany, pomocnymi robotowi w planowaniu odwiedzin.

Samo słowo mapa bywa mylące, bo na witrynach istnieje czasem także osobna podstrona z wykazem działów dla ludzi; tu mowa o czymś innym, o pliku, którego zwykły gość nigdy nie ogląda. Współczesne systemy generują go same i dopisują nowe podstrony automatycznie, więc jego istnienie to zwykle kwestia jednego ustawienia, nie pracy. Przy dodawaniu wpisów blogowych wykaz rośnie sam, więc rozwijanie treści nie tworzy tu żadnego dodatkowego obowiązku. Mapa XML to wykaz dla maszyn, nie widok dla ludzi.

Po co jest mapa strony XML

Krótko: Mapa strony XML pomaga wyszukiwarce odnaleźć i zaindeksować wszystkie ważne podstrony, zwłaszcza gdy strona jest większa, ma nowe podstrony czy mniej linków. Ułatwia Google pełne i szybsze poznanie witryny. Dzięki mapie XML wyszukiwarka łatwiej dociera do wszystkich Twoich stron, co wspiera ich indeksowanie i widoczność, więc jest pomocnym, choć działającym w tle, elementem.

Google poznaje witryny, wędrując po odnośnikach, trochę jak doręczyciel, który objeżdża osiedle i wypatruje skrzynek. Mapa XML wręcza mu gotową listę adresową: nadal sam odwiedza każdy adres i ocenia, co zastał, ale niczego nie musi zgadywać ani przegapić tylko dlatego, że prowadziło tam mało odnośników. Bez listy łatwo o pominięcie, bo świeża podstrona, do której nie prowadzi jeszcze nic, mogłaby czekać na odkrycie tygodniami. Lista nie zastępuje przy tym nawigacji, bo ta służy ludziom; po prostu domyka to, co nawigacja mogła pominąć.

Z tego biorą się praktyczne korzyści, czyli pełniejsze i szybsze poznawanie witryny, zwłaszcza świeżych treści, a sytuacje, w których lista adresowa pomaga najbardziej, zebraliśmy w kafelkach obok. Jedno zastrzeżenie: mapa ułatwia odkrycie stron, ale o ich miejscu w wynikach decyduje jakość, więc to wsparcie logistyki, nie skrót na górę. Dla kilkustronicowej wizytówki różnica bywa kosmetyczna, ale rośnie z każdym nowym wpisem, więc mapa to inwestycja w przyszły rozmiar witryny. Mapa skraca robotowi drogę, ale nie podnosi oceny strony.

Większa strona

Wiele podstron do odnalezienia przez Google.

Nowe treści

Szybsze odkrywanie świeżych wpisów i stron.

Mało linków

Strony trudne do odkrycia inną drogą.

Rozwijany blog

Rosnący zasób treści do zaindeksowania.

Pełne indeksowanie

Mniejsza szansa, że ważna strona zostanie pominięta.

Porządek dla Google

Uporządkowana lista wszystkich stron.

Czym jest plik robots.txt

Krótko: Plik robots.txt to niewielki plik tekstowy z instrukcjami dla robotów wyszukiwarek, mówiący im, których części strony mogą przeglądać, a których nie powinny. To swego rodzaju regulamin wstępu dla automatów. Nie blokuje ludzi, lecz kieruje tym, co przeglądają roboty wyszukiwarek, więc warto rozumieć, że to instrukcje dla automatów odwiedzających stronę, a nie dla odwiedzających ludzi.

Robots.txt to z kolei mały plik tekstowy o ustalonej nazwie, leżący w stałym miejscu witryny, do którego każdy robot zagląda, zanim zacznie ją przeglądać. Przypomina informację wywieszoną przy bramie dla dostawców: dotyczy wyłącznie kierowców z zaopatrzeniem, a nie klientów sklepu, i mówi, którędy wjechać, a gdzie nie ma po co zaglądać. Tak samo robots.txt rozmawia tylko z automatami wyszukiwarek; człowiek z odnośnikiem wejdzie wszędzie, bo plik niczego przed ludźmi nie chowa i nie jest żadnym mechanizmem prywatności. Jego treść to dosłownie kilka linijek prostych poleceń, których składni nie musisz znać, bo plik powstaje razem ze stroną i rzadko kiedykolwiek się zmienia. Co ciekawe, jest jawny i każda witryna trzyma go pod takim samym adresem, więc to żadna tajemnica techniczna, tylko powszechnie przyjęty zwyczaj, którego porządne roboty przestrzegają. Wynika z tego prosta zasada bezpieczeństwa: tego, co naprawdę poufne, nie chroni się tym plikiem, tylko hasłem.

Po co jest plik robots.txt

Krótko: Robots.txt pozwala kierować tym, co roboty wyszukiwarek przeglądają na stronie, na przykład prosząc, by nie zaglądały do nieistotnych czy technicznych części. Pomaga skupić ich uwagę na tym, co ważne. Dobrze ustawiony robots.txt porządkuje, co wyszukiwarka przegląda, ale źle ustawiony może zaszkodzić, więc jego rola jest pomocna, lecz wymaga poprawności, do czego jeszcze wrócimy.

Po co komu taki plik? Każda witryna ma zaplecze: techniczne zakamarki, wersje pomocnicze, miejsca bez wartości dla szukających. Na małej witrynie tych zakamarków jest niewiele, ale przybywa ich razem z nią. Robots.txt pozwala wyprosić stamtąd automaty, żeby czas spędzany na Twojej stronie poświęcały tam, gdzie jest treść dla klientów; przy okazji zwyczajowo wskazuje robotom drogę do mapy XML, dzięki czemu oba pliki pracują w parze. Korzyść jest obopólna: robot nie marnuje wizyt na techniczny śmietnik, a Twoje istotne podstrony są odwiedzane częściej i świeżej.

Dla małej, zwykłej strony wystarcza ustawienie domyślne i w praktyce nic się przy nim nie robi. Trzeba tylko wiedzieć, że to przełącznik o dużej mocy w prostej obudowie: jedno nieostrożne polecenie potrafi odciąć robotom więcej, niż ktokolwiek planował. Stąd żelazna zasada: w robots.txt nie grzebie się bez powodu i bez wiedzy. Jeśli ktoś kiedykolwiek zaproponuje Ci zmiany w tym pliku dla szybkich efektów, potraktuj to jak prośbę o klucze do zaplecza: najpierw pytanie po co, dopiero potem ewentualna zgoda.

Mapa XML a robots.txt: czym się różnią

Krótko: Mapa XML i robots.txt to dwie różne rzeczy: mapa to lista Twoich stron pokazująca wyszukiwarce, co masz, a robots.txt to instrukcje mówiące robotom, gdzie mogą wchodzić. Mapa zaprasza i pokazuje, robots.txt kieruje i ogranicza. Zrozumienie tej różnicy pomaga nie mylić obu elementów, bo choć oba pomagają wyszukiwarce odczytać stronę, pełnią odmienne, uzupełniające się role.

Skoro znasz już oba elementy, zestawmy je: podstawowe porównanie masz w tabeli obok, a najciekawsza różnica siedzi w trybie rozmowy. Mapa jest prośbą: zajrzyj pod te adresy, którą Google traktuje jak podpowiedź i może z niej skorzystać albo nie. Robots.txt jest poleceniem: tam nie wchodź, którego roboty po prostu słuchają. Pomocny jest też drugi podział: mapa mówi o tym, co istnieje, a robots.txt o tym, co wolno, więc jeden plik opisuje zawartość, drugi dostęp.

Z tej asymetrii wynika asymetria ryzyka. Zaniedbana mapa kosztuje niewiele, bo wyszukiwarka i tak radzi sobie, idąc po odnośnikach; błędne polecenie w drugim pliku kosztuje wszystko, bo posłuszny robot naprawdę przestanie zaglądać. Dlatego w części o błędach niemal cały reflektor padnie na robots.txt. Ta hierarchia tłumaczy też kolejność kontroli: najpierw zawsze sprawdza się polecenia, dopiero potem kompletność wykazu. Prośbę można zignorować, polecenie zostanie wykonane, nawet jeśli jest błędne.

Element	Co to jest	Co robi
Mapa strony XML	Lista adresów Twoich podstron	Pokazuje Google, jakie masz strony, by je odkrył
Plik robots.txt	Instrukcje dla robotów wyszukiwarek	Mówi, gdzie roboty mogą, a gdzie nie powinny wchodzić

Czy mała firma musi się tym zajmować sama

Krótko: Zwykle nie: mapę XML i robots.txt tworzy i zarządza nimi system, na którym działa strona, lub jej wykonawca, więc właściciel rzadko musi robić to ręcznie. Warto jedynie rozumieć ich rolę i upewnić się, że są poprawne. Mała firma nie musi być techniczna, by zadbać o te elementy, bo zajmuje się nimi strona czy wykonawca, a właścicielowi wystarczy świadomość i dopilnowanie poprawności.

Czy musisz robić to sam? Nie, z tych samych powodów, dla których nie spinasz samodzielnie bezpieczników w lokalu: instalacją posługujesz się codziennie, ale układa ją elektryk. Mapę i robots.txt tworzy system, na którym stoi witryna, albo osoba, która ją budowała, podobnie jak resztę zaplecza technicznego, o którym wspominaliśmy przy SEO on-page. Dotyczy to również stron stawianych na gotowych platformach, gdzie oba pliki istnieją od pierwszego dnia bez niczyjego udziału, a przy okazji to dobry test wykonawcy, bo dla solidnego są oczywistością.

Twoja rola mieści się w dwóch pytaniach do wykonawcy: czy witryna ma mapę XML obejmującą wszystkie podstrony oraz czy robots.txt przepuszcza całą część przeznaczoną dla klientów. Oba wysyłasz jednym mailem, a odpowiedź zajmuje fachowcowi chwilę. Jeżeli brzmi ona dwa razy tak, temat możesz odłożyć aż do najbliższej przebudowy. Właściciel pilnuje dwóch odpowiedzi, technik pilnuje plików.

Jak sprawdzić, czy strona je ma

Krótko: Można prosto sprawdzić, czy strona ma mapę XML i robots.txt, między innymi przez narzędzie dla właścicieli stron od Google, które pokazuje mapy i ewentualne problemy, lub prosząc o to osobę obsługującą stronę. To szybka weryfikacja. Upewnienie się, że strona ma poprawną mapę XML i robots.txt, jest łatwe i warto je zrobić, zwłaszcza przy nowej stronie, samodzielnie lub z pomocą.

Kontrolę zrobisz bez dotykania kodu, dwoma torami. Tor samoobsługowy to Google Search Console, które omawialiśmy osobno: sekcja map pokaże, czy mapa jest zgłoszona i odczytana, a raport indeksowania zdradzi, czy coś nie zostało odcięte. Tor delegacji to wspomniany mail do wykonawcy z prośbą o potwierdzenie obu rzeczy. Oba tory wolno łączyć: panel do rutyny, mail przy każdej zmianie wykonanej cudzymi rękami. Momenty, w których taka kontrola jest obowiązkowa:

• po uruchomieniu nowej strony, zanim zaczniesz oceniać jej widoczność;
• po przebudowie albo przeniesieniu witryny na inny system;
• przy podejrzanym spadku ruchu z wyszukiwarki bez innej przyczyny;
• przy przejęciu strony po poprzednim wykonawcy, którego ustawień nikt nie zna.

Dobra odpowiedź na taką kontrolę brzmi konkretnie: mapa zgłoszona i obejmuje podstrony, robots niczego publicznego nie zatrzymuje. Ogólnikowe wszystko gra, rzucone bez zaglądania w panel, powinno budzić apetyt na dopytanie. Sama kontrola zajmuje mniej czasu niż zaparzenie kawy, a wyklucza najdroższą klasę usterek, więc proporcja kosztu do ochrony jest wyjątkowo korzystna. Wynik zanotuj jednym zdaniem, żeby przy kolejnej kontroli mieć punkt odniesienia.

Najczęstsze błędy i pułapki

Krótko: Najgroźniejszym błędem jest przypadkowe zablokowanie ważnych stron czy całej witryny w pliku robots.txt, co czyni je niewidocznymi w Google. Inne to brak mapy XML przy większej stronie czy nieaktualna mapa. Te błędy potrafią poważnie zaszkodzić widoczności, więc warto o nich wiedzieć i upewnić się, że nie dotyczą Twojej strony, zwłaszcza po jej zmianach.

Czego pilnować najbardziej, podpowiada asymetria z porównania: groźne pomyłki mieszkają w pliku poleceń. Klasyczny scenariusz wygląda tak: stronę buduje się za kotarą, celowo zasłoniętą przed robotami, żeby Google nie oglądał wersji roboczej, a przy premierze kotarę trzeba zdjąć i właśnie o tym kroku najłatwiej zapomnieć. Witryna wygląda potem normalnie, ludzie wchodzą bez przeszkód, tylko z wyszukiwarki wieje cisza. Drugi wariant tej samej pomyłki przychodzi przy przebudowach: kopia robocza nowej wersji ma własną kotarę, a podczas przenoszenia plików kotara wjeżdża na wersję właściwą razem z resztą.

Szczegóły tego i pokrewnych potknięć zebrało ostrzeżenie obok, a wszystkie łączy jedno: psują widoczność bezgłośnie, co stawia je wysoko na liście najczęstszych błędów SEO. Na szczęście wykrycie jest proste i mieści się w kontroli z poprzedniej sekcji. Mniejsze potknięcia, jak brak czy zestarzenie się wykazu stron, kosztują tylko tempo odkrywania, więc plasują się o klasę niżej. Jeden zapomniany wiersz pliku potrafi wyłączyć firmę z wyników.

Co właściciel naprawdę powinien wiedzieć

Krótko: Właściciel małej firmy powinien wiedzieć, że mapa XML i robots.txt to techniczne elementy pomagające Google odczytać stronę, że zwykle zajmuje się nimi system czy wykonawca i że najważniejsze jest, by były poprawne, zwłaszcza by robots.txt nie blokował niczego ważnego. Tyle wystarczy, by zadbać o te podstawy bez paniki, więc warto rozumieć ich rolę i dopilnować poprawności, resztę zostawiając technice.

Na koniec zbierzmy temat do rozmiaru, który mieści się w głowie. Właścicielowi potrzebne są trzy zdania: oba pliki tłumaczą Twoją witrynę robotom; tworzy je i utrzymuje technika, nie Ty; pilnujesz jedynie tego, by nic przeznaczonego dla klientów nie zostało odcięte od Google.

To ten sam układ co z gaśnicą w lokalu: wiesz, gdzie wisi i że ma być sprawna, a przeglądem zajmuje się serwis. Wiedza o roli zostaje u Ciebie, znajomość składni u fachowca, i obie strony robią swoje. Ten podział nie jest prowizorką, tylko stanem docelowym: nikt nie oczekuje od właściciela zakładu znajomości plików serwera, podobnie jak od programisty znajomości Twoich klientów.

Jeśli po tej lekturze zostały Ci dwa pytania do wykonawcy i nawyk kontroli po każdej większej zmianie, temat jest załatwiony: techniczne podstawy przestają być źródłem niepokoju, a stają się odhaczoną pozycją. Od tej pory hasła w rodzaju mapy czy robotów w komunikatach narzędzi przestają brzmieć obco, bo wiesz, do której szuflady je włożyć, a cała reszta szczegółów, od składni po formaty, ma prawo pozostać Ci na zawsze obca bez żadnej szkody dla widoczności. Rozumiesz rolę, pilnujesz poprawności, składnię zostawiasz fachowcom.

Najważniejsze wnioski

• To techniczne elementy pomagające Google odczytać stronę - mapa XML to lista Twoich stron dla wyszukiwarki, a robots.txt to instrukcje mówiące robotom, gdzie mogą wchodzić.
• Mapa pokazuje, robots.txt kieruje - mapa XML pomaga Google odkryć i zaindeksować wszystkie strony, a robots.txt kieruje tym, co roboty przeglądają, więc pełnią różne, uzupełniające się role.
• Zwykle zajmuje się tym system lub wykonawca - mała firma rzadko musi tworzyć te pliki ręcznie, bo nowoczesne strony generują je automatycznie, a właścicielowi wystarczy świadomość.
• Najważniejsza jest poprawność - zwłaszcza by robots.txt nie blokował przypadkiem ważnych stron czy całej witryny, bo to najgroźniejsza pułapka czyniąca stronę niewidoczną.
• Warto sprawdzić, że wszystko gra - prosto przez Google Search Console lub prosząc osobę obsługującą stronę, zwłaszcza po uruchomieniu nowej strony czy większych zmianach.

U nas mała firma ma techniczne podstawy zadbane

U nas mała firma nie musi martwić się o techniczne podstawy: budując stronę, dbamy o poprawną mapę strony XML obejmującą ważne podstrony oraz właściwie ustawiony plik robots.txt, który nie blokuje niczego, co ma być widoczne w Google, a także o poprawne indeksowanie. Wszystko w jednej stałej cenie 199 zł miesięcznie, tak byś nie musiał być technikiem, by Twoja strona była poprawnie widziana przez wyszukiwarkę. Opowiedz nam w kilku krokach o swojej firmie, a pokażemy, jak mogłaby zdobywać klientów z wyszukiwarki. Bez zobowiązań.

Zbudujcie to za mnie

Najczęściej zadawane pytania

Czym jest mapa strony XML?

To lista adresów wszystkich ważnych podstron Twojej witryny, zapisana w specjalnym formacie zwanym XML, zrozumiałym dla wyszukiwarek. Najprościej wyobrazić ją sobie jako spis treści Twojej strony przygotowany dla Google: dokument mówiący wyszukiwarce, jakie podstrony składają się na witrynę i gdzie się znajdują. Ważne, że nie jest to mapa dla odwiedzających ludzi, lecz techniczny plik dla wyszukiwarek, którego zwykli użytkownicy nie oglądają. Pomaga Google odnaleźć i poznać wszystkie Twoje strony, co wspiera ich indeksowanie. Dla nowoczesnych stron jest zwykle generowana automatycznie przez system i aktualizowana przy dodawaniu nowych podstron, więc rzadko trzeba zajmować się nią ręcznie.

Po co jest plik robots.txt?

Plik robots.txt zawiera instrukcje dla robotów wyszukiwarek, mówiące im, których części strony mogą przeglądać, a których nie powinny. Pozwala kierować tym, co automaty przeglądają, na przykład prosząc, by nie zaglądały do nieistotnych czy technicznych obszarów, oraz zwyczajowo wskazuje robotom, gdzie znajduje się mapa strony XML. Nie blokuje dostępu ludziom ani niczego przed nimi nie ukrywa, lecz dotyczy tylko robotów wyszukiwarek. Dla typowej małej firmy pełni rolę porządkową, a jego poprawne, domyślne ustawienie zwykle wystarcza. Ważne, by był poprawny, bo źle ustawiony może przypadkiem zablokować ważne strony przed Google, czyniąc je niewidocznymi.

Czym różni się mapa XML od robots.txt?

To dwie różne rzeczy, choć obie pomagają wyszukiwarce odczytać stronę. Mapa strony XML to lista Twoich stron, która pokazuje wyszukiwarce, jakie podstrony masz i gdzie się znajdują, więc niejako zaprasza i informuje, pomagając Google je odkryć. Plik robots.txt to instrukcje dla robotów, mówiące, których części strony mogą lub nie powinny przeglądać, więc kieruje i ogranicza to, co automaty oglądają. Najprościej: mapa XML pokazuje i zaprasza, wymieniając Twoje strony, a robots.txt kieruje i ogranicza, wskazując, gdzie roboty mają wstęp. Oba współpracują, bo robots.txt zwykle wskazuje, gdzie znajduje się mapa XML, więc razem pomagają wyszukiwarce sprawnie poznać stronę.

Czy muszę sam tworzyć mapę XML i robots.txt?

Zwykle nie. Nowoczesne strony, zbudowane na popularnych systemach czy platformach, zwykle automatycznie generują mapę strony XML i mają poprawnie ustawiony plik robots.txt, a mapa często aktualizuje się sama przy dodawaniu nowych podstron. Jeśli stronę tworzy wykonawca czy agencja, to do nich należy zadbanie o poprawność tych elementów. Nie musisz więc być technikiem ani uczyć się ich tworzenia. Twoja rola sprowadza się do rozumienia, czym są i po co służą, oraz do upewnienia się, że są poprawne, czyli że strona ma mapę XML, a robots.txt nie blokuje niczego ważnego, co możesz sprawdzić prostymi sposobami lub zlecić osobie obsługującej stronę.

Co się stanie, jeśli robots.txt jest źle ustawiony?

To może poważnie zaszkodzić widoczności. Jeśli robots.txt błędnie instruuje roboty wyszukiwarek, by nie przeglądały ważnych części strony albo, w najgorszym przypadku, całej witryny, strona może nie pojawić się w wynikach Google, stając się praktycznie niewidoczna. Bywa to skutkiem błędu przy tworzeniu strony, pozostałości po wersji roboczej, na której celowo blokowano roboty przed publikacją, czy nieostrożnej zmiany. To poważny problem, bo strona może być świetna, a mimo to niewidoczna z powodu jednego błędnego ustawienia. Dlatego po uruchomieniu nowej strony czy większych zmianach warto upewnić się, że robots.txt nie blokuje niczego, co powinno być widoczne, samodzielnie lub z pomocą osoby technicznej.

O autorze

Alex - founder i creative director Flowtellect. Flowtellect to polska agencja web design, która tworzy strony internetowe w abonamencie dla małych firm w całej Polsce. Alex prowadzi agencję od początku istnienia firmy i osobiście odpowiada za każdy projekt. Poznaj nas lub napisz bezpośrednio.