Problem z plikiem robots.txt

[krzysiek23b]

Coś mi blokuje odczyt przez wyszukiwarki strony głównej(tytuł i opis). Wyświetla się komunikat: "Opis tego wyniku jest niedostępny. Przyczyna: plik robots.txt tej witryny". A do tytułu strony jest dopisany adres hype.pl. Witryna to: site:najlepszybank.net. Czy to może być jakiś wirus czy tylko plik robots.txt?. Dodam, że mam u siebie robots.txt.dist, ale tak jest w każdej instalacji.

[adam.lachut]

Spróbuj dodać robots.txt (zmień nazwę robots.txt.dist na robots.txt) i sprawdź testerem w Google Search Console (Indeksowanie / Tester pliku robots.txt).
Z poziomu GSC pobierz stronę główna i prześlij do indeksu.

Zrobiłbym jeszcze porządek z konfiguracją serwera (pod adresem z https:// masz zupełnie inna witrynę)

A.

[krzysiek23b]

Zmieniłem na robots.txt, w GSC jest komunikat, że nie można znaleźć pliku robots.txt. Co do tej strony z https to nie wiem o co chodzi mam tak na każdej domenie na tym serwerze, wirus?

[adam.lachut]

Plik robots.txt teraz jest dostępny, więc odczekaj i spróbuj pobrać ponownie - google aktualizuje informacje o robots.txt z opóźnieniem.

Inna strona pod https:// to raczej konfiguracja (lub błąd konfiguracji) serwera - prześlij zgłoszenie.

A.

[krzysiek23b]

Zgłosiłem, odpisali mi: "sprawdziliśmy ustawienie serwera i wygląda na to, że gdzieś w kodzie Pana strony/stron musi być przekierowanie na adres https://weglosmyk.pl/ . Jeżeli wcześniej się to nie pojawiała jest duża szansa, że zostało to wgrane przez nieaktualizowane skrypty Pana stron.:

[adam.lachut]

Support odpisał że to przekierowanie? :D
Możliwe że czas zmienić hosting.

Wybierz dowolną, nie Twoją domenę z listy domen na tym IP (http://viewdns.info/reverseip/?host=37.59.16.222&t=1) i odeślij do supportu z przedrostkiem https:// - zobaczymy co odpiszą :)

robots.txt - poczekajmy na aktualizację

A.

[krzysiek23b]

Tak też zrobiłem, napisali, że rozwiązują problem ;)

[terra]

To może być przekierowanie, ale nie w pliku, dlatego sprawdź swoje wpisy DNS na hostingu, zwłaszcza

Pola wskazania
A AAAA NS CNAME

Pola rozszerzone
TXT NAPTR SRV LOC SSHFP TLSA

jeśli nigdy tam nic nie robiłeś to oni nabagnili.

Dla spokoju sprawdź swój .htaccess i przekierowania 301, czy nie masz tam wpisów z przekierowaniami 301, których nie wprowadzałeś.

Sprawdź uprawnienia, tak jak w tym poście http://forum.joomla.pl/showthread.php?84567-Problem-z-logowaniem-do-panelu-administracyjnego&p=373677#post373677

robots.txt powinien mieć 604

[adam.lachut]

To może być przekierowanie

To nie jest przekierowanie

[d4nt3]

zapewne wina dostawcy

[krzysiek23b]

Przekierowanie z https już naprawili. Wyszukiwarka nadal nie czyta tytułu i opisu strony. Co do uprawnień to robots.txt miał u mnie 644, a configuration.php 444, zmienilem na 604 i 744.

[adam.lachut]

Przekierowanie z https już naprawili.
Mnie cały czas pod https:// wyświetla zawartość innego serwisu (tego samego dla wszystkich domen na tym IP)


Co do uprawnień to robots.txt miał u mnie 644, a configuration.php 444, zmienilem na 604 i 744.
Uprawnienia do pliku nie miały tutaj znaczenia (plik jest normalnie dostępny), poprzednie były poprawne, a robienie configuration.php wykonywalnym i blokowanie dostępu dla grupy dla robots.txt jest, delikatnie mówiąc, dyskusyjne. Wróciłbym do poprzednich uprawnień.

Jaki wynik testu pliku robots.txt z poziomy Google Search Console?
Jak wygląda efekt 'pobierz i zrenderuj' dla strony głównej?

A.

[chuck]

Firma która korzysta z cudzych adresów NS jest niegodna zaufania.
Hosting masz w o12[.]pl a adresy NS to
ns1[.]prothost[.]com

W pliku robots masz
sitemap:weglosmyk[.]pl/sitemap.xml .

[adam.lachut]

W pliku robots masz
sitemap:weglosmyk[.]pl/sitemap.xml

Tu właśnie jest problem: podałeś zawartość robots.txt dostępnego pod https://, a to zupełnie inny plik niż pod http:// - zobacz wyżej: dla każdej domeny podpiętej pod to IP przy http:// wyświetla się poprawna zawartość, a przy https:// dla każdej domeny wyświetla się zawartość weglosmyk.

Ewidentny problem z hostingiem, ale jak widać od dłuższego czasu nie do rozwiązania przez support.

A.

[chuck]

Masz dostęp do katalogu private_html ?
Tam jest właśnie strona w https