Közzétéve: 2024. november 11. / Frissítés: 2024. november 11. - Szerző: Konrad Wolfenstein
Racionálisan oldja meg a keresőmotor indexelési problémáját – ezúttal mi áll a háttérben?
Az elmúlt napokban valami aggasztót vettem észre: a legutóbbi cikkeimet már nem indexelték a Google Hírek, és a Google Discover forgalma folyamatosan csökkent. Természetesen az ilyen fejlemények nem hagynak közömbösen. Különféle vad feltételezések futottak át a fejemben, de úgy döntöttem, hogy félreteszem őket, és racionálisan közelítem meg a problémát.
Amikor manuálisan beküldtem az oldalaimat a Google-nak, azonnal indexelték és megjelenítették őket. Ha azonban vártam, nem történt semmi. Két nap alatt figyeltem meg ezt a jelenséget. Ideje volt tehát alaposan felkutatni az okot.
1. lépés: Tekintse át a legutóbbi módosításokat
Először is megkérdeztem magamtól: Mi volt az utolsó dolog, amit szerkesztettek a weboldalon? A lehetséges hibaforrások szűkítése érdekében elengedhetetlen a legutóbbi változások azonosítása. Az én esetemben nemrégiben átdolgoztam a gyorsítótárazási rendszert.
2. lépés: Azonosítsa a rejtett hibákat vagy a gondolkodási hibákat
A gyorsítótár-felújításnak nem kívánt mellékhatásai lehetnek. Vannak rejtett hibák vagy tévedések a gondolkodásban? Elkezdtem ellenőrizni az új beállításokat, és keresni az esetleges ütközéseket.
3. lépés: Keresse meg az okot
Részletes elemzés után rájöttem a tettesre: egy új botdefiníció a biztonsági konfigurációmban nagyszerű munkát végzett - sajnos túl jól. Manapság számtalan bot kóborol az interneten, és a szerverterhelés csökkentése érdekében gyakran blokkolják a felesleges botokat. A Googlebotot azonban tévedésből a „felesleges robotok” kategóriába sorolták. Kis mulasztás nagy következményekkel.
Megjegyzések a Microsoft Bing Webmestereszközöktől
A gyanúmat megerősítették a Bing Webmaster Tools jelentései:
- „A közelmúltban közzétett fontos oldalai közül néhányat nem az IndexNow-on keresztül küldtek be. Tudja meg, miért fontos az IndexNow-on keresztül benyújtani.”
- Néhány fontos új oldal nem szerepel a webhelytérképekben.”**
A Google Search Console arra is rámutatott, hogy a tartalom nélküli oldalakat indexelték. Ezek a nyomok egyértelműen azt mutatták, hogy a keresőmotorok nem tudtak hozzáférni a tartalmaimhoz.
következtetés
Kijózanító volt a felismerés: olyan oldalakat látok, amiket a Google nem lát. Ahhoz, hogy a keresőmotorok rögzíthessék az oldalaimat, a robotjaiknak akadálytalan hozzáféréssel kell rendelkezniük. Ha a Googlebot le van tiltva, a tartalmam láthatatlan marad.
Hogyan ellenőrizheti, hogy mit lát a Googlebot?
Annak biztosítása érdekében, hogy a Googlebot megfelelően tudja feltérképezni a webhelyemet, az oldalakat a saját szemszögéből akartam megtekinteni. Többféle módon is felkereshet egy webhelyet, ahogyan a Googlebot teszi.
1. A Google Chrome fejlesztői eszközeinek használata
Egy egyszerű módszer a Google Chrome fejlesztői eszközeinek használata:
- Nyissa meg a fejlesztői eszközöket: Nyomja meg a Ctrl + Shift + I (Windows) vagy a Cmd + Shift + I (Mac) billentyűkombinációt.
- Váltás a Hálózat lapra: Itt minden hálózati tevékenység megjelenik.
- Felhasználói ügynök testreszabása: Kattintson a három pontra a jobb felső sarokban, válassza a „További eszközök”, majd a „Hálózati feltételek” lehetőséget. Törölje a jelet a „Felhasználói ügynök automatikus kiválasztása” opcióból, és válassza ki a „Googlebot” lehetőséget a listából.
- Oldal újratöltése: Az újratöltés során az oldal úgy jelenik meg, ahogyan a Googlebot látja.
Ez a módszer lehetővé teszi a lehetséges renderelési problémák vagy blokkolt erőforrások azonosítását.
2. Felhasználói ügynök váltó használata
Alternatív megoldásként egy böngészőbővítmény, például a „User-Agent Switcher” is használható:
- A bővítmény telepítése: Keresse meg a User-Agent Switcher kifejezést a Chrome Internetes áruházban, és telepítse.
- A Googlebot kiválasztása felhasználói ügynökként: A telepítés után kiválaszthatja a kívánt felhasználói ügynököt.
- A webhely felkeresése: Az oldal most a Googlebot szemszögéből jelenik meg.
Ez különösen hasznos a gyors teszteléshez, és ha gyakran szeretne váltani a különböző felhasználói ügynökök között.
3. A Screaming Frog SEO Spider használata
A „Screaming Frog SEO Spider” alaposabb elemzésre alkalmas:
- Felhasználói ügynök testreszabása: Lépjen a Konfiguráció > Felhasználói ügynök elemre, és válassza a Googlebot lehetőséget.
- A feltérképezési folyamat indítása: Az eszköz feltérképezi a webhelyet, és megjeleníti, hogy a Googlebot hogyan látja azt.
- Eredmények elemzése: Azonosítsa a lehetséges feltérképezési problémákat vagy a blokkolt erőforrásokat.
Ez az eszköz ideális nagy webhelyekhez és részletes SEO auditokhoz.
4. A Google Search Console használata
A Google Search Console értékes betekintést is nyújt:
- URL-ellenőrzés: Írja be a kívánt URL-t, és indítsa el az élő tesztet.
- Eredmények elemzése: Megnézheti, hogy az oldal indexelve van-e, és vannak-e problémák a feltérképezéssel.
- Letöltés, mint a Google: Ezzel a funkcióval megtekintheti, hogyan jeleníti meg a Googlebot az oldalt.
Ez segít azonosítani azokat a konkrét problémákat, amelyek megakadályozhatják, hogy a bot megfelelően rögzítse az oldalt.
megoldást a problémára
Ezekkel az eszközökkel meg tudtam győződni arról, hogy a Googlebot valóban le van tiltva. A probléma megoldásához a következő lépéseket tettem:
1. A bot definíciók módosítása
Frissítettem a biztonsági konfigurációt, hogy többé ne blokkoljam a Googlebotot és más nagyobb keresőrobotokat.
2. A robots.txt ellenőrzése
Megbizonyosodtam arról, hogy a fájl nem tartalmaz hozzáférést korlátozó utasításokat.
3. Webhelytérkép frissítések
A webhelytérképeket megújítottuk, és elküldtük a Webmestereszközöknek.
4. Monitoring
A következő néhány napban figyelemmel kísértem az indexelést és a forgalmat, hogy megbizonyosodjak arról, hogy minden ismét zökkenőmentesen működik.
Megelőző intézkedések a jövőre nézve
Az ilyen problémák jövőbeni elkerülése érdekében tettem néhány határozatot:
- Rendszeresen ellenőrizze a biztonsági konfigurációkat: Minden változtatás után ellenőrizni kell a webhely működésére gyakorolt hatást.
- Folyamatos felügyelet: Az olyan eszközök, mint a Google Search Console, segít a problémák korai felismerésében.
- A változtatások egyértelmű dokumentálása: A weboldal minden módosítását dokumentálni kell, hogy hiba esetén gyorsabban tudjunk reagálni.
- Képzés: A keresőmotorok és robotjaik működésének jobb megértése segít elkerülni a hibás konfigurációkat.
A tudás belőle
Jobban kellett volna tudnom, és emlékeznem kellett volna óvatosnak a gyorsítótár szerkesztésekor. De a működési vakság itt keményen megütött. A probléma azonosítva, megoldva, kiegyenesedve és figyelmesebben folytatva.
A technikai hibák jelentős hatással lehetnek a weboldal láthatóságára. Az én esetemben egy rosszul konfigurált botdefiníció miatt a Googlebot blokkolva lett, ami leállította a tartalom indexelését.
A felismerés: Még a kis változtatásoknak is nagy következményei lehetnek.
A szisztematikus hibaelhárítás és a megfelelő eszközök használatával sikerült azonosítani és megoldani a problémát. Alapvető fontosságú, hogy rendszeresen ellenőrizze, hogy a keresőmotorok hogyan érzékelik webhelyét.
Remélem, hogy tapasztalataim segítenek más webmestereknek elkerülni a hasonló problémákat, vagy gyorsabban megoldani azokat. A keresőkben való láthatóság kulcsfontosságú egy weboldal sikeréhez, ezért a műszaki állapotot mindig szem előtt kell tartani.
Alkalmas: