Megjelent: 2024. november 11. / Frissítve: 2024. november 11. – Szerző: Konrad Wolfenstein

Veszélyben van a keresőmotorokban elért helyezése? Nincs több Google-rangsorolás, pedig látszólag minden rendben van? – Kép: Xpert.Digital
Racionális megoldás a keresőmotorok indexelésének problémájára - mi állhat mögötte ezúttal?
Az elmúlt napokban aggasztó dologra lettem figyelmes: a legújabb cikkeimet már nem indexelték a Google Hírekben, és a Google Discover forgalma is folyamatosan csökkent. Természetesen az ilyen fejlemények nem hagynak közömbösen senkit. Különböző vad találgatások cikáztak a fejemben, de úgy döntöttem, félreteszem őket, és racionálisan közelítem meg a problémát.
Amikor manuálisan beküldtem az oldalaimat a Google-nek, azok azonnal indexelődtek és megjelentek. Ha azonban vártam, semmi sem történt. Ezt a jelenséget két napon keresztül figyeltem meg. Ideje volt tehát alaposan kivizsgálni az okát.
1. lépés: A legutóbbi változtatások áttekintése
Először is megkérdeztem magamtól: Mi változott utoljára a weboldalon? A legutóbbi változtatások azonosítása elengedhetetlen a lehetséges hibaforrások szűkítéséhez. Az én esetemben nemrégiben módosítottam a gyorsítótárazási rendszert.
2. lépés: Rejtett hibák vagy hibás érvelés azonosítása
A gyorsítótár-átalakításnak lehetnek nem kívánt mellékhatásai. Vannak-e rejtett hibák vagy hiányosságok az érvelésben? Elkezdtem áttekinteni az új beállításokat, és keresni a lehetséges ütközéseket.
3. lépés: Keresse meg az okot
Alapos elemzés után felfedeztem a bűnöst: a biztonsági konfigurációmban lévő új botdefiníció elvégezte a munkáját – sajnos túl jól. Manapság számtalan bot barangol az interneten, és a szerver terhelésének csökkentése érdekében a felesleges botokat gyakran blokkolják. A Googlebotot azonban tévesen „felesleges botként” kategorizálták. Egy apró figyelmetlenség súlyos következményekkel.
Megjegyzések a Microsoft Bing Webmestereszközökből
A gyanúmat megerősítették a Bing Webmaster Tools jelentései:
- „Néhány nemrég közzétett fontos oldalad nem az IndexNow-n keresztül lett beküldve. Tudd meg, miért fontos, hogy az IndexNow-n keresztül küldd be őket.”
- Néhány fontos új oldalad nem szerepel az oldaltérképeiden.
A Google Search Console azt is jelezte, hogy tartalom nélküli oldalakat indexelnek. Ezek a jelzések egyértelműen azt mutatták, hogy a keresőmotoroknak gondjaik voltak a tartalmaim elérésével.
következtetés
A felismerés kijózanító volt: olyan oldalakat látok, amelyeket a Google nem. Ahhoz, hogy a keresőmotorok indexeljék az oldalaimat, a robotjaiknak korlátlan hozzáférésre van szükségük. Ha a Googlebot blokkolva van, a tartalmam láthatatlan marad.
Hogyan ellenőrizheted, hogy mit lát a Googlebot?
Annak érdekében, hogy a Googlebot megfelelően feltérképezze a weboldalamat, szerettem volna a saját szemszögéből megtekinteni az oldalakat. Több módszer is létezik egy weboldal meglátogatására a Googlebothoz hasonlóan.
1. A Google Chrome fejlesztői eszközeinek használata
Egy egyszerű módszer a Google Chrome fejlesztői eszközeinek használata:
- A fejlesztői eszközök megnyitásához: Nyomja meg a `Ctrl + Shift + I` (Windows) vagy a `Cmd + Shift + I` (Mac) billentyűkombinációt.
- Váltson a Hálózat fülre: Itt láthatja az összes hálózati tevékenységet.
- A felhasználói ügynök beállításához: Kattintson a jobb felső sarokban található három pontra, válassza a „További eszközök”, majd a „Hálózati feltételek” lehetőséget. Kapcsolja ki a „Felhasználói ügynök automatikus kiválasztása” opciót, és válassza a „Googlebot” lehetőséget a listából.
- Oldal újratöltése: Az oldal újratöltése úgy jeleníti meg az oldalt, ahogyan a Googlebot látja.
Ez a módszer lehetővé teszi a potenciális renderelési problémák vagy a blokkolt erőforrások azonosítását.
2. Felhasználói ügynök kapcsoló használata
Alternatív megoldásként használhat böngészőbővítményt, például a „User-Agent Switcher”-t:
- A bővítmény telepítéséhez: Keresse meg a „User-Agent Switcher” kifejezést a Chrome Webáruházban, és telepítse.
- A Googlebot kiválasztása felhasználói ügynökként: A telepítés után kiválaszthatja a kívánt felhasználói ügynököt.
- A weboldal meglátogatása: Az oldal most a Googlebot szemszögéből jelenik meg.
Ez különösen hasznos gyors tesztekhez, és amikor gyakran kell váltani különböző felhasználói ügynökök között.
3. A Screaming Frog SEO Spider használata
Részletesebb elemzésekhez a „Screaming Frog SEO Spider” megfelelő:
- Felhasználói ügynök beállítása: Lépjen a „Konfiguráció > Felhasználói ügynök” menüpontra, és válassza a Googlebot lehetőséget.
- A feltérképezési folyamat kezdete: Az eszköz átkutatja a weboldalt, és megmutatja, hogyan látja azt a Googlebot.
- Az eredmények elemzése: Azonosítsa a lehetséges feltérképezési problémákat vagy a blokkolt erőforrásokat.
Ez az eszköz ideális nagy weboldalakhoz és részletes SEO auditokhoz.
4. A Google Search Console használata
A Google Search Console értékes információkat is kínál:
- URL-ellenőrzés: Írja be a kívánt URL-címet, és indítsa el az élő tesztet.
- Eredmények elemzése: Láthatja, hogy az oldal indexelve van-e, és hogy vannak-e problémák a feltérképezésével.
- Fetch as Google does: Ezzel a funkcióval megtekintheti, hogyan jeleníti meg a Googlebot az oldalt.
Ez segít azonosítani azokat a konkrét problémákat, amelyek megakadályozhatják a botot az oldal megfelelő feltérképezésében.
Megoldás a problémára
Ezekkel az eszközökkel meg tudtam erősíteni, hogy a Googlebot valóban blokkolva van. A probléma megoldása érdekében a következő lépéseket tettem:
1. A botdefiníciók módosítása
Frissítettem a biztonsági konfigurációt, így a Googlebot és más fontos keresőrobotok már nincsenek blokkolva.
2. Ellenőrizze a robots.txt fájlt
Meggyőződtem róla, hogy a fájl nem tartalmaz olyan utasításokat, amelyek korlátoznák a hozzáférést.
3. Az oldaltérképek frissítése
A webhelytérképek frissítésre kerültek, és beküldésre kerültek a Webmester Eszközökbe.
4. Monitoring
A következő napokban figyelemmel kísértem az indexelést és a forgalmat, hogy megbizonyosodjak arról, hogy minden ismét zökkenőmentesen működik.
Megelőző intézkedések a jövőre nézve
Hogy a jövőben elkerüljem az ehhez hasonló problémákat, néhány megoldást javasoltam:
- A biztonsági konfigurációk rendszeres felülvizsgálata: Minden módosítás után ellenőrizni kell a weboldal működésére gyakorolt hatását.
- Folyamatos monitorozás: Az olyan eszközök, mint a Google Search Console, segítenek a problémák korai azonosításában.
- A változtatások egyértelmű dokumentációja: A weboldalon végrehajtott összes változtatást dokumentálni kell, hogy hibák esetén gyorsabban lehessen reagálni.
- Képzés: A keresőmotorok és robotjaik működésének jobb megértése segít elkerülni a hibás konfigurációkat.
Az ebből származó betekintés
Jobban kellett volna tudnom és körültekintőbbnek lennem a rejtett információk feldolgozásakor. De a csőlátásom erőt vett. A problémát azonosítottam, megoldottam, helyreállítottam, és figyelmesebben fogom folytatni.
A technikai hibák jelentősen befolyásolhatják egy weboldal láthatóságát. Az én esetemben egy rosszul konfigurált botdefiníció miatt a Googlebot blokkolódott, így a tartalmam nem lett indexelve.
Felismerés: Még a kis változásoknak is lehetnek komoly következményei.
Szisztematikus hibaelhárítás és megfelelő eszközök használata révén sikerült azonosítanom és megoldanom a problémát. Alapvető fontosságú rendszeresen ellenőrizni, hogy a keresőmotorok hogyan érzékelik a webhelyedet.
Remélem, hogy tapasztalataim segítenek más webmestereknek elkerülni vagy gyorsabban megoldani a hasonló problémákat. A keresőmotorokban való láthatóság kulcsfontosságú egy weboldal sikeréhez, ezért a technikai állapotát mindig figyelemmel kell kísérni.
Alkalmas:

