Kereső robotok, A szegedimusorkalauz.hu használatának bemutatása - Search Console Súgó
Követés Mik azok a robotok? Egy SEO szakember, vagy webmester számára a robotok olyan eszközök, amelyeket a keresőmotorok a webhelyek és más online dokumentumok feltérképezésére, illetve indexelésére használnak.
A robots.txt használatának bemutatása
A robotok általában linkeken keresztül jutnak el egyik weboldalról a másikra, és így mozognak a webhelyek között is. A robotok feladata felkeresni, átkutatni feltérképezni a webhelyeket, megvizsgálni azok tartalmát, adatokat kereső robotok a webhelyekről, eldönteni, hogy miről szólnak a webhelyek, és hozzáadni ezeket az információkat a keresőmotor indexéhez.
A robotok tehát lényegében egyszerű, automatikus adatgyűjtő programok, amelyek rendszeresen átvizsgálják az internet webhelyeit, új, vagy frissült dokumentumokat és információkat keresve. Hogy működnek a robotok? Amikor webhelyeden egy új weboldalt hozol létre és nem blokkolod azt a robotok előlakkor a kereső robotok kétféleképpen találhatnak rá: az oldalra mutató hivatkozásokon keresztül, vagy egy webhelytérkép alapján.
Amikor olyan webhelytérképet töltesz fel a keresőmotor erre kialakított felületén, amelyben egy új weboldal is szerepel, akkor az a weboldal hozzáadódik a keresőrobot feltérképezendő tartalmainak listájához. Amikor webhelyedre egy robot érkezik akár egy linken keresztül, akár a kereső robotok webhelytérkép miattakkor az első feladata ellenőrizni, hogy van-e robots.
Az információk rendszerezése
A robots. Sajnos a nem tisztességes szándékkal küldött robotok figyelmen kívül hagyhatják ezt a fájlt, de ettől függetlenül ellenőrzik annak tartalmát. Ha egy részletes, teljes útmutatóra vagy kíváncsi a robots.
Hogyan értelmezik a weboldalakat a robotok? Ezen adatok alapján a keresőmotor, ami a robotot küldte megállapítja, hogy az oldal miről szól.
Számos szempont van, amik alapján a keresőmotorok megvizsgálják az oldal tartalmát, és mindegyik motor más algoritmust használ erre, amik más titkos szabályok alapján működnek.
A különböző keresőmotorok más és más adatokat tárolhatnak el a weboldalakról az alapján, hogy mit tartanak fontosnak azok értelmezéséhez és rangsorolásához.
Mi az a robots.txt fájl?
Miután ezek az információk belekerülnek a keresőindexbe, a keresőmotor képes lesz az új oldalt is megjeleníteni a keresőtalálatok között, ha annak tartalma kapcsolódik egy lekérdezéshez kereséshez.
Milyen gyakran látogatják meg a webhelyeket a keresőmotorok?
A keresőmotorok indexei változó időszakonként frissülnek. Amint egy webhely bekerül az indexbe, a keresőmotor robotjai rendszeresen visszalátogatnak majd rá, hogy ellenőrizzék, mi változott a webhelyen az utolsó látogatásuk óta milyen tartalmak frissültek, mik az új tartalmak, stb.
A Googlebot a Google Kereső robotja egy határérték alapján dönti el, hogy milyen gyakran térképezi fel a tartalmakat egy webhelyen. Erről egy bővebb magyarázatot ebben a cikkben olvashatsz.
Navigációs menü
A keresőrobotok csak a számukra látható információt képesek feltérképezni és értelmezni, úgymint az oldalak címeit, metaadatait, és egyéb szöveges tartalmát bizonyos kivételekkel. A robotok nem képesek értelmezni egy kép, videó, vagy más grafika kontextusát, ezért fontos, hogy kereső robotok ezeket leíró szöveges meta címkék ki legyenek töltve.
Ugyan ez a helyzet a különböző összetettebb elemekkel is, mint például flash animációkkal vagy a JavaScripttel. Erről a témáról szintén ebben az útmutatóban olvashatsz bővebben!
- Ne tiltson le forrásokat, ha nélkülük a Google feltérképező robotja nehezebben tudná értelmezni az oldalakat, mert a nehezebb értelmezés gyengébb eredményekhez vezethet.
- A szegedimusorkalauz.hu használatának bemutatása - Search Console Súgó
- A keresőrobot angolul: web crawler egy informatikai kifejezés.
Több vendéget szeretnél? Több ügyfelet szeretnél? Hatékonyabb marketinget szeretnél? Megalkotjuk tökéletes marketing stratégiádat,
