Mit látnak az AI motorok?

AI Crawler Többszintű mély crawler: teljes belső struktúra feltérképezése sitemap nélkül is

Mit látnak az AI motorok, és milyen mélységig?

Amikor egy AI (mint a GPT-4, Gemini vagy Claude) meglátogat egy oldalt, alapvetően kétféleképpen teszi azt:

  1. A nyers tartalom (Crawlerek): Ha az AI keresője (pl. GPTBot, Google-Extended) pásztázza az oldalt, ugyanazt látja, mint egy klasszikus SEO crawler: a HTML forráskódot, a szövegeket, a linkeket, a képek alt tageit és a strukturált adatokat (Schema.org). Nem “olvassák” a designt, csak a tiszta adatot és a szemantikát értelmezik.
  2. A kontextus hossza (Context Window): Az AI-k képesek egyszerre hatalmas mennyiségű szöveget feldolgozni (akár egy egész könyv tartalmát is). Ha az llms.txt fájlunk részletes, az AI másodpercek alatt megérti a teljes webshop vagy honlap felépítését, kategóriáit és fontosabb termékeit, tartalmait anélkül, hogy minden egyes aloldalt külön be kellene töltenie.

A probléma a webshopokkal: Egy nagyobb webshopnál az AI crawler nem fog több ezer termékoldalt egyesével végigjárni, mert az túl sok erőforrás. Ha az llms.txt-ben előre elkészített, strukturált összefoglalót kap, azzal óriási előnyre tehet szert az oldal.

Hogyan tehetjük részletesebbé az llms.txt-t?

A jelenlegi alap specifikáció (markdown formátum) mellé az ügyfelek igényei szerint az alábbi extra adatokat tudjuk automatikusan kinyerni és legenerálni a llms.txt generátor script segítségével:

1. Webshopok esetén (E-commerce specifikus adatok)

  • Fő kategóriák és márkák: Az AI azonnal láthatja a bolt struktúráját.
  • Kiemelt / Legnépszerűbb termékek: Linkekkel, árakkal és rövid leírással.
  • Vásárlási információk: Szállítási díjak, fizetési módok, garanciális feltételek (ezeket imádják az AI asszisztensek, mert a vásárlók pont ezeket kérdezik tőlük).

2. Technikai és SEO adatok (Amit a crawlerünk már lát)

  • Legfontosabb belső linkek (Sitemap helyett): A legértékesebb 10-20 aloldal listája.
  • Strukturált adatok (Schema.org) kivonata: Például a cég adatai, nyitvatartás, kapcsolat.
  • Keresőoptimalizált kulcsszavak listája: Hogy az AI tudja, milyen témákban releváns az adott honlap.

Hogyan készíthetünk llms.txt fájlt?

Ebben segít a Kompletta Webstúdió ingyenesen használható, szerkeszthető llms.txt generátora.

llms.txt generator

A működés menete:

  1. Bővített adatgyűjtés: A beírt URL elemzésekor a script nemcsak a SEO hibákat listázza ki a felületre, hanem a talált adatokból (pl. a legfontosabb belső linkekből, meta leírásokból) összeállít egy “AI-barát” szöveges blokkot.
  2. Interaktív llms.txt szerkesztő: A felhasználói felületen megjelenik egy szekció, ahol az automatikusan generált részletes llms.txt tartalom látható egy szövegmezőben (textarea).
  3. Manuális finomítás & letöltés: A létrehozott llms.txt szerkeszthető, beírható, hozzáadható bármi, vagy éppen törölhető is, amit feleslegesnek vélünk. (pl. “Cégünk 2010 óta foglalkozik egyedi játékok tervezésével…”), letölthető a kész llms.txt és/vagy llms-small.txt fájl, már csak fel kell tölteni a tárhelyre, a gyökér könyvtárba, ahol van az index.php, vagy index.html fájlt.

 

Kérdésed van? Hívj most!

Ingyenes tanácsadással segítjük a hozzánk forduló érdeklődőket.

+ 36 70 366-49-77

llms.txt generátor.

Árajánlat kérése