TeadmoreBot: Otsirobot ja veebihalduri teave

Jälgimine 0 küpsist Ei salvesta jälgimisküpsiseid

Viisakusviivitus ≥ 1.5 sekundit Kaitse serverikoormuse vastu

Taaskülastus Vaikimisi 30 päeva Kohandatav 1 kuni 365 päeva

AI liides Kratiliides (MCP) Ametlike masinliideste viisakas tuvastus

1. Päritolu ja sõltumatus

Teadmore on Eestis arendatud ja Euroopa Liidu andmeruumis majutatud sõltumatu otsingumootor. Me ei sõltu USA suurtehnoloogia taristust ega müü ega vahenda kasutajate isikuandmeid, otsinguajalugu ega profiile kolmandatele osapooltele.

TeadmoreBot indekseerib avalikku veebi, alustades Eesti ja Euroopa andmeruumist ning laienedes järk-järgult rahvusvahelisse veebiruumi, järgides rangelt Euroopa Liidu andmekaitsereegleid (GDPR), digiteenuste õigusakti (DSA) ja autoriõiguse direktiivi (EL 2019/790 artikkel 4).

2. Privaatsus disaini kaudu (Privacy by Design)

Kergekaaluline päring (< 25 KB): Roboti päringud ei laadi alla mahukaid meediafaile ega videoressursse ilma vajaduseta.
JavaScripti ja jälgijate mittekäivitamine: TeadmoreBot ei käivita brauseri skripte, vältides teie analüütika või reklaamiloendurite kunstlikku moonutamist.
Null jälgimist: Meie indekseerimispäringud ei sisalda kasutajate otsisõnu ega identifikaatoreid. Serveri logidesse ei jää kunagi isikuandmeid.

3. Tehniline identiteet (User-Agent)

TeadmoreBot tuvastab end HTTP päringu päises alati korrektse nime ja ametliku teabelehe viitega:

HTTP User-Agent päis

TeadmoreBot/0.6.16 (+https://teadmore.ee/bot; bot@teadmore.ee)

4. Ametlik Kratiliides (Model Context Protocol / MCP)

TeadmoreBot toetab ametlikke masinliideseid (MCP servereid ja llms.txt faile). Kui teie lehel on /llms.txt või MCP manifest, loeb robot ainult neid ametlikult määratletud andmeid ega koorma lehe HTML-i.

Näide: Domeeni llms.txt viide

User-agent: *
Allow: /api/mcp

5. Külastussageduse juhtimine ja veebihalduri reeglid

TeadmoreBot pakub veebihalduritele täielikku kontrolli taaskülastuse sageduse üle. Saate valida endale sobivaima meetodi:

★ SOOVITATUD JA LIHTSAIM

Meetod A: HTML <meta> tähised

Lisage lehe päisesse (<head>) meta-tähis. TeadmoreBot toetab nii traditsioonilist veebitava kui ka Teadmore-spetsiifilist direktiivi.

1. Traditsiooniline veebitava (nt 30 päeva):

HTML Päis

<meta name="revisit-after" content="30 days" />

2. Teadmore-spetsiifiline tähis (nt 180 päeva):

HTML Päis

<meta name="teadmore-recrawl" content="180d" />

Meetod B: robots.txt direktiivid

Saate määrata taaskülastuse intervalli ja päringutevahelise viivituse otse oma veebisaidi robots.txt failis:

Recrawl-interval: Minimaalne päevade arv enne lehe uuesti külastamist.
Crawl-delay: Päringutevaheline paus sekundites teie serveri säästmiseks.

robots.txt

User-agent: TeadmoreBot
Recrawl-interval: 60d
Crawl-delay: 2.0
Disallow: /admin/
Disallow: /privaatne/

★ TÄIELIKULT AUTOMAATNE

Meetod C: HTTP 304 Not Modified Revalidatsioon

TeadmoreBot saadab korduvkülastusel alati päised If-None-Match (ETag) ja If-Modified-Since. Kui sisu pole muutunud, tagastab teie veebiserver staatuse 304 Not Modified ilma lehe sisu uuesti saatmata, säästes 100% andmemahtu.

HTTP Päised

GET /artikkel HTTP/1.1
Host: teadomeen.ee
If-None-Match: "33a64df551425fcc55e4d42a148795d9f25f89d4"
If-Modified-Since: Tue, 01 Sep 2026 12:00:00 GMT

Meetod D: Automaatne viisakusintervall

Kui veebihaldur pole ühtegi tähist määranud, rakendab TeadmoreBot automaatset ja säästlikku baasgraafikut: taaskülastuse intervall on vaikimisi hetkel 30 päeva (veebihalduri poolt vabalt kohandatav vahemikus 1 kuni 365 päeva), hoides serveri koormuse minimaalsena.

6. Roboti täielik piiramine või blokeerimine

Kui te ei soovi, et TeadmoreBot teie veebisaiti indekseeriks, austame teie valikut täielikult ja koheselt. Lisage oma domeeni robots.txt faili järgmine direktiiv: