CSV.LV robot

CSV.LV robot - tas ir mūsu robota vārds, kurš izpilda interneta veikalu skenēšanas procesu lai salasīt piedāvāto produktu un pakalpojumu informāciju.

CSV.LV robot - uz doto brīdi indeksē tikai tās mājaslapas, kuriem ir saistīta ar Latviju biznesa aktivitāte, vai kuriem ir iespēja piegādāt preces uz Latviju.

CSV.LV robot - nokopē informāciju un nearhivē kontentu no jūsu mājaslapas.

Iestājumi:

CSV.LV robot kā visi citi meklēšanas roboti pakļaujas tikai un vienīgi robots.txt direktīvai.

Jūs varat izmantot šo direktīvu lai mainīt robota iestājumus jūsu mājaslapas apstrādē.

Piemēri:

Lai pilnīgi atļaut mājaslapu indeksēšanai, norādiet robots.txt:

User-Agent: CSV
Allow: /

Pēc definīcijas, skenēšanas intervāls ir 2 sekundes. Lai mainīt šo iestājumu, norādiet:

User-Agent: CSV
crawl-delay: 10

Lai aizliegt robotam indeksēt konkrētu lapu vai lapu sadaļu jūsu mājaslapā, norādiet:

User-Agent: CSV
Disallow: [lapu regulāra izteiksme, kurus ir nepieciešams aizliegt]

Jautājumu gadījumā - rakstiet mums uz epastu - support@csv.lv, norādiet tematā “CSV bot”. Un vēstulē - jūsu mājaslapas adresi.