Soubor robots.txt a blokování AI

Přidat Root.cz - Zprávičky do oblíbených

Doporučujeme: Nastavte si sledování zajímavých článků a podcastů podle toho, co Vás zajímá. Nastavit

Datum publikování: 19. 2. 2024

Soubor robots.txt (Robots Exclusion Protocol) navrhl Martijn Koster v únoru 1994, tedy před 30 lety. Původně měl za úkol bránit robotům, co procházeli a indexovali internet pro vyhledávače jako byla AltaVista, Lycos či WebCrawler. Důvodem tenkrát bylo většinou slabé internetové spojení, které mohlo mnoho robotů, nebo špatně napsaný robot zahltit.

Přečíst celý článek na Root.cz - Zprávičky

Upoutávka na článek je uveřejněna se svolením Root.cz - Zprávičky. Celý článek si můžete přečíst zde.

Související témata

Kamenný soubor Soubor lidových staveb Vysočina 1994 Vyhledávače úkol Bránit slabé robot spojení 30 pod 30

Doporučené články

Soubor robots.txt a blokování AI (Root.cz - Zprávičky, 19. 2. 2024)
Google navrhuje změnit soubory robot.txt kvůli AI (Root.cz - Zprávičky, 10. 7. 2023)
Google vydal návod, jak svoji stránku vyjmout ze zdrojů pro generativní AI (Root.cz - Zprávičky, 2. 10. 2023)
Nový standard pomůže nahlásit děravé weby. Na serveru by neměl chybět soubor security.txt (Živě.cz, 28. 4. 2022)
Ted Notepad a The Guide (Blog iDNES.cz, 3. 1. 2022)
Nové PowerToys převedou obrázky na text. Z úryvku ve schránce vám rovnou vyrobí soubor (Živě.cz, 10. 11. 2024)
Love, Death & Robots: Třetí svazek povídek se představí v květnu (Edna.cz, 19. 4. 2022)
Formát souboru security.txt má vlastní standard RFC (Root.cz - Zprávičky, 28. 4. 2022)
Love, Death & Robots: Love, Death & Robots se v květnu vrátí s druhou sérií a má jistou i třetí (Edna.cz, 20. 4. 2021)

Nejnovější články

CZ.NIC představil router Turris Omnia NG, má 10GbE porty a třípásmovou Wi-Fi (4. 10. 2025)
DNES
Začala konference LinuxDays, sledujte živé přenosy (4. 10. 2025)
DNES
Napadení GitLabu Red Hatu způsobilo únik citlivých informací (3. 10. 2025)
Dražší paměti DDR4 zdražují Raspberry Pi (3. 10. 2025)
Konference LinuxDays 2025 proběhne už tento víkend (3. 10. 2025)

Zobrazit poslední články na Root.cz - Zprávičky