Semrush bot, Majestic robot, AhrefsBot, oBot, crawler a ti další..
Semrus bot, majestic robot.. Nejrozšířenější využití botů je při procházení webových stránek, kdy skript nebo aplikace automaticky získává, analyzuje a ukládá informace z webových serverů. Roboti generují víc než polovinu veškerého webového provozu. To v případěch neřízeného nájezdů může pro provozovatele lokálního webu představovat nadměrnou zátěž.