Procházení slovníku podle počátečního písmene

• A | 
• B | 
• C | 
• D | 
• E | 
• F | 
• G | 
• H | 
• I | 
• J | 
• K | 
• L | 
• M | 
• N | 
• O | 
• P | 
• Q | 
• R | 
• S | 
• T | 
• U | 
• V | 
• W | 
• X | 
• Y | 
• Z

Crawler

Crawler neboli robot, ant, web bot, spider aj. je počítačový program, který automaticky prochází jednotlivé webové stránky a shromažďuje informace o jejich textovém obsahu a odkazech, které ukládá do databáze pro internetové vyhledávače.

Zpracování dat, které crawler nasbíral, se nazývá indexování. Každý fulltextový vyhledávač má svůj vlastní způsob nakládání s nasbíranými daty. Mezi základní principy úspěšného zaujetí robotů patří aktualizovaný obsah webu a kvalitní zpětné odkazy vedoucí na web.

Mezi web crawlery patří např. GoogleBot, SeznamBot, Yahoo! Slurp, BingBot, FAST Crawler aj.