Rosenstand skærer det her ud i flot pap for os hvad forskellen er på at blokere for crawl med robots.txt og at blokere for indeksering med robots meta tag. Læs videre... robots.txt      robots meta      noindex      nofollow