Crawling lässt sich zwar anfragen, die exakte Angabe, wie oft, lang und umfänglich das
tatsächlich geschieht, ist dabei aber nicht exakt einzusehen. Als grobe Faustregel kann
allgemein ein mehrfaches Crawling pro Tag angenommen werden.