グーグルはどうやって検索サイト集をデータ倉庫に格納してるのか教えてくれませんか？

ウェブクローラーって何？
あのツールバーって奴で表示したサイトも検索結果格納倉庫にしまわれるの？