検索エンジンがWebページの検索用のデータベースを作るために使う、インターネット上を巡回してWebページの情報を収集するプログラムのこと。
「検索ロボット」「クローラー」「スパイダー」と呼ばれる場合もある。
収集された情報は、検索エンジンのデータベースにインデックスされ、検索が要求された場合はデータベースの情報が検索結果ページとして表示される。そのため、各検索エンジンのロボットは定期的に巡回している。
metaタグやrobots.txtを利用して、検索ロボットのアクセスを制御したり、拒否することもできる。
Web担主催イベント 第2回Looker Studio活用講座～サッと欲しいデータが見える！GA4とサーチコンソールで効率レポート術
Web担人気記事ランキング 2024年の人気解説記事トップ30を発表！【年間記事ランキング】
デジマ4つのマイルール 優秀な人が多くて劣等感……転職した職場にどう馴染む？ パシフィコ横浜のWeb担当者に聞く「職場攻略の心得」
単発記事 Web担 Executive Forum vol.1【データ活用ってどうやってる？】
マーケティング・Web系セミナー情報まとめ 1月第1週・2週【12/30～1/10】 マーケティング、SNS、ECなど各社Webセミナー情報まとめ 19件
算数が苦手なマーケター向け「算数基礎講座」 【計算できる？】「-5の2乗」「(-5)の2乗」はいくつ？｜意外と忘れている指数の計算
先週のWeb担まとめ記事 Ｘ（旧Twitter）が「中身のない」アカウントを次々閉鎖！ シャドウバンの対象とは【1週間まとめ】
Moz - SEOとインバウンドマーケティングの実践情報 コンバージョンを増やす「BOFUコンテンツ」の効果をさらに強化する3つのステップ（後編）
Facebookいいね!の多い記事
Twitterで言及の多い記事
はてなブックマーク人気記事