Tarantula SEO Spider

ここで最も中身が濃いのがAIキーワード層だ。ページが何に最適化されているかを推測するのではなく、クローラーがページを分析し、本当に狙っている語を報告する。続けて類似語と並行語を挙げ、しかも自分のサイトに限らず、あらゆるサイトのあらゆるページのキーワードデータを引ける。監査はエラー一覧から、各ページが何を争っているかの全体像へと変わる。

ページの成果が低いときは、ツールを離れずに書き換えられる。リライターは内蔵のAIモデルで動く。ページを選び、書き換え、結果をそのまま使えばいい。自分のページだけでなく他所からクロールしたコンテンツも扱える。順位を落とした古い記事を更新する使い方がこれにあたる。

クローラーは検索エンジンが見るものすべてを報告する。リンク切れ、リダイレクトの連鎖とループ、重複コンテンツ、重複したmeta情報、到達不能なページ、どこにも繋がらないサイトマップ項目まで含む。ページサイズ、検証エラー、モバイルでの使いやすさも確認する。各指摘は原因を示すので、ページがなぜインデックスされないかを推測せずに済む。

別立てのon-page分析器が任意のページを1枚取り、深い最適化レポートを出す。PDFで書き出せる。レポートには自社ブランドを載せられるため、SEOは見込み客の獲得材料や有償の成果物としてよく使う。長すぎるタイトル、薄いコンテンツ、欠けたmeta descriptionを指摘する。クローラーが大規模に洗い出すのと同じ問題だ。

ツールは検索エンジンが求める階層構造を備えた完全なサイトマップと、それに合うrobots.txtを作る。サイトマップから漏れているページも見つけ、新しいサイトマップに組み込む。多くの監査が開けたままにする穴をふさぐ。どのサイトマップにも載らないページは、Googleがいつまでもクロールしないページだからだ。

TarantulaはGoogle PageSpeedとGoogle Analyticsに接続し、クロールだけでは見えないシグナルを引っ張る。速度と順位のデータ、ページ単位のユーザーとパフォーマンス指標、生のクロールを超えたページの成果まで見える。すでにAnalyticsで仕事をしているチームなら、SEOの作業がユーザーの実際の行動に結びついたままになる。

クロールは自分で決める。user agent、深度、クエリ文字列を処理するか、robots.txtに従うか、画像やアセットの扱い、同時スレッド数まで指定できる。クロールはフォルダやディレクトリをまたいで走り、高速なマルチスレッドエンジンが大きなサイトでも1日がかりになるのを防ぐ。一時停止と再開は、数日後に戻ってきても使える。

クローラーを競合のドメインに向ければ、自分のサイトと同じように相手のサイトを図にできる。構造、コンテンツの深さと広さ、公開しているページ、狙っているキーワードが露わになる。トップを真似ることが目的ではない。相手が何で上位を取っているかを知ることが、相手が残した隙間を見つける方法だ。