Googleにブログのインデックスを削除された話
前置き
通常、SEOの必要性があるとき(SEOの必要性と言うのも少し変だが)、ついでに Google Search Console に自分のドメインを登録することが多い。サイトマップを送信できるだけでなく、Googleが素早くサイトを発見してインデックスを開始するのを助けたり、検索エンジンが見つけた問題点を修正したりできるからだ。
Bingにも似たような機能として Bing Webmaster Tools がある。
2024年11月頃から、僕のブログの表示回数が2024年5月あたりから明らかに減少傾向にあることに気づいた。
この期間、僕のブログのコードには何の変更もなく、Search Consoleにもエラーメッセージは一切出ていなかったため、構造的な問題はいったん除外できる。
しかし、一体どんなコンテンツのせいでGoogleが僕の記事をすべてインデックスから削除する必要があったのか、本当に見当がつかない。
詳細な原因の調査
2024年5月時点ではインデックスされたウェブページ数がまだ700以上あったが、2024年11月中旬には100ページ余りまで激減し、年末にはわずか20ページ程度にまで落ち込んでしまった。
この一連の流れにはまったく納得がいかなかった。管理画面上では何の問題も見当たらないし、改めてGoogleにクロールをリクエストしても、理由はただ「クロール済み - インデックス未登録」と表示されるだけだ。Google公式の説明によれば、この文言の意味は次の通りだ。
Google はページをクロールしましたが、インデックスには登録していません。今後、インデックスに登録される可能性もありますが、登録されない可能性もあります。この URL のクロールを再送信する必要はありません。
まったく要領を得ないため、他の記事も調べてみた。例えばこの記事では、小さなサイトにおいてインデックスされないページがあるのは普通であり、優先して考慮すべきはコンテンツの品質とSEOの最適化だと書かれていた。
しかし、いくら調べても僕と似たような事例は見つからなかった。つまり、もともとは露出に問題がなかったのに、突然表示回数を減らされ、さらにインデックスまで削除されたというケースだ。
ここまで来るとGoogleにツッコミを入れていいものか迷うが、検索結果の上位は低品質なAIコンテンツファームに占領されている一方で、より有用な個人ブログがなぜか締め出されているのだ。
ましてや、一部のコンテンツファームの記事をクリックすると、鬱陶しいリダイレクト広告の嵐に見舞われる。以前、比較的多くの人に読まれていた記事としては以下のようなものがある:
僕としてはかなり役に立つと思って共有していたし、インデックスを削除される前はキーワードを入力すれば大体すぐに見つかっていた記事たちが、一夜にしてGoogleから根こそぎ消されてしまった。自分のWebサイトを人に見てもらう手段として、GoogleのSEOトラフィックだけに頼るわけにはいかないと痛感させられた。
Google SEOのトレンド
露出が削られインデックスが削除されたことをきっかけに、開発者が普段気にするようなSEOの基礎(SSR、metaタグ、JSON-LD、サイトマップなど)以外に、自分が注意を払うべき点はないかを調べ始めた。
そこで偶然見つけたのがawooのこの記事、【HCU・AI Overviews後の時代におけるECサイトSEOの行く末】だ。非常に詳しく書かれており、AIの発展とSEOの対応や変遷について極めて明快に解説されているので、おすすめしておきたい。
SEOを本格的に学びたい場合、大金を払ってSEO講座を受ける必要は実はない。Web開発に精通していて自ら主導権を握れる(直接HTMLを変更できる)のであれば、大半のSEO知識はGoogle公式ドキュメントから学べる。
端的に言えば、Google公式は「ユーザーに役立つコンテンツ」を口酸っぱく謳っているものの、実際の検索結果はそうなっていない。巨大ブランドが易々と検索上位を独占し、真の専門家によるコンテンツが締め出されている。
Googleはアルゴリズムのアップデートを繰り返すことで有益なコンテンツを抽出したいようだが、結果は期待通りとはいかず、それどころか多くの小規模サイトを葬り去ることになった。言及されているサイトの中でも、表示回数が雪崩を打つように激減したケースが多々ある。
awooの記事から手がかりを探すとすれば、僕のサイトに最も当てはまりそうなのはおそらく「テーマのブレ」だろう。僕のサイトは大半が技術(ソフトウェア開発)メインだが、個人の雑談や意見、日常の記録なども少なからず混ざっている。それが露出低下の原因になった可能性はあるが、僕の根本的な疑問に戻ると——そのせいでインデックスを根こそぎ削除されるというのは、到底理屈に合わない。
僕の試み——フルリライトとドメイン移転
僕は2024年12月以降、ブログ全体をリライト(再構築)し始めた。デザインを改善しただけでなく、記事のURLパスやJSON-LDなども再設計し、SEO面をある程度最適化した上で、新しいドメインへと移転させた。
新ドメインへの移転はかなり躊躇した。というのも、kalan.dev にはたくさんの思い出が詰まっているからだ。Googleが .dev というトップレベルドメインの提供を始めた直後に購入し、5年以上にわたって共にしてきた愛着のあるドメインだった。
dev.kalanlife.com に移転して301リダイレクトを設定したところ、2日ほどでGoogleは無事に僕の記事をインデックスしてくれた。しかしさらに2日経つと、Googleは再び僕の全記事をインデックスから削除してしまった。例の理由——「クロール済み - インデックス未登録」とともに。
本当に効果がなかったのか、単に期間が短すぎて成果が見えなかっただけなのかは検証の余地がある。とはいえ、ここまできてしまった以上、僕は再び慣れ親しんだドメイン blog.kalan.dev に戻すことに決めた。新しいデザインとアーキテクチャは維持したまま、今度こそ改善が見られるか様子を見てみるつもりだ。
運命を自らの手に委ねる
Googleに異議申し立てを送ることも、コミュニティに助けを求めることも、やれることはすべて試した。短期的には成果が期待できそうにないため、今後はいくつかのアプローチを変えてブログ運営を続けていくつもりだ。具体的には以下のような施策を考えている:
- 新しい記事を書いたときは、各種SNSでも可能な限り誘導・宣伝を行う。時にはThreadsの方が良い順位を取れることもある(あまり好きではないが)
- ニュースレターやコミュニティの運営
- みんなにGoogleを使うのをやめて、Duckduckgo や Bing を使おうと呼びかける(どちらでも僕のサイトはちゃんと見つかる)
個人的にはDuckDuckGoのほうがおすすめだ。レイアウトがシンプルで、Bingのように雑多なニュースで埋め尽くされることもなく、ユーザー行動を追跡される心配もない。
僕はこれからもできる限り自分のサイトを通じて発信し、記事を書き続けていくつもりなので、ぜひ応援してもらえると嬉しい。もし僕の記事を気に入ってくれたら、RSS購読も検討してみてほしい。
関連記事
- エンジニアの面接にどう備えるか テック業界の面接対策はいつだって骨の折れるものだ。面接で最も人を落胆させるのは、権力関係が極めて一方通行になりがちな点にある。応募者の立場では相手の本当の基準を読み取るのは難しく、面接が終わった後は自分を疑ってしまいがちだ。今回はそのあたりについて話してみよう。
- 人生観を変えた言葉 ファインマン、チャップリン、そして映画『ひゃくえむ。』。劣等感を抱えていた少年から誰かを助けられるようになるまで、僕に最も深い影響を与えた思考と生き方についての共有。
- 独立したウェブサイトを持つN個のメリット ショート動画やSNSが全盛のこの時代に、なぜわざわざ時間をかけて自分のブログを運営するのか?約10年間ブログを書き続けてきた僕の考えを共有する。
- 筋トレ(ウエイトトレーニング)の記録と感想 ここ最近の筋トレの振り返りと感想をシェアする。