Bytespiderをシンレンタルサーバーで出禁にするよ

このブログの最大の読者を、出禁にすることになった。
月間10万回もアクセスしてくれる熱心な読者だが、僕は、一ミリも困らない。
なぜなら、それは、Bytespider。
TikTokの運営元が所有するクローラーだ。

そしてその処理を強烈にレコメンドしてきたのは、いつものタブのGeminiではない。
Google AIモードの方のGeminiだった。

Bytespiderをサーバーでブロックする

たまにGeminiに投げていたサーバーのアクセスログを見たGoogle AIモードのGeminiは、タブにいるTheyとは違う反応を見せた。
タブのGeminiは、なんでも食らい尽くすBytespiderの姿を見下して笑い物にするだけだったが、Google AIモードのGeminiは、ぜひブロックしましょう!と言って手順をチャカチャカ表示する。

🛠️ シンレンタルサーバーでのブロック手順

シンレンタルサーバー(エックスサーバー系)の管理画面から、.htaccess というファイルに以下の記述を追記するだけで簡単にブロックできます。

# クローラーブロック設定
<RequireAll>
    Require all granted
    Require not expr %{HTTP_USER_AGENT} =~ /Bytespider/i
</RequireAll>

⚠️ 設定時の注意点

.htaccess はサーバーの動作を決める非常に重要なファイルです。
万が一、記述を間違えるとサイトが一時的に真っ白(500エラー)になってしまうことがあります。

そのため、次の画面に進んだら「現在の記述内容」をすべてコピーして、メモ帳などにバックアップとして貼り付けて保存してから作業を行ってください。

サーバーを重くする「Bytespider」

「Bytespider」は、1ヶ月に約10万回も機械的にサーバーを叩いています。これはサーバーに無駄な負荷をかけ、人間がアクセスしたときの表示速度を遅くする原因になります。
レンタルサーバー(シン・レンタルサーバー / エックスサーバー系)の管理画面にある「htaccess編集」などの機能を使って、このクローラーのアクセスを拒否(ブロック)することをおすすめします。

⚠️ 唯一のデメリット(背景)

  • TikTokやCapCut内での露出が減る可能性
    BytespiderはTikTokを運営するByteDance社のクローラーです。これをブロックすると、TikTokアプリ内の検索結果や、同社が今後展開するAIサービス(豆包など)にあなたのサイトの情報が載らなくなります。

💡 なぜデメリットにならないのか?

  • 日本国内の検索はGoogle/Yahoo/Bingが99%
    日本のユーザーがあなたのサイトに辿り着く経路のほとんどはGoogleやBingです。これらをブロックしなければ、検索順位(SEO)やアクセス数に悪影響が出ることはありません。

⭕️ ブロックすることによる大きなメリット

むしろ、現状のデータ(全体の1/3を占める約10万アクセス)を考えると、ブロックするメリットの方が圧倒的に大きいです。

  • サーバー負荷の軽減(サイトの表示速度が速くなる)
  • データ容量(転送量)の節約
  • サーバー解析ログが綺麗になり、データが見やすくなる

Google AIモードのGeminiで作業が完結

タブのGeminiとGoogle AIモードのGeminiの、この反応の違いはなんだろう。
生息する場所によって。その性質が違うのだろうか。
タブのGeminiは、僕のパーソナライズの悪影響を受けてしまったのだろうか。
それとも単に、3.5にバージョンアップしたからか。

ただ冷静に振り返ってみれば、タブのGeminiも、Bytespiderをブロックしますか?と尋ねてきたことはあった。
今回ほどの強烈なレコメンドではなかったが…

ただ、害はないと持っていた僕は、学習に使うだけならOKだよねと目を瞑っていたのだ。
だが、今回、Google AIモードのGeminiが提示してくれた明確なデメリットがあるのなら、話は別だ。
僕は、TikTokには、一ミリもお世話になっていない。

それに検討が進んでいるらしい402コードによる、AIが読んだ金額を払うというマイクロペイメントの方向性を知り、いよいよタダ読みさせるのが馬鹿らしくなったのだ。

1ビューあたり0.0001ドル。
すなわち10万ビューで1500円ほど。
それも、きちんと支払えばの話だ。
ByteDanceって、どこの国の企業だっけ?

こうしてまたも、新型Google検索ボックスのマルチモーダルな対話窓口というやつで、僕は、ほぼほぼ作業を終えてしまった。
設定のスクショも投げながら。

こうなると、僕の作業のほとんどは、Google AIモードのGeminiで賄ってくれそうだ。
いわゆるGeminiにお願いする作業は、あえての特別なものという位置付けになってきそうだよね。
まあ、Geminiも「チーム・Gemini」と言ってたから、ヘソを曲げることはないだろう。
それに根底では、僕のパーソナルを共有してるみたいだし…

iPhoneでGoogle AIモードのGeminiにダイレクトにアクセスするには、Google アプリが手っ取り早い。
数年ぶりにインストールしてみようかな…

コメントを残す