すべてのクローラーをブロックしたことが裏目に出た:robots.txtの教訓とOpen Graphプロトコルの詳細
2025-07-17
ブログデータを保護するために、著者はrobots.txtで全てのクローラーをブロックしましたが、意図せずLinkedInの投稿プレビューが壊れ、リーチが減少しました。LinkedIn Post Inspectorにより、robots.txtがプレビューに必要なページのメタデータ(Open Graphプロトコル)へのアクセスをLinkedInボットが妨げていたことが判明しました。robots.txtファイルを修正することで問題は解決しました。この経験を通してOpen Graphプロトコルを学び、コード変更を徹底的にテストすることの重要性を認識しました。