クローラーはサイトのリンクを辿ってページを認識するため、サイト内でリンク切れを起こしている場合は、クロールされづらくなってしまいます。
リンク切れを起こしていると、クロールされないだけでなく、ユーザビリティが下がるリスクもあります。
Broken Link Checkerというプラグインを利用して、サイト内にリンク切れを起こしていないかを確認しましょう。
また、robots.txtタグの設定により、クロール自体が拒否されていないかも確認してください。