Web制作 色々なrobots.txt の書き方サンプル
robots.txtファイルは、クローラーにサイトのどのファイルへのアクセスを許可するか、管理できるファイルです。一般的に役に立つrobots.txtのルールは次のとおりです。
Web制作 
Web制作 PHPでcanonicalを自動生成する
canonical（カノニカル）を適切に設定することでURLを正規化することができます。しかし、手動で設定するとなると手間がかかるので、PHPで動的に出力してみます。
フォーム Google reCAPTCHA V3を導入する
PHPメールフォームにGoogle reCAPTCHA V3を設置する方法です。細かい処理はお好みでどうぞ。
Web制作 サーバー上のPDFファイルを検索結果に表示させない方法
PDFファイルのクローリングは.htaccessで制御することができますので、X-Robots-Tagという記述を用いてクローリングの回避を行います。
ウェブサービス Google検索で条件を絞って検索をかける
検索で記号や単語を使って検索結果の精度を高めることができます。 Google 検索では通常、検索演算子に含まれない句読点は無視されます。
Web制作 【Googleカスタム検索】サイト内検索の結果ページから広告を削除する
Googleの検索エンジンを使ってサイト内検索を実装している場合、通常のGoogle検索と同様に広告が表示されてしまいます。サイト内検索に広告が入ってくるのは少々目障りなのでCSSで非表示にします。