Scrapyでは/ top.html |----- subdir_a/index_a.html |----- subdir_b/index_b.html というディレクトリ構造があり、 top.html に、<a href="../../../../subdir_a/index_a.html"> とあった場合、正しいURLではないので、400エラーとなり、クロールができません。一方で、最近のブラウザは頭がよくて、 ド</a>…

商用のサイト内検索サービスだと、よく検索結果画面にページのキャプチャが載っているかと思います。 それを簡単にWordpressで実現できました（落とし穴あり）結論から言うと、Wordpressの非公式APIであるスクリーンショットを取得するサービスを利用すると…

3月いっぱいで、Googleカスタム検索の有料版であるGoogleサイトサーチが新規申し込みを締め切りました。 https://enterprise.google.co.jp/intl/ja/search/products/gss.html ちゃんとサイトを設計していればあまり迷うことなく、すなわち検索機能を使わない…

https://qtranslatexteam.wordpress.com/browser-redirection-based-on-language/によれば、URLに言語情報を含まない場合は、下記の値を元に判断しているようだ。 referrer url (if cookie is not set) cookie (‘qtrans_front_language’) browser setting (i…