github-wiki-see
2021-12-04(土)
昔は研究室Webサーバ内にwikiを設置していたものの,SPAM対策やら色々面倒になりGithubのリポジトリ内Wikiでいいかと引っ越した訳ですが,2019年からGoogle等の検索エンジンのクロールをGithubが拒否するようになってます。
理由は色々あるらしいですが,robots.txt
から Disallow: /*/wiki*
を削除したもののx-robots-tag: none
がヘッダに埋め込まれるせいでGithubの検索から以外は探せない状態が続いています。(ここで議論されてました)
例えばffmpegを使おうとしてeiichiromomma ffmpeg
で検索してもGithubのWikiが出てこない。出てくるのはgithub-wiki-seeなる怪しいサイト。
見た目的に変なサイトと思えてしまいますが,本来であれば検索エンジンに拾われたであろうGithub Wikiの内容をクロールして検索エンジンに渡して,オリジナルのWikiのURLを提示する。というサイトのようです。 私も最初訝しんでブロックしてましたが,問題無いようなので利用して下さい。
改善しないなら,ここ(Github Pages)に今のWikiの内容をマージするのもアリかなと。ただフォルダ構造変えないとダメになるのでそれはそれで面倒。