気ままな技術者生活から人生について考える
hp のサイトで、以下のスペックで PC の見積もりを見てみた。
結果は標題にある通り、530万円余りということになった。
（CPU には正直あまり期待していないので、必要最小限のオプションになっています。）
ちなみにさくらインターネットの高火力シリーズでP100×1を1年間の見積もりを計算すると363万円（ただしメモリ1TB）、マウスコンピュータのX299ベース、128GBのPCを4台見積もると440万円くらいになるので、電源事情を考えれば、2年以上使うのだったら hp から購入するのは悪くない選択肢に思える。
（Ubuntu のホームページを見ると Z840 筐体はサポートされているようだ）
納期が8週間かかりそうなのと、11月下旬に新しい筐体が出るようなので、今回は購入を見送ります。というか今使っている PC を取りあえずフルに使えと言うことなんですが。
N-gram 検索エンジンに and 検索機能を追加しました。
半角の空白文字を入力すると、空白で区切られた文字列を全て含むページを検索します。
実装がちょっとうまくないですが、おいおい直します。
表示についても統一化していないため、検索にヒットした文の数だけ結果が表示されます。例えば、「可逆 圧縮」と入力した場合、「可逆」で検索された後、「圧縮」で検索されるため、「可逆」で１行、「圧縮」で１行表示されます。
これは検索の問題というよりは表示の問題です。
GitHub にはすでにサンプルを上げてありますが、N-gram 解説記事を新たに展開しました。
使い古されてあまり顧みられなくなった感のある N-gram ですが、実装が簡単な割には厳密な検索が可能なので、個人的には重宝しています。
解説記事はネットに多数掲載されていますが、他の検索エンジン技術と比較するときに対象記事があったほうが便利なので書いてみました。
振り返ってみると、あまり万人向けの解説になっていませんね..。
GitHub.com に検索エンジンのソースコードを追加しました。
まだ N-gram ベースのプログラムしかありませんが、おいおい他のテクノロジーベースのエンジンも収録していきたいと思っています。
詳細はそのうちホームページに記述したいと思いますが、プログラムは以下のような構成になっています。
なお、前の記事にも書いたとおり、まだ And/Or 検索条件が書けません。
N-gram ベースの検索エンジンが動くようになりました。結局、索引ファイルの作成は python3 で、検索エンジンは php で組んでみました。
索引ファイルはここでは作成できないので、別のマシンで随時作成したものをアップロードします（ちょっとださい）。
なお、検索対象はホームページ側の記事のみで、ブログ記事は検索されません。ブログを検索したい場合はブログの中で検索をかけてください。
And/Or 検索も実装されていませんが、そのうち実装したいと思います。
しかし、たったこれだけ実装するのに1日かかるとは、コーディングの実力が落ちたもんだ。。。
今更クローラを C で組みたくないな、と思い始めた。
XML と違って HTML は独特の書き方をするサイトもあるので、結構クローリングは大変なのである。N-gram を収容するファイルのフォーマットは大体決まったので、python か何かのクローリングライブラリを使おうかと思う。
明日は仕事が休みらしいので、ヒマがあれば片付けてしまおう。
しばらく前から Google のサイト内検索を使うサイトばかりになって、自力で検索エンジンを組み立てることがなくなった。
しかし、Google だと正確な and/or 検索をさせることができなくってしまったので、自前のエンジンが欲しいことがある。
どうせヒマになるし、また作ってみることにした。今度は転置行列は C で記述するが、検索は PHP で行うことを目標とする。（このサイトがユーザコマンドの実行を許していないようだという事情もある。）
ちょっとまだるっこしいが、ページが増える度に外からクローリングしてページを収集し、転置行列を生成して戻すというやり方でやってみることにする。
ホームページの、先頭の数ページを作成した。
フォーム問い合わせで SecurImage を使おうとしたら start_session() が warning を出して止まってしまった。原因は encoding で BOM つきの UTF-8 を使っていたことにあった。
BOM は大概のエディタでは目に見えないので、エンコードを確認するしかないのだが、どうもいつも失敗している気がする。
技術ページをいくつか作ったらまた Amazon に申請してみますか。
単に書籍紹介時にリンクを張りたいというだけの理由で、Amazon のアフィリエイトに応募したが、あえなく落選してしまった。
理由はこのサイトに載っているコンテンツが少なすぎるので、もう少し拡充してから登録してください、というものだった。
とは言え、どこまで拡充すればよしとするのか審査基準が書いてない。
まあ、確かにトップページとこのブログしか置いていないようなシンプルすぎるサイトなので、目的が分からないというのは分からないでもないですが。
トップサイトを拡充したらもう1度挑戦してみることにしよう。
ベイズ統計の基礎を学ぼうと思って、本を買ってきた。
[amazon_link asins=’4254122128′ template=’ProductCarousel’ store=’teqstock-22′ marketplace=’JP’ link_id=’46bacb08-9c9b-11e7-82a5-3987ea029436′]
ベイズ統計はベイズの定理
に尽きるが、
後は独立な事象が来たらベイズ更新で 
後は Stan/R, NumPy を使って演習問題を解けばよいのだが、これがなかなか大変。
