2016-04-01から1ヶ月間の記事一覧

検索エンジンの日本語トークナイズメモ

はじめに 検索エンジンのトークナイズ処理の部分で行われている基本処理や工夫を少し調べてみたのでメモ。 トークナイズ処理 「検索クエリ」に対してマッチする「ドキュメント」を高速に検索するためにインデクス(索引)を作成する 本の最後の方にある「用語 …

👍📕😓🎉😆⚽✌

昨今、世界の砂漠化と並び、世界の絵文字(Emoji)化が進んでおり、社会問題として取り上げられています。 英オクスフォード辞書の「今年の言葉」のEmoji化 http://www.gizmodo.jp/2015/11/2015oxford.html プログラミング言語のEmoji化 http://developer.cybo…