Senna 2.0βのリリースが見えてきました。 去年の夏に出すと言っていましたが、紆余曲折あっての現状です。 ライバルのTokyo Cabinet/Tokyo Dystopiaについては、 ストレージと全文検索インデックスを分割する方向性です。 mixi engineer blog 今までのSennaはTokyo Dystopiaに近いものでしたが、 Senna 2.0では逆にHyper Estraierのほうに近づく感じになっています。 それぞれ特色が出て面白いですねー。 今回は転置インデックス部分にもかなり手が入っているので、 Senna/Lucene/Tokyo Dystopiaのパフォーマンス比較もやってみたいと思います。 （とはいえ、パフォーマンス比較はそれぞれのライブラリに精通しないと意味のある情報が出せないので、大変ではありますね…） Senna 2.0 + MySQL 5
みんな、［Senna-dev 884］のメールは読んだかな！？ 全文検索エンジンSennaの新しいAPIについての素案がついに公開されました。 今までのAPIのほとんどを刷新するという 大改造！劇的ビフォーアフター的API群です（APIの匠）。 んで、この新しいAPI群で何ができるようになるのでしょうか。 簡単に言うと、 「Sennaは、データベースになります！」 といいつつも、全文検索機能を充実させるために、 データベース的機能を強化した、という感じになっておりますぞ。 データベース機能 新しいSennaでは、複数のテーブルというものを持つことができます。 テーブルは、複数のレコードを持つことができます。 レコードは、複数のカラムを持つことができます。 カラムは、ある型のデータを保持します。 一般的なRDBMSの２次元表をまずはイメージしてください。 ポイント1. レコードごとにカラムが
地味に反響のないSenna 1.1.0ですが、 SennaQLという新しい問い合わせ言語が搭載されています。 我々の調査の結果、 なんとSennaQLは以下のページで挙げられている Schemeの特徴を全て満たしていることが判明しましたっ！！！ 最もタメになる「初心者用言語」はScheme! Schemeで豊かな表現力を身につける 参照透明できれいな心をそだてる 括弧はこわくない＞＜ Schemeは上を目指せる！ これはみんなSennaQLを学ばないといけないですね！！ SennaQLのおためし方法 Senna 1.1.0以降をインストールしたあとに、 % senna filename.db と実行すれば、対話的環境でSennaQLを試すことができます。 SennaQLで簡単な計算をやってみましょう。 > (+ 1 1) 2 > (define a 3) a > (define b (+
Google Suggestのようなものを高速に実現するサーバsuggestedというものを書いてみた。 が、しばらく放置していた。とりあえず公開してみる。 特徴 epollやkqueueを使っていてネットワーク部分が速い Sennaを使っていてSuggest部分が速い Sennaを使って正規化している。「トン」とか「ミリバール」(組み文字)とか「Ｗｉｋｉ」(全角)とかでも検索可能 置き場 CodeResosに置いてあります。 http://svn.coderepos.org/share/lang/c/suggested/trunk 一応、2008/01/17バージョンの全ソースコードを貼っておこう。 #include <sys/types.h> #include <sys/time.h> #include <stdlib.h> #include <err.h> #include <sys
CodeReposのアカウントをいただけたので、コミットした。 http://coderepos.org/share/changeset/4356 use Senna; use Senna::Constants qw(SEN_CTX_USEQL); my $db = Senna::DB->open(path => '/path/to/senna.db'); my $ctx = Senna::Ctx->open(db => $db, flags => SEN_CTX_USEQL); $ctx->send(<<END_QL); (+ 1 1) END_QL my $data = $ctx->recv; # $data == 2 とかで。 パースはJSON::AnyとかText::CSV_XSとかで。 これでSennaStoreを使う覚悟がちょっとできてきた。 O/Rマッパー的なやつはやっぱり欲
Tritonn、Ludia、そしてSennaとは…… 昨今のWeb 2.0と呼ばれるようなWebシステムでは、一般的に大量のコンテンツデータを内部に保有しているのではないでしょうか。大量のコンテンツから目的のコンテンツをユーザが選び取る手段の一つとして全文検索が挙げられます。全文検索とは、検索対象コンテンツの中身すべてに対して検索を行うことを指します。たとえば、タグやタイトルを対象にした検索だけでは、目的のコンテンツを発見できないような場合に有効な検索です。 データベースに保持された大量のデータを簡単に全文検索したい、という場合も多いことでしょう。本稿では、それを実現にする全文検索システムとして、次の2つを取り上げて紹介します。 Tritonn Ludia これらはそれぞれ、Tritonnは「MySQL」、Ludiaは「PostgreSQL」という、Webシステムを開発する上で人気の高
Tritonnの謎 最新tritonnで SELECT MATCH(col1, col2, col3) AGAINST('W.... query' IN BOOLEAN MODE) AS score Where MATCH(col1, col2, col3) AGAINST('W.... query' IN BOOLEAN MODE) ORDER BY score DESC; が異常に遅いのはなんでなんでしょう。vmstatみてるとこのクエリが発生すると、１０回に１回くらいすげぇ量のI/O (特にINのほう）が発生してるんですが・・・ 一回このクエリが実行し終わって、再度同じクエリを投げるとそうとう速くなるのだけど、これはクエリキャッシュっぽい。SQL_NO_CACHEすると同じ事が起きる。いったいどこの何をつかってソートしてるんだ？？ 追記：間違い。SQL_NO_CACHEしてても、２回
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
うちのセッション、ブースにお越しくださった方々、ありがとうございました。 2日間にわたるMySQL UC Japan 2007も無事終了し、今日は少しのんびりしてます。 今回は自社ブースを守らなければいけなかったため、Cybozuさん(MySQL+Senna!!)のセッション以外はほとんど聞きに行くことができず残念だったのですが、ちょっとした時間やレセプションの時に、Monty & Brianの2人とTritonnの話ができたのは大きな収穫でした。 Brianとは彼が4月に来日した際に、Tritonnのソースなどを見せつつ一度説明をしたので既に理解を得ていましたが、Montyはまだでしたので拙い英語でなんとか説明したわけです。といっても「それよりソース見せてみい」みたいな雰囲気になって#ifdef ENABLE_SENNA以下をポイントとなるソースファイルで見せて理解してもらうというお決ま
お知らせ snippet関数は"kwic"という名前に変更いたしました。 詳しくはこちら→http://d.hatena.ne.jp/mir/20070907/p1 はじめに snippet関数という新しいSQL関数を実装しました! 現在、Tritonnの開発レポジトリにcommitされています。以下のコマンドでソースを入手して試すことができます。 svn checkout http://svn.sourceforge.jp/svnroot/tritonn/mysql-5.0.45-tritonn-1.0.5snippet関数は特に問題がでなければtritonn-1.0.5のリリース時に含まれる予定です。 snippet関数って何? snippet関数とは、KWIC(keyword in context)表示を行うためのSQL関数です。簡単に言うと、Google検索を行ったときに出てくる「
Django勉強会 Disc 4で発表させていただいた資料を公開します。 今回は構成とかグダグダ＆Djangoの話が少なくてすみませんすみません… DjangoでSenna 2.0!(PDF注意) Senna 2.0を用いたWikipedia検索はリポジトリに公開しています。 Senna2.0でのWikipedia検索@Django Tritonn版はこちら TritonnでのWikipedia検索@Django 公式の場でSenna 2.0について話すのは初めてだったのですが、 やはり説明のための構成を練らないといけないですね… なぜSchemeを採用したか、というのは皆さん興味を持たれるようです。
This webpage was generated by the domain owner using Sedo Domain Parking. Disclaimer: Sedo maintains no relationship with third party advertisers. Reference to any specific service or trade mark is not controlled by Sedo nor does it constitute or imply its association, endorsement or recommendation.
Sennaのマルチセクション機能に対応しました！ 次回のTritonnリリース(ver1.0.3)から利用可能になる予定です！ Tritonn 1.0.3は来月あたりにリリースする予定です。 マルチセクション機能とは？ マルチセクション機能とはテーブルに全文検索対象のカラムが複数あるような場合に、非常に便利使える機能です。 以下のようなテーブルがあって、c2/c3/c4の3つのカラムで全文検索をしたい、という場合を想定します。 CREATE TABLE t1 (c1 INT PRIMARY KEY, c2 TEXT, c3 TEXT, c4 TEXT) DEFAULT CHARSET utf8;このとき、これまでは以下のように複合キーとしてFULLTEXTインデックスを作成することで、1度のMATCH検索でc2/c3/c4の何れかにキーワードを含むレコードを探すことができましたが、、、問題
Tasuku SUENAGA a****@razil***** 2007年 3月 22日 (木) 18:25:28 JST 前の記事 [Senna-dev 516] Senna 1.0.3をリリースしました 次の記事 [Senna-dev 520] Tritonn 1.0.1リリースのお知らせ 記事の並び順: [ 日付 ] [ スレッド ] [ 件名 ] [ 著者 ] 末永です。 [Senna-dev 509]でアナウンスがありましたとおり、 SennaのMySQLバインディングを作成する Tritonnプロジェクトが発足いたしました。 今までSennaのMySQLバインディングを利用されていた方に向けて、 「どのような点が変更となったのか」 をまとめました。 <<< 今までMySQLバインディングを利用されていた方が特に注意すべき点 >>> ・ALTER TABLE等でインデックスのフラ
PRESS RELEASE [IT・情報][新製品]: 配信 ( http://www.pressnet.tv/ ) 送信者: 末永 [email protected] ■高速全文検索エンジンSenna 1.0.0 リリースのお知らせ 有限会社未来検索ブラジル（東京都渋谷区 代表取締役：深水英一郎）が組み込 み型全文検索エンジン「Senna(せな)」のメジャーリリース版(1.0.0)を公開しま したのでお知らせいたします。 ●Sennaについて http://qwik.jp/senna/FrontPageJ.html Sennaはオープンソースの組み込み型の全文検索エンジンです。DBMSやスクリプ ト言語処理系等に組み込むことによって、その全文検索機能を強化することがで きます。従来より先進的なITベンチャーを中心に数多くの商用サイト・製品に 採用された実績を持っています。 * タワーレコード商
DBIx::ClassでmysqlのFULLTEXTインデックスに対する検索をより美しく使うにはどうすればいいかなぁ、と考えた結果search_literalを使えば良いかと思い立った次第です。 こんなテーブルで CREATE TABLE table01 ( id INT UNSIGNED AUTO_INCREMENT NOT NULL, PRIMARY KEY(id), title VARCHAR(255), artist VARCHAR(255), review TEXT, FULLTEXT(review) ); Schemaを作って、こんな感じに走らせると use strict; use warnings; use CD::Schema; my $schema = CD::Schema->connection('dbi:mysql:cd', 'user', 'password');
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
