LevelDB JNIというバインディングを使うのがいいみたい。Akka PersistenceやActiveMQ Apolloでもこれが使われています。 github.com もちろんこれはLevelDBがインストールされていないと使えませんが、LevelDBをPure Javaにポーティングしたものもあるみたいです。 github.com Akka Persistenceでは設定でこちらを使うようにできますし、ActiveMQ ApolloではネイティブのLevelDBバインディングが使えない場合は自動的にこちらにフォールバックするようになっているようです。 性能的にかなり問題があるようでプロダクションでの利用は推奨されていないようですが開発用途であれば別途LevelDBを導入する必要がないので便利かもしれませんね。
This is a long overdue post, so long in fact that I can't remember who I promised to do this for! Regardless, I keep on having discussions around this topic so I thought it worthwhile putting down some notes on what I believe to be the factors you should consider when making this decision. What's the question? It goes like this: You have an application that uses LevelDB, in particular I'm talking
Deleted articles cannot be recovered. Draft of this article would be also deleted. Are you sure you want to delete this article? Cassandraのストレージには、SizedTierCompactionと、Google LevelDBをもとにしたLeveledCompactionという二つのコンパクション戦略が存在し、ワークロードによって開発者が自由に選択できるようになっています。しかしLeveledCompactionの具体的な挙動がいまひとつ、よく分からず、選択の決め手に欠ける状態でした。 そこで、オリジナルであるLevelDBの実装を調べてみることにしました。インターネット上にLevelDBの解説は多いですが、具体的にどのようなファイルI/Oが発行されてい
High Performance RocksDB uses a log structured database engine, written entirely in C++, for maximum performance. Keys and values are just arbitrarily-sized byte streams. Optimized for Fast Storage RocksDB is optimized for fast, low latency storage such as flash drives and high-speed disk drives. RocksDB exploits the full potential of high read/write rates offered by flash or RAM. Adaptable RocksD
数千万件はいったlevelDBからランダムに10000件アクセスした時の速度をはかったら、 キモい挙動だった。 １、２回目の試行では48秒、47秒だったのに、回数を重ねるとだんだん早くなって、11秒付近におちついた。 キャッシュのせいかなと思ったが、read optionでキャッシュなしにしている上に、以前アクセスしたキーに被る確率的にもキャッシュじゃないんじゃないかと思う。 うーん、なんかTokyoCabinetとかもこういう挙動をしていたな。。。 ちゃんと中身を理解したほうがよいのか。 ちなみに ec2のmicroインスタンスで上の結果を得た。 別のハイスペのサーバで試すと0.3秒以下で終わった。 その後、ec2のハイパフォーマンスなインスタンスで試したところ、 やはり最初は20秒くらいかかっていたが、getを繰り返すとどんどん早くなることがわかった。 最終的に8秒で安定した。
さて、今回は比較的新しいデータストアであるLevelDBについてまとめてみました。 LevelDBは1年ほど前からNode.js界隈ではブームが来ていて、理由がよくわかっていなかったんですが、まとめている内に分かるかなと思ってまとめました。今回はNode.js無関係でLevelDBの基礎的なことだけ調査した結果をまとめてみました。 Node.jsで使ってみる話は後に回します。 LevelDBとは? key-value型のデータストアの一つです。 Googleの研究者である、Jeff DeanとSanjey Ghemawatが開発し、2011年に公表されました。C++で書かれており、多くのプログラミング言語でbindingsが書かれています。もちろん、JavaScript/Node.jsでも書かれています。 LevelDB は Google のBigTableをベースにしたアーキテクチャを持
InfluxDBとは http://influxdb.org メトリクスやイベントといった時系列データを格納するのに適したデータストアです。 ちなみに go で書かれています。 ちなみに 2013のOpen Source Rookiesに選ばれました。 InfluxDBの特徴 RRDやMySQLに時系列データを格納する場合と比較して、InfluxDBの特徴を紹介します。 バックエンドは LevelDB LevelDBとは、キーでソートされた状態で可能されたKVSです（Google製）。詳しくはこのへん参照のこと。 http://en.wikipedia.org/wiki/LevelDB https://code.google.com/p/leveldb/ https://speakerdeck.com/smly/influxdb-and-leveldb-inside-out 将来的にLev
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
