MySQLで大きなサイズのデータを挿入する際の注意点について記載する。max_allowed_packet, innodb_log_file_sizeに注意し、マルチパートアップロードにmysql_stmt_send_log_data関数を使う。 出典について この記事は「Inserting large rows in MySQL and MariaDB」(2015/7/20)を翻訳したものである。 MySQLにおけるLONGBLOBの最大容量は4GBであり、max_allowed_packetの最大値のサイズは1GBである為、私はLONGBLOBを完全に使いきることができるのだろうかと思い立った。 そこでこれをテストし始めた。MySQL Connector/Pythonを使ってPythonスクリプトを書き、MySQL Sandboxを使ってMySQL 5.6.25のインスタンスを作成した
昨日のブログ記事のアクセスが想像以上に多く、とても驚いています。 この中で、REPEATABLE-READのトランザクションで、「ロックなし読み取りした値を元に更新してはいけない」と書いたのですが、具体的なサンプルを入れていなかったので、ここで紹介したいと思います。 REPEATABLE-READにならないトランザクションを試す 更新 (update)よりも、Insertの方がより驚きがありますので、Insertで示します。 まずは前準備です。MySQLのコマンドプロンプトを開いて、以下のSQLでデータベースとテーブルを用意します。 CREATE DATABASE test1; USE test1; CREATE TABLE `test1`.`test1` ( `id` int(11) NOT NULL AUTO_INCREMENT, `field2` int(11) NOT NULL,
今回から数回にわたり、TransactdのオペレーションとInnoDBにおけるロックについて解説します。 ロックについてはあまり良くわからなくてもとりあえずそれなりに動くアプリケーションは作れてしまいます。ですが、マルチユーザー環境でミッションクリティカルなアプリケーションを書くには、ロックの理解が不可欠です。ロックをうまく使って、矛盾や間違いのない読み書きをしつつ同時実行性も高いアプリケーションにしましょう。 その1では、Transactdを実装する上でMySQLのソースやドキュメントから得た知見を基に、InnoDBのロックの種類と分離レベルに応じてそれをどのように使うかをまとめてみます。 Index MySQLのトランザクション関連用語 MySQLのREPEATABLE-READ InnoDBのロック 行ロック (row-level locking) GAPロック GAPロック単体 ネ
MariaDB 10.0のCONNECTストレージエンジンからOracle DBに接続してみる
この記事は JPOUG Advent Calendar 2014 の10日目の記事です。 MariaDB 10.0には CONNECTストレージエンジン という MS Accessでいうところのリンクテーブルなストレージエンジンが搭載されていて、リンクの方法にCSVとかXMLとかODBCとか色々あるようです。MySQLに昔から入っているFEDERATEDストレージエンジンはMySQLプロトコルしかしゃべれないのでリンク先は必ずMySQLサーバーでないといけないという制約がありますが、ODBCなら色々できるわけですよね。 というわけでさっくり試してみました。 unixODBC-develと OracleのInstant Client (とりあえず、basic, odbc, develの3つをrpmで突っ込みました)は予めインストールしてあります。 $ wget "https://downlo
Download Release Notes Changelog Overview of 10.0 Release date: 25 Nov 2014 MariaDB 10.0 is the current stable series of MariaDB. It is an evolution of MariaDB 5.5 with several entirely new features not found anywhere else and with backported and reimplemented features from MySQL 5.6. MariaDB 10.0.15 is a Stable (GA) release. Thanks, and enjoy MariaDB! Notable changes This release fixes a serious
MariaDBは、オープンソースのデータベースとして知られるMySQLからフォークしたMySQL互換データベースの1つ。MySQLのオリジナルの開発者だったMichael "Monty" Widenius氏が立ち上げたプロジェクトで、2012年末には推進団体の「Maria DB Foundation」も設立されました。 そのMariaDBの推進役として知られていた企業SkySQLが、10月1日付けで社名を「MariaDB Corporation」に変更したことが発表されました。 名称変更の理由を、CEOのPatrik Sallner氏はプレスリリースで次のように述べています。 As the adoption of MariaDB has grown, SkySQL’s business model has evolved to provide enterprise-grade produc
MySQL Performance: Analyzing LinkBench Workload on MySQL 5.7 and MariaDB 10.1 MySQL Performance: Analyzing LinkBench Workload on MySQL 5.7 and MariaDB 10.1 Reading the article published on MariaDB site about performance evaluation of MySQL 5.7 -vs- MariaDB 10.1 I've got a double feeling: from one side I have no any reason to have a doubt in obtained results, and from another side - my feeling says
Download MariaDB 10.0.13 Release Notes Changelog What is MariaDB 10.0? MariaDB APT and YUM Repository Configuration Generator The MariaDB project is pleased to announce the immediate availability of MariaDB 10.0.13. This is a Stable (GA) release. See the Release Notes and Changelog for detailed information on this release and the What is MariaDB 10.0? page in the MariaDB Knowledge Base for general
Today marks a milestone in terms of the MariaDB project – going forward, the MariaDB project plans to use Github and git for source code management. The migration happens from Launchpad and the bzr tool. The 10.1 server development (under heavy development now) will happen on Github. You can check it out here: https://github.com/MariaDB/server. Feel free to watch, star or even fork the code, and s
The MariaDB project is pleased to announce the immediate availability of MariaDB 10.0.11. This is a Stable (GA) release. See the Release Notes and Changelog for detailed information on this release and the What is MariaDB 10.0? page in the MariaDB Knowledge Base for general information about the MariaDB 10.0 series. Download MariaDB 10.0.11 Release Notes Changelog What is MariaDB 10.0? MariaDB APT
MariaDB 10 VS. Oracle MySQL 5.6 Benchmarked
So after the GA release of MariaDB I couldn’t wait to go for another round of benchmarking just to see the difference in results between Oracle’s MySQL 5.6 and MariaDB 10.0 – it was clear from the results on my previous posting that MariaDB was significantly faster than Oracle’s MySQL however Oracle had more consistent performance. This time I performed the benchmarks a little differently, rather
Android, iOSアプリからのアクセスをNode.jsで実装したけれど、データベース（MySQL）がたまに応答しなくなる現象が発生したので調査したときの覚書。 環境：CentOS 5.10 x86_64, MySQL 5.5.36, Node.js v0.10.26, node-mysql 2.1.0 １．MySQL Community Editionの限界 Node.js + node-mysqlからMySQLにクエリを投げると、その分だけスレッドが立つ（１つのコネクションに対して１つのスレッド）。 デフォルトの設定では、すぐ「too many connections」とエラーになってしまうので、my.cnfに「max_connections」を設定する。 しかし、コネクション数が256を超えた辺りで、レスポンスが非常に悪くなるらしい。公式サイトにコネクション数とパフォーマンスのグ
これらの記事を読んでいるうちに、このブログサーバーのDBもMySQLからMariaDBに乗り換えたくなった。MySQL古いし(5.1)。 → 載せ替えてみた。 移行作業はびっくりするくらいあっさりと終わったので、その工程をメモっておきます。あ、環境はCentOS6です。 リポジトリを追加 MariaDBの公式ページにリポジトリ情報が載っているので、それをコピーして使います。https://downloads.mariadb.org/mariadb/repositories/#mirror=yamagata-university [shell] $ sudo vi /etc/yum.repos.d/mariadb.repo # 中にコピペしてきた内容を書き込む # MariaDB 10.0 CentOS repository list – created 2014-03-06 07:56 U
はじめに 職場で技術調査した内容を、ここに書いても支障がなさそうな感じなので、 ついでにこちらに添付してみようと思う。 自分の担当するプロダクトでは MySQLを用いて開発をしているのだが、 MySQL の後継機となりうるSQLサーバ、MariaDBというものがあることを伺い、 個人的に興味があったので、勉強もかねてこれを調査してみた。 ここに書く内容は基本的に、MariaDB versus MySQL - Featuresや、 MariaDB vs MySQLのショートペーパーの内容をまとめたものになります。 MySQL5.6がでてから、MongoDB10系が現在ベータ版として開発が進んでいる。 今度はMongoDB10系についてまとめたいと思っている。 記載内容に誤りなどあれば、遠慮なくお伝えくださいませ。 About MariaDB MariaDB は MySQL から派生した関係デ
InnoDBにはデータの圧縮機能がありますが、パフォーマンスが低いことからあまり使われていません。ただ今年の Percona Live で Oracle MySQL, MariaDB, そして Percona Server が新しい InnoDB Compression を出してきました。これはFusion-ioの R&D チームがフラッシュストレージ向けの MySQL 高速化の一環で開発したパッチが元になっています。ちなみに私は Fusion-io の社員ですのでこの発表をワクテカして待っていたのですが、折角コードが一般にリリースされたので、ソースコードを眺めて動作を調べることにしました。 参考にしたのは MySQL Server Snapshots (labs.mysql.com) にあるMySQL with InnoDB PageIO Compression のソースコード、およびM
The MariaDB Foundation Announces General Availability of MariaDB 10 Best MariaDB ever hits the streets – MariaDB 10 innovations developed with Google, SkySQL & Fusion-IO London, United Kingdom – 31 March 2014 – The MariaDB Foundation, an independent body which promotes the popular open source database MariaDB, today announced the much-anticipated general availability of MariaDB 10, providing today
Download | Release Notes | Changelog | Overview of 10.0 Release date: 31 Mar 2014 With this release, MariaDB 10.0 is now the current stable version of MariaDB. It is an evolution of the MariaDB 5.5 series with several entirely new features not found anywhere else and with backported and reimplemented features from MySQL 5.6. MariaDB 10.0.10 is a Stable (GA) release. This is the eleventh 10.0-based
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
MariaDB storage engines