テスト結果をつらつら書いてると長くなりそうなので記事を分けた．
情報量にidf値を用いてやってみた．
単語Aが出たら単語Bも出るっていう確率は分子で行っているので，
分母はidfってゆー，対極的重み付けのスコアを使ってみる．
相互情報量 = log(
(全文書に出現した単語の総数 * 単語Aと単語Bの共起頻度)
/
(単語Aのidf値 * 単語Bのidf値)
)
発行したSQLは以下の通り．
select
t1.id,
t1.name,
t2.id,
t2.name,
log(
-- T1
(
-- 語の総数
(select count(id) from terms as t_cnt)
*
-- AとBの共起回数
(
select …[さらに読む]
drop table if exists t; create table t ( iid int ,nid int ,bid binary(3) ,msg varchar(69) ,key (iid) ,key (bid) ) ENGINE=InnoDB; insert into t values (1,1,1,"ichi"),(2,2,2,"ni"),(3,3,3,"san") ,(4,4,4,"si"),(5,5,5,"go"),(6,6,6,"roku") ;
なテーブルとデータで、2つ端末を用意して update しあいっこしてみます。
まず、これ↓は両方ともupdateが完了してスコっと返ってきます。行レベルロック++
begin; update t set msg = "t1" where iid = 1; と begin; update t set msg = "t2" where iid = 2;
これ↓は、where句で使っているのが、インデックスがはられていないカラムなので、後発のクエリはすぐ返らず(先発のがcommit
or rollback or タイムアウトするまで)待たされます。これも期待通り。 …
シェアードナッシング型の負荷分散機能を持ち、なおかつ同期レプリケーションによるHA機能まで備えたMySQL Cluster最大の弱点といえば、JOINの遅さであろう。MySQL ClusterのJOINは偽りなく遅い。JOINを多用するアプリケーションでMySQL Clusterを利用するのはある意味マゾヒスティックな行為であると言えよう。何故MySQL ClusterはJOINが遅いのか？それはMySQL Clusterが分散データベースだからである。
ご存じの通り、MySQLにおけるJOINのアルゴリズムにはNested Loopしかない。他のストレージエンジンを利用していればそれでも十分実用に耐えうるぐらい高速なのだが、MySQL Clusterの場合はそうはいかない。JOINでは自ずとストレージエンジンからデータをフェッチする回数が増えるが、MySQL Clusterの場合
Spiderストレージエンジンのバージョン 2.8(beta)をリリースしました。
Spiderストレージエンジンは、database sharding用のストレージエンジンです。
http://spiderformysql.com/
今回の主な変更は以下です。
・テーブルパラメータに「link_status」を追加しました。
このパラメータにより、alter table文を利用してリンクの障害状況を変更することができます。
なお、Spiderのリンク障害状況管理は、テーブル単位で行われます。
それ以外の変更については、ダウンロードドキュメント中の「99_change_logs.txt」をご確認下さい。
先日の投稿「GPLが適用されているソフトウェア＝MySQLのパッチをBSDライセンスでリリースする。」では、GPLが適用されているソフトウェアにBSDライセンスのパッチを提供することが出来るということを書いた。ただし、それが出来ることによってどのような意義があるのかということについては触れていなかった。その結果、 単独で動かないパッチに元のと違うライセンスをつける感覚がよくわからない。 という疑問が生じたらしい（ブコメ参照）ので、パッチをBSDライセンスで提供するということはどういうことなのかを説明しようと思う。
…
[さらに読む]
Linux-DB
システム構築/運用入門の8章「インデックスのチューニング(前編)」を読んだので、インデックスの基本について実際に手を動かしながら勉強してみようと思います。
内容としては、クエリを実行する際に、「インデックスだけにアクセスした場合」と、「データにもアクセスする場合」のI/O
回数の違いが、パフォーマンスにどれだけ影響を与えるか調べてみるというものです。
環境
[さらに読む]
今回の会場となった日本工学院専門学校 蒲田キャンパス12号館は、各部屋がガラス張りで明るい感じです。校舎も綺麗。
展示はスポンサー展示も含めて2F, セミナーは3F.
廊下も広く導線もこんがらがず、会場提供感謝です。木村はサンのブースとMyNA/Firebirdのブース運営が主で、今回はあまりセミナー見学ができなかったのが少し残念でした。夕方にブースを全部みてまわりました。Sugar CRMからforkしたというvTigerは興味深かったですね。日本語化プロジェクトもすすんでいるということで、無償で使いたい方は是非！
…
一日目はセミナーを行わせていただきました。ざっくりWorkbenchは上記Flashでお楽しみください。
Spiderストレージエンジンのバージョン 2.7(beta)をリリースしました。
Spiderストレージエンジンは、database sharding用のストレージエンジンです。
http://spiderformysql.com/
今回の主な変更は以下です。
・１Spiderテーブルに付き、複数リンクを生成し、ロックなし参照時にロードバランスするようになりました。ロードバランスのルールは((サーバID
+ スレッドID) % リンク数)で決定されます。
複数リンクを生成するには、「host」「user」「table」「server」「socket」「wrapper」「database」「password」のテーブルパラメータを記述する際に、半角スペース区切りで複数記述してください。
例：「host 'h1 h2 h3'」
…