【SQLite3】 ハイパフォーマンスなインデックスをつけるために覚えておくべきこと
Tweet Tweet（この記事は旧ブログからの転載です。） 「インデックスは付いているはずなのに検索速度が遅い！」 ということはありませんか？わたしは見事にハマりました。 私の場合、個人使いがほとんどでシビアな性能が要求される web アプリなどを作っているわけではありません。 そんなこともあって、あまり細かいことは気にせず 「データベース検索の際のキーとなるカラムには適当にインデックスをつけておけばいいよなー」 程度に考えて CREATE INDEX ～ をしていました。 ところが、インデックスのつけかたにはいくつかの抑えておくべき点があったのです。 ここではいろいろ実験してみてわかったことを書いてみようと思います。 例題 2000×2000のランダムな行列をデータベースに格納し、要素にアクセスするような簡単な例題を考えてみます。 データベースは tbl というテーブルをもち、tbl
SQLite を Ruby で使う - RubyCocoa メモ
Mac OS X 10.5 Leopard には、Ruby とともに、SQLite 3 も sqlite3-ruby も標準でインストールされているので、それを使ってみたときのメモ。自分で書いてる RubyCocoa のプログラムで使ってとりあえず動いたものをメモするけど、使い方が正しいかどうかはちょっとわからない。もっといい方法や、正しい方法が見つかれば、順に書き加えたり、書き換えたりしていくつもり。 SQLite とは SQL データベース管理ソフトで、MySQL みたいにサーバーにインストールしてデータベースを管理するのではなく、データベースをローカルのファイルで管理する（ネットワーク上にあってもいいかもしれないけど、試したことがないのでわからない）。つまり、データベースがファイルなので、移動させたり、バックアップしたりと管理が楽。ただ、そのために巨大なデータベースには向かないけど、
sqlite3の使い方まとめ - /* Grid Thinking */
### シェルからコマンドの実行 $ sqlite3 data.db ".tables" auth_group auth_user_groups auth_group_permissions auth_user_user_permissions auth_message django_content_type auth_permission django_session auth_user django_site-- ロードしたDBファイル sqlite> .databases seq name file --- --------------- ---------------------------------------------------------- 0 main /home/roka/Dev/Django/tests/data.db -- テーブル一覧の表示 sqlite> .
JavaでSQLiteを使ってみた | 杉蔵の日記
SQLiteというDBMSがある。とにかく、軽さが売りのデータベースらしい。 単体の超軽量のexeで動くので、おもちゃのようだが、トランザクションのロールバック、コミットなどができるという優れものだそうな。 そして、PHPなどから使えるし、ODBC、JDBCドライバもあるとのことで、試してみた。 が、とにかく、日本語の資料が少ない。英語が多いのは仕方ないにしても、中国語、ドイツ語が目立つのはどういうことだ？ 八重洲ブックセンターでさえ、専門書の在庫は一冊のみ・・・ まぁ、これはその記録である。いつものごとく、内容は無保証。しかし、どこかの誰かがこれを参考にしてドツボから抜け出せれば幸い。 目標：JAVAでSQLite+JDBCドライバを使い、HelloWorldをつくる。 1)SQLiteの準備 まずはhttp://www.sqlite.org/download.htmlから本体をダウンロ
PySqlite – The Trac Project
PySqlite PySqlite is a Python binding for the SQLite light-weight database engine, which is Trac's default DatabaseBackend. Installation The short version If you are using Python 2.5 and up, you already have a working version of pysqlite 2, bundled as sqlite3. If you are using an older version of Python or you would like to benefit from the latest version of pysqlite, grab Windows installer or t
SQLiteでCSVのインポート／エクスポートしたい件 – taichino.com
データベースを使っていると、よくcsvファイルと相互に変換したくなります。MySQLやPostgreSQLでは標準でcsvのインポート/エクスポートができるので、SQLiteでも出来るだろうという事で調べてみました。 結論から言うとSQLiteで使えるCSVのインポート/エクスポートは制約が強くて使い辛いです。というのも、カラムの文字列内にセパレータ(標準ではカンマ)が含まれている場合は、クォートされていても、セパレータとして認識されてしまい、正常なcsvとして扱われないからです。(例えば”Hi, Nice to meet you.”は２カラムとして扱われます。) ちなみにSQLite標準のインポート／エクスポートは以下のように行います。 # 標準で以下のようにインポート／エクスポートできるが、セパレータが上手くパースされない .mode csv table_name # エクスポート S
RailsでSqliteからMysqlにデータを移行する方法 - Life on Rails
最近のRailsではデフォルトのDBがsqliteになっている。このsqliteを使い続けていくと「ガッカリだよ！」な状態になる。そこでsqliteからmysqlに移行しようと思う。 sqlite2mysqlなものを探してみると以下のものが見つかる。 暮らしの業(2006-10-19) http://donrails.araki.net/archives/id/5359 どちらのプログラムも、sqliteの.dumpでダンプしたSQLファイルをmysql向けに修正してくれるスクリプトだ。 今回、これらのスクリプトを利用しようとしたが、肥大化したsqliteダンプを脆弱なVPSで処理しようとしたら、メモリを全て食い尽くそうとする始末。 Railsではsqliteもmysqlも簡単に扱えるので、Rails上でやってみた。 script/copy.rb module Dev class Entr
sqlite3からMySQLへデータを移行 - 第2.5地区
sqlite3からMySQLへデータを移行 移行作業をしたので、メモ。 sqlite3のデータをdumpする sqlite> .output /home/xxxxx/dump.sql sqlite> .dump テーブル名 sqlite> .q dumpしたデータdump.sqlを整形 今回はMySQLに空のテーブルを予め作ってあるので、 CREATE TABLEを削除。 トランザクション部分も削除 BEGIN TRANSACTION; COMMIT; INSERT INTO "テーブル名" VALUES( は INSERT INTO テーブル名 (カラム名1, カラム名2, ....) VALUES( とする MySQLにインポート mysql> use データベース名 mysql> set names 文字コード mysql> source dump.sql
Sqliteで重複レコードを削除するには。 - require_twice
Sqlite3で実行。idとtitleで比較。 <?php require_once 'Zend/Db.php'; $db = Zend_Db::factory('Pdo_Sqlite', array( 'dbname' => "sample.db" )); $sql = "CREATE TABLE temptable as SELECT * FROM testtable GROUP BY id, title"; $db->getConnection()->exec($sql); $sql = "DROP TABLE testtable"; $db->getConnection()->exec($sql); $sql = "ALTER TABLE temptable RENAME TO testtable"; $db->getConnection()->exec($sql); echo"d
Pragma statements supported by SQLite - Third impact
PRAGMA command は、SQLite ライブラリの動作を変更したり （テーブル以外の）内部データについてライブラリに問い合わせるために使う特殊な コマンドです。 PRAGMA コマンドは、（SELECT、INSERT のような）他の SQLite コマンドと同じ インターフェースを使って発行しますが、以下の重要な点が異なっています。 将来のリリースにおいて特定のプラグマステートメントが廃止されたり、他のものが追加されたり するかもしれません。 注意して使用してください。 未知のプラグマを発行してもエラーメッセージは生成されません。 未知のプラグマは、単に無視されます。 これは、プラグマステートメントにタイプミスがあったとしても、ライブラリはその事実を 通知しないということを意味します。 いくつかのプラグマは、実行時ではなく SQL をコンパイルする間に効果を発揮します。 これは、
SQLiteバージョン3のC/C++インタフェース - Third impact
1.0 概要 SQLiteバージョン3.0は、SQLite2.8.13を基にしていますが、 ファイル形式とAPIに互換性を持たないSQLiteの新バージョンです。 SQLiteバージョン3.0は以下の要望に答えるために作成されました。 UTF-16のサポート。 ユーザ定義可能なテキスト照合順序。 索引つきのカラムに BLOBを格納する能力。 これらの機能を実装するためには、 データベース・ファイル形式への非互換な変更を必要とするので、 バージョン 3.0へ移行する必要がありました。 同時に、非互換な変更を一気に片づけるのが良いだろうという理屈で、 APIのクリーンアップなどの他の非互換な変更を導入しました。 バージョン 3.0のAPIは、バージョン2.X APIと似ていますが、 いくつかの大きな変更も伴います。 最も著しいのは、すべてのAPIファンクションとデータ構造の最初につく
sqliteのvacuum。auto_vacuum危険 — ありえるえりあ
Recent entries Apache2.4のリリース予定は来年(2011年)初め(あくまで予定) inoue 2010-12-23 Herokuの発音 inoue 2010-12-20 雑誌記事「ソフトウェア・テストPRESS Vol.9」の原稿公開 inoue 2010-12-18 IPA未踏のニュース inoue 2010-12-15 労基法とチキンゲーム inoue 2010-12-06 フロントエンドエンジニア inoue 2010-12-03 ASCII.technologies誌にMapReduceの記事を書きました inoue 2010-11-25 技術評論社パーフェクトシリーズ絶賛発売中 inoue 2010-11-24 雑誌連載「Emacsのトラノマキ」の原稿(part8)公開 inoue 2010-11-22 RESTの当惑 inoue 2010-11-22 「プ
SQLite3インストールメモ - ZAPAブロ〜グ2.0はてな版
SQLite home pageからsqliteの最新版をダウンロード。 Source Codeに同梱されているREADMEを開く。 tar xzf sqlite.tar.gz ;# Unpack the source tree into "sqlite" mkdir bld ;# Build will occur in a sibling directory cd bld ;# Change to the build directory ../sqlite/configure ;# Run the configure script make ;# Run the makefile. make install ;# (Optional) Install the build productsこの手順に従ってインストール。 wget http://www.sqlite.org/sqlite-3
rvm上にrailsのインストール-[colinux+debian lenny+rvm] « meemeer
前回sinatraを試した（テキストを表示しただけでしたが）けれど railsは触らなかったので入れてみてつまずいた部分のメモ。 必要そうなものをインストール
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Mysql Comment not support in sqlite3. added erase comments on line 75.
SQLiteで複数DBへの同時接続 - 気の向くままに・・・
https://www.getnext.net/wp/?p=1213
Rails3.1でSQLite3のエラー | CATLET
Sqlite-3 error while running ROR application
http://www.cpa-lab.com/tech/046