Jungle Java - データベース

『Hadoop』

Posted in クラウドコンピューティング (RSS), データベース (RSS), 書籍 (RSS)

O’Reilly Japan から「Hadoop」のガイドブックが発売されました。

・Jungle Java - Hadoop / hBase 関連情報メモ
・Jungle Java - MapReduce をSQLライクに操作する Apache Hive

（01/29 追記）
・新しいことをしよう - 記者のつぶやき：ITpro

（02/05 追記）
・今週の Hadoop 系 — 最新情報 « Agile Cat — Azure & Hadoop — Talking Book

（02/17 追記）
・オライリーの「Hadoop」本発刊、翻訳者に裏話を聞きました－ Publickey

（03/11 追記）
・レポート：Hadoop Hacks Night詳細レポート［前編］｜gihyo.jp

Posted on 2010年01月27日

MapReduce をSQLライクに操作する Apache Hive

Posted in クラウドコンピューティング (RSS), データベース (RSS)

「Apache Hive」は、「Apache Hadoop」上に構築されたデータウェアハウス（Data Warehouse：DWH）向けのプロダクトです。もともとは Facebook によって開発され、Apache Software Foundation（ASF）に寄贈されました。「HiveQL」というSQLライクな言語で「Apache Hadoop」上のデータを操作することができます。

・Jungle Java - Hadoop / hBase 関連情報メモ
・Jungle Java - 『WEB+DB PRESS Vol.50』

（01/21 追記）
・GoogleがMapReduce特許を取得。Googleは用途についてコメントせず - Wataru’s Blog
・グーグルがMapReduce特許を取得。Hadoopへの影響は？－ Publickey

Posted on 2010年01月20日

MongoDB 関連情報メモ

Posted in データベース (RSS)

「MongoDB」に関する情報をメモ。どうやら、「CouchDB」とよく似たタイプの非リレーショナルデータベースのようです。

・Jungle Java - P2P に適した軽量ドキュメントデータベース CouchDb
・Jungle Java - CouchDB 関連情報メモ

Posted on 2009年12月14日

Windows Azure を少しだけ試してみた (1)

Posted in クラウドコンピューティング (RSS), データベース (RSS)

トークンを受け取ったので、さっそく「Windows Azure Developer Portal」へアクセスして、ログインを行いましたが、いきなり問題発生！
同サイトで「Windows Azure」のプロジェクトを新規作成することができませんでした。「Summary」画面では「+ New Service」リンクが表示されず、「Account」あるいは「Help and Resources」画面で表示される「+ New Service」リンクをクリックしても「Summary」画面に戻るだけです。

..ということなので、「Windows Azure」はパスして、「SQL Azure」にチャレンジ。
とりあえず、「Microsoft SQL Server 2008 Management Studio Express」を用いて、ログイン時に既に作成されていたデータベースに接続し、照会することはできました。

備考：
(1) 「Firefox 3.5」上でデータベースの「Firewall Settings」に失敗。拡張機能「IE Tab」によってレンダリングエンジンを IE に切り替えたら成功しました。

(2) 「Windows XP」に「Microsoft SQL Server 2008 Management Studio Express」をインストールするためには、事前に「Windows PowerShell」及び「Windows Installer 4.5」のインストールが必要でした。

（12/11 追記）
下記の記事を参考にして、JDBC 接続も確認してみました。

・Groovy から SQL Azure に JDBC で接続してみた - おだのスペース
・Azure上のテストコードの整理ついでにWorkerRoleから起動したTomcatで、JDBCを使ってSQL Azureへ接続 - Usa*Usa日記

（2010/01/13 追記）
・SQL Azureの機能と制約を理解する－＠IT

（2010/01/23 追記）
・SQL Azureを実際に活用する－＠IT

Posted on 2009年12月09日

Amazon Relational Database Service が公開

Posted in クラウドコンピューティング (RSS), データベース (RSS)

Amazon Web Services が、クラウド上で「MySQL」をホスティングする「Amazon Relational Database Service (Amazon RDS)」というサービスを公開しました。

・Jungle Java - 『週刊東洋経済2009/08/29号』
・Jungle Java - 『WEB+DB PRESS Vol.50』
・Jungle Java - SSD とデータベース

（10/29 追記）
・Amazon RDSメモ - Sooey
・masuidrive on rails - AmazonがMySQL 5.1をサービス化 – Amazon RDS

（12/10 追記）
・Amazon RDSの運用メモ - スティルハウスの書庫

（12/11 追記）
・【SaaS World 2009】Amazon Web Servicesのキーマンが語る「クラウド・ビジネスのねらい」 - Computerworld.jp

（12/24 追記）
・InfoQ: Amazon RDS: Cloud サービスとしての MySQL データベース

Posted on 2009年10月27日

SSD とデータベース

Posted in クラウドコンピューティング (RSS), データベース (RSS), 書籍 (RSS)

『WEB+DB PRESS Vol.52』に「～SSD投入で何が変わるのか？～　データベースシステム基本解剖」という特集記事が掲載されています。

・漢(オトコ)のコンピュータ道: 高速SSDの落とし穴。データベースで利用するときはご注意を！
・SSDだとOracleは速い？サンの技術者がベンチ公表－＠IT
・SSDを搭載可能なIBMの新ストレージ製品とDB2 | Unofficial DB2 BLOG
・RethinkDBはSSD向けに最適化されたMySQL用ストレージエンジン
・SSDに最適化したデータベース「RethinkDB」、ロックもログも使わずにトランザクション実現－ Blog on Publickey
・インメモリデータベースがクラウド時代の主流になるという期待－ Blog on Publickey
・キャッシュの大きいRDB vs インメモリデータベース、性能がどれだけ違うのか調べてみると－ Blog on Publickey

（09/02 追記）
・グーグルはリレーショナルデータベースをクラウドに乗せるか－ Blog on Publickey
・ぶいてく: 【クラウドコンピューティング】 RDBをクラウドに載せるべきか

・Cloudy Days: RDBとキー・バリューストア
・ＡＳＩＤ特性が必要な場合ＲＤＢ，いらなければファイルで、それらを意識せずアクセスしない？ - ウィリアムのいたずらの開発日記
・曖昧スラッシュ » 分散KVSとRDBの宿命
・tdtshのブログ » DOA、RDB と Key Valueストア(KVS)について

・Jungle Java - Google App Engine がついに Java をサポート
・Jungle Java - 『WEB+DB PRESS Vol.50』
・Jungle Java - DataNucleus で GAE/J の永続化

（09/03 追記）
・グーグル「Google App EngineにRDB採用の予定はない」と明言－ Blog on Publickey

Posted on 2009年09月01日

Stax Networks を少しだけ試してみた (3)

Posted in Java (RSS), クラウドコンピューティング (RSS), データベース (RSS)

「Stax Networks」ではデータベースの管理もとても簡単です。データベースの作成は、「Stax AppConsole」で「Create DB」ボタンをクリックして、データベース名、ユーザ名及びパスワードを入力すればOKです。

作成されたデータベースの情報を表示すると、サーバのアドレスなどが表示されます。

この情報に基づいて普段使用しているデータベース管理ツールでアクセスすれば、テーブルの作成などを実行することができます。

Posted on 2009年07月12日

GAE 上に簡単にデータベースアプリを作成できる Degino

Posted in Web2.0 (RSS), クラウドコンピューティング (RSS), データベース (RSS)

「Google App Engine」上に簡易的なデータベースアプリケーションを短時間で作成することができる「Degino」というサービスが登場しました。「Zoho Creator」などとよく似たサービスですが、「Google App Engine」を使用している点が興味深いですね。

・Jungle Java - Zoho Creator でWeb上に簡易データベースを作成
・Jungle Java - Zoho DB & Reports 登場
・Jungle Java - Google App Engine がついに Java をサポート
・Jungle Java - DataNucleus で GAE/J の永続化

Posted on 2009年06月28日

DataNucleus で GAE/J の永続化

Posted in Java (RSS), クラウドコンピューティング (RSS), データベース (RSS)

「Google App Engine」では、Java の永続性プラットフォームとして「JDO（Java Data Object）」及び「JPA（Java Persistence API）」を使用することができます。オープンソースの JDO / JPA 実装である「DataNucleus Access Platform」が利用されているようです。

・だらだら備忘録: Datastore Java API Overview
・だらだら備忘録: Using JDO with App Engine
・だらだら備忘録: Defining Data Classes
・だらだら備忘録: Creating, Getting and Deleting Data
・だらだら備忘録: Queries and Indexes
・だらだら備忘録: Transactions
・だらだら備忘録: Relationships
・だらだら備忘録: KeyとかIDとか

・Jungle Java - Google App Engine がついに Java をサポート
・Jungle Java - 『WEB+DB PRESS Vol.50』

（05/21 追記）
・実開発で分かったGoogle App Engine for Javaの“すごさ”：ITpro
・Google App Engine デベロッパーガイド日本語訳 Wiki - トップページ

（05/28 追記）
・BigtableデータをApp EngineのJSPで日本語表示 - ＠IT
・Google App Engine for Javaを使ってみよう！　（5）Datastore Java API：CodeZine

（06/17 追記）
・Datastoreのtips - スティルハウスの書庫
・トランザクションとエンティティグループ - スティルハウスの書庫
・BigtableによるDatastoreの実装 - スティルハウスの書庫
・Datastoreによるクエリの実装 - スティルハウスの書庫
・Bigtableの内部構造 - スティルハウスの書庫

（06/19 追記）
・クラウド環境ではデータベースは「非正規化」して使う？－＠IT

（06/30 追記）
・App EngineをjQueryでAjax化しBigtableをCRUD操作 - ＠IT

（07/17 追記）
・コレクションフィールドとDWRで、GAEjを業務用に進化 - ＠IT

（07/21 追記）
・新・たけぞう瀕死の日記

（09/09 追記）
・素朴なBigtable、できることできないこと - ＠IT

Posted on 2009年05月19日

『WEB+DB PRESS Vol.50』

Posted in クラウドコンピューティング (RSS), データベース (RSS), 書籍 (RSS)

『WEB+DB PRESS Vol.50』に「key-valueストア入門」という特集が掲載されています。

・Jungle Java - CouchDB 関連情報メモ
・Jungle Java - Amazon SimpleDB 関連情報メモ
・Jungle Java - Hadoop / hBase 関連情報メモ

（07/03 追記）
・もう1つの、DBのかたち、分散Key-Valueストアとは - ＠IT

（11/10 追記）
・NoSQLデータベースを40種類以上リストアップ、キーバリュー型にもいろいろある－ Publickey

（11/11 追記）
・「NoSQL」は「Not Only SQL」である、と定着するか？－ Publickey

（2010/01/18 追記）
・key-valueストアの基礎知識

（2010/01/31 追記）
・クラウド時代のデータべース新潮流：変化するデータベース (4/4) - ITmedia エンタープライズ

（2010/03/08 追記）
・MySQL+Memcachedの時代は過ぎ、これからはNoSQLなのか、についての議論－ Publickey
・Twitter が Cassandra を選んだ理由 ? MyNoSQL ≪ Agile Cat ? Azure & Hadoop ? Talking Book

Posted on 2009年05月19日

Jiemamy v0.2.0 リリース

Posted in Eclipse (RSS), データベース (RSS)

データベースに対するリファクタリングを支援する Eclipse プラグイン「Jiemamy v0.2.0」がリリースされました。

・Jungle Java - ER図作成のための Eclipse プラグイン

Posted on 2009年05月07日

サーバサイドJavaScriptを支援する Persevere

Posted in Ajax (RSS), データベース (RSS)

「Persevere」は、「Aptana Jaxer」と同様サーバサイドで動作する JavaScript アプリケーションの開発を支援するフレームワークで、JSON データベースも提供しています。試したことはありませんが、最新版では高いパフォーマンスとスケーラビリティを実現したとのことです。興味深いですね。

・Jungle Java - Aptana がAjaxサーバの Jaxer を公開
・Jungle Java - CouchDB 関連情報メモ

（04/30 追記）
・MOONGIFT: » これが新時代のJavaScriptなのか…サーバサイトJavaScriptフレームワーク「Ejscript」

（08/12 追記）
・MOONGIFT: » ServerJS標準に則ったJavaScriptライブラリ「Narwhal」

（12/02 追記）
・【ハウツー】Persevere実践チュートリアル - 注目のJavaScriptアプリケーションサーバが1.0に | マイコミジャーナル

Posted on 2009年04月29日

Hadoop / hBase 関連情報メモ

Posted in クラウドコンピューティング (RSS), データベース (RSS)

非リレーショナル・データベースの代表といえば、やはり Google の大規模分散ファイルシステム「Google File System」上に構築された「BigTable」でしょうか。これに倣ったオープンソースインフラストラクチャを開発しようとするのが「Hadoop」プロジェクトであり、「Google File System」に相当するのが「Hadoop Distributed File System（HDFS）」、「BigTable」に相当するのが「hBase」となります。
1ヶ月ほど前に「Hadoop」を利用した「Amazon Elastic MapReduce」というサービスを Amazon が開始したことでも話題となってますね。

・MapReduceのJava実装Apache Hadoopを使ってみた - @IT
・HBase 入門 (1) - こども(てれび)
・HBase 入門 (2) - こども(てれび)
・Hadoopで、かんたん分散処理 (Yahoo! JAPAN Tech Blog)

・アマゾン、ウィザードだけで使えるHadoopサービス開始－＠IT
・アマゾン、「Hadoop」を利用した「Amazon Elastic MapReduce」のベータサービスを開始:ニュース - CNET Japan
・Amazon、クラウド・コンピューティングで大規模並列分散処理エンジンHadoopをサポート

・Jungle Java - Google App Engine がついに Java をサポート
・Jungle Java - CouchDB 関連情報メモ
・Jungle Java - Amazon SimpleDB 関連情報メモ

（04/24 追記）
んー、なんというか、ITの世界においても量子論的なものの見方が必要になってきたのかもしれません。うまく説明できませんが、そうした "時代の空気" のようなものを感じます。大規模分散データ処理というコンピュータシステムの視点から見てもそうですが、Web2.0が重視する「集合知」という概念も量子論的ですよね。

（05/13 追記）
・株式会社スターロジックの羽生章洋が書いてるブログ:クラウド時代のデータベース

（07/22 追記）
・HadoopDB Project

（08/01 追記）
・Silicon Soul » HadoopDB
・Silicon Soul » HadoopDBのアーキテクチャ

（09/02 追記）
・Pig on Hadoop - kuangue’s blog
・HadoopをRDBのように扱う、Hadoop+Hive －エンジニアが作る最新ITブログ by DODA
・Hadoop＋Hive検証環境を構築してみる－＠IT

（10/05 追記）
・Amazonクラウドが大規模分散処理の機能を強化。SQLライクな検索ができるHiveを搭載へ－ Publicke

（10/27 追記）
・Hadoop World Report：優良企業はなぜHadoopに走るのか - ITmedia エンタープライズ

（11/04 追記）
・Hadoopの最新動向を「Hadoop World:NY 2009」の資料から（前編）－ Publickey
・Hadoopの最新動向を「Hadoop World:NY 2009」の資料から（後編）－ Publickey

（11/06 追記）
・Hadoopが秘める可能性：オンプレミスでもクラウドでも使えるプラットフォームの魅力 - builder by ZDNet Japan

（11/17 追記）
・分散処理ソフト「Hadoop」のユーザー会が日本で発足、企業の導入が広がる - ニュース：ITpro

（11/24 追記）
・Hadoopカンファレンスに行って来ました！ - おおたに6号機blog

（2010/01/20 追記）
・Welcome to Apache Hadoop!（翻訳）
・【IT用語】MapReduceとHadoop
・Hadoop入門
・O’Reilly の Hadoop 本が、1月23日に日本で発売！ ≪ Agile Cat ? Azure & Hadoop ? Talking Book

Posted on 2009年04月23日