CSV/ParquetファイルをSQLで分析可能な「MySQL HeatWave Lakehouse」、2023年前半に提供
日本オラクルは2022年12月16日、CSV/Apache Parquetファイル向けSQLエンジン「MySQL HeatWave Lakehouse」について説明した。オブジェクトストレージ上にあるファイル形式のデータに対してSQLで分析をかけられる。SQLエンジンには、高速データベース「MySQL HeatWave」を使う。2022年10月に開催したプライベートイベント「Oracle CloudWorld 2022」で発表したサービスであり、現在ベータ版を提供中。2023年前半に一般提供開始を予定している。 日本オラクルの「MySQL HeatWave Lakehouse」は、CSV(カンマ区切り形式)ファイルやApache Parquetファイルなどのファイル形式データをSQLで分析可能なデータベースエンジンである(図1)。オブジェクトストレージ上にあるファイル形式のデータに対してSQLで分析をかけられる。SQLエンジンには、高速データベース「MySQL HeatWave」を使う。現在ベータ版を提供中であり、2023年前半に一般提供開始を予定している。 図1:「MySQL HeatWave Lakehouse」の概要(出典:日本オラクル)拡大画像表示 ファイルから得たテーブルとRDB上で管理しているテーブルをJOIN(結合)する、といったことも可能である。オブジェクトストレージのデータ転送速度に合わせてオブジェクトストレージからのデータのロード速度を自動で制御する、といった機能も備える。オブジェクトストレージごとの性能のばらつきを吸収する仕掛けも備える(図2)。 図2:オブジェクトストレージからデータを高速に取り込む仕掛けの例(出典:日本オラクル)拡大画像表示 背景について日本オラクルは、分析すべき多くのデータが、RDBMS(リレーショナルデータベース管理システム)上ではなく、オブジェクトストレージ上にファイル形式で置かれている、という現状を指摘する。IoTセンサーデータや業務データなどである。RDBMSに取り込まない限り、このままではSQLで分析できない。これをSQLで分析できるようにする製品としてMySQL HeatWave Lakehouseを用意した。 MySQL HeatWave…
