行指向フォーマットは、データを1行単位で連続して記録するデータ構造形式です。機械学習やAI開発では、ログデータのリアルタイム書き込みやWeb APIを介した構造化データのやり取りによく利用されます。データの追加や個別のレコード参照に優れていますが、特定の列に絞った大規模な集計処理には不向きな側面があります。
行指向フォーマットとは
行指向フォーマットとは、データベースやファイル内において、データを1行（1レコード）ごとに連続して保存するデータ構造の形式です。
詳しく解説
行指向フォーマットは、1つのレコードに含まれる全項目をまとめてメモリやディスクに書き込む仕組みを持ちます。新規データの追加（インサート）や、特定の1件の全情報を取得する処理が非常に高速であるため、オンライン取引処理などのトランザクション処理に向いています。代表的な形式にはテキストベースのCSVやJSON、バイナリ形式のAvroがあります。AIや機械学習の現場では、ストリーミングで送られてくるセンサデータやログデータを順次蓄積・整形する前処理段階で頻繁に利用されます。
具体例・使われ方
Web APIを通じて顧客情報を受け取る際のJSONデータ処理や、ログ収集システムでアクセスログを1行ずつ順次追加書き込みしていく場面が挙げられます。また、AIモデルへの入力として1件ずつのエンティティに対する構造化データを扱う際にも使われます。
似た用語との違い
データ全体の特定の項目（列）だけを集中的に抽出・集計する場合は、列指向フォーマット（ParquetやORCなど）の方が効率的です。行指向フォーマットは1行の全項目をまとめて扱うのに対し、列指向フォーマットは同じ列のデータを連続して保持するため、大規模分析での読み込み速度や圧縮率で大きな差が出ます。
注意点
行指向フォーマットは、全列のデータを読み込む特性上、数百万件のデータから特定1列の項目だけを抽出して集計するような分析処理では、不要な列までディスクから読み出してしまいパフォーマンスが低下します。データパイプラインを設計する際は、蓄積・前処理・分析の各フェーズに応じて適切なフォーマットを選択することが重要です。