SimPoint を使った RISC-V サイクル精度シミュレーションのパイプラインを整備していると、あるスケール上の問題が見えてきた。SPEC CPU2006 の全ベンチマーク × 全 SimPoint 数だと、SIFT トレースファイルの総量がディスクを圧迫するのだ。
現在の構成は以下の2段階になっている。
フェーズ1: QEMU → SIFT ファイル (ディスク) フェーズ2: SIFT ファイル → Sniper シミュレーション
SIFT ファイルは SimPoint 1区間あたり数百 MB〜数 GB になることがある。SimPoint 数が数百に上ると、ストレージ消費が現実的な問題になる。そこで「QEMU と Sniper を FIFO で直結して、ディスクに書かずにリアルタイムでシミュレーションできないか?」という疑問が生まれた。
Sniper の SIFT 入出力アーキテクチャを読む
Sniper のソースを読むと、SIFT のフロントエンドとバックエンドは明確に分離されている。
フロントエンド (SIFT 生成側) バックエンド (Sniper 側) ┌──────────────────────┐ ┌──────────────────────────────┐ │ qemu_frontend.cc │ │ trace_manager.cc │ │ Sift::Writer で書き出し│──SIFT──▶│ Sift::Reader で読み込み │ │ output_file= で指定 │ │ trace_prefix= で指定 │ └──────────────────────┘ └──────────────────────────────┘
この「SIFT」の部分がファイルパスである必要はない。FIFO (名前付きパイプ) でも std::ifstream / Sift::Writer はそのまま動く。
Sniper 側の FIFO 生成コード
trace_manager.cc を見ると、FIFO を作成する仕組みがすでに実装されている。
// trace_manager.cc:70-76 String TraceManager::getFifoName(app_id_t app_id, UInt64 thread_num, bool response, bool create) { String filename = m_trace_prefix + (response ? "_response" : "") + ".app" + itostr(app_id) + ".th" + itostr(thread_num) + ".sift"; if (create) mkfifo(filename.c_str(), 0600); return filename; }
trace_prefix にプレフィックスを渡すと、<prefix>.app0.th0.sift と <prefix>_response.app0.th0.sift という FIFO を mkfifo() で作成する。Sniper はここから読む。
QEMU フロントエンド側の出力先
qemu_frontend.cc の output_file オプションも単なるファイルパスとして扱われている。
// qemu_frontend.cc:149 parse(output_file, "output_file", argv[index])
つまり output_file=/tmp/trace と指定すれば、/tmp/trace.app0.th0.sift に書き出す。これが FIFO であっても構わない。
インフラは揃っているが、スクリプトが繋がっていない
run-sniper と record-trace を読むと、QEMU フロントエンドが record-trace に登録されていないことがわかる。
# record-trace:223-265 if frontend: if 'pin' in frontend: # Pin (x86) elif 'dr' in frontend: # DynamoRIO (x86) elif 'rv' in frontend: # RV8 (RISC-V) elif 'spike' in frontend: # Spike (RISC-V) else: print('Error: frontend %s not recognized' % frontend) # ← 'qemu' のケースが存在しない
run-sniper では --frontend= と --traces= は排他的に扱われるため、現状のスクリプトを使う限り「QEMU を動かしながら Sniper に流す」というワンライナーは書けない。
整理すると、現状は以下のようになっている。
| コンポーネント | 状況 |
|---|---|
Sniper 側の FIFO 読み込み (trace_manager.cc) |
実装済み |
Sniper 側の FIFO 作成 (getFifoName()) |
実装済み |
SIFT Reader (std::ifstream) |
FIFO パスでも動作 |
QEMU フロントエンド (output_file=) |
FIFO パスでも動作 |
record-trace の QEMU 対応 |
未実装 |
run-sniper のワンライナー |
未実装 |
インフラは揃っているが、スクリプトが繋がっていない状態だ。
手動で繋げばリアルタイムパイプは動く
スクリプトを経由せずに手動で組むと、ディスク書き出しなしのリアルタイム接続が実現できる。
手順
# 1. FIFO を作成 (Sniper が読む側と、応答用の2本) mkfifo /tmp/trace.app0.th0.sift mkfifo /tmp/trace_response.app0.th0.sift # 2. Sniper をバックグラウンドで起動して FIFO を待ち受け ./run-sniper \ -c config/riscv.cfg \ -g --traceinput/enabled=true \ -g --traceinput/trace_prefix=/tmp/trace \ -g --traceinput/num_apps=1 \ -g --traceinput/stop_with_first_app=true & # 3. QEMU を起動して同じ FIFO に書き込み qemu-riscv64 \ -plugin /path/to/libqemu-frontend.so,\ output_file=/tmp/trace,response_files=on,\ fast_forward_target=<FF_COUNT>,detailed_target=<DETAIL_COUNT> \ ./target_binary
Sniper 側が FIFO のオープンでブロックし、QEMU 側が書き始めるとデータが流れてリアルタイムでシミュレーションが走る。
これが有効なシナリオとそうでないシナリオ
有効なシナリオ: 1 SimPoint を逐次実行する場合
QEMU → Sniper を 1対1 で直結するため、1つの SimPoint を実行するごとに QEMU と Sniper のプロセスペアを起動する形になる。ディスクに SIFT ファイルを書かないので、ストレージ消費がほぼゼロになる。
SimPoint #1: QEMU ─FIFO─▶ Sniper → sim.out SimPoint #2: QEMU ─FIFO─▶ Sniper → sim.out SimPoint #3: QEMU ─FIFO─▶ Sniper → sim.out ...
有効でないシナリオ: 多数の SimPoint を並列実行する場合
現在の2段階方式は、SIFT ファイルをいったん全部生成しておいてから、SimPoint 数 × ベンチマーク数の並列度でジョブを投げる構成だ。
フェーズ1 (QEMU × 全SimPoint): 並列生成 → SIFT ファイル群 フェーズ2 (Sniper × 全SimPoint): 並列実行 → sim.out 群
FIFO 方式に切り替えると QEMU と Sniper が 1対1 になるため、並列化の単位が「QEMU+Sniper のペア」になる。SimPoint 数が多い場合、QEMU とシミュレーションを同時に回すためのリソースが2倍必要になる点に注意が必要だ。ただし SIFT ファイルを溜め込む分のストレージを節約できるので、ディスクがボトルネックになっている環境では十分に有効な選択肢になる。
まとめ
- SIFT ファイルは 1 SimPoint あたり数百 MB〜数 GB になり、全ベンチマーク・全 SimPoint 分を溜めるとディスクを圧迫する
- Sniper の FIFO インフラ (
trace_manager.cc:getFifoName()) と QEMU フロントエンドのoutput_file=オプションはどちらも FIFO パスに対応している - 現状の
record-trace/run-sniperスクリプトは QEMU フロントエンドを登録していないため、スクリプトのワンライナーでは動かない - 手動で FIFO を作成して QEMU と Sniper を並べて起動すれば、ディスクを使わないリアルタイムシミュレーションは実現できる
- 並列実行の単位が「QEMU+Sniper のペア」になるため、多数 SimPoint を並列投入したい場合は設計上の注意が必要