Weaviate v1.39.9 の LSM ストアのパフォーマンス改善

ツール・基盤

Weaviate v1.39.9 の LSM ストアのパフォーマンス改善

スポンサーリンク

Weaviate v1.39.9が公開。LSM ストアの書き込みログ再生が高速化。

この記事のポイント

  • 大きな書き込みログを分割し高速化
  • ログをセグメントの連続として再生する
  • パフォーマンス改善。他の修正は別件

どこで使えるか

バックアップ取得後の復旧を速めたい人向け。ログ再生のオーバーヘッドを減らせる GitHubで公開済み v1.39.9で入る

スポンサーリンク

解説

かみくだいて説明します

GitHubでantas-marcinが2026年10月5日に公開したweaviate v1.39.9では、LSMストアと呼ばれるデータの保存層の書き込みログの再生を、セグメントの連続として処理する仕組みが入りました。
LSMストアは、データベースの内部でデータをどう並べているかという話ですよね。
そうです。ディスクへの書き込みを一旦メモリに溜めてから、まとめてファイルに書き出すやり方です。これまでは大きなログが出た時に順番に追いかけて処理していましたが、今回はそれをまとまった塊として一気に渡すように変えました。
なるほど。では、この変更を入れることで、処理速度はどれくらい変わりますか?
具体的な数値はここには書かれていません。ただ、ログの再生にかかる時間が短縮され、システム全体が止まる時間が減ると見ています。
なるほど。では、エラーが起きた時にシステム全体が止まるのを防ぐ仕組みも、このバージョンで強化されていますか?
そうです。エラーグループがコールバックを走らせるあらゆる経路で、パニックからの回復を必ず行うようにしました。
なるほど。では、バックアップの取得条件も緩くなったんですか?
はい。これまでコレクションが一つも無い状態でバックアップを取ろうとするとエラーが出ていましたが、今回はそれを許可するようにしました。
HNSWは、似たデータを高速に見つけるための仕組みですよね?
正確には、データを多次元の空間に置いて、近い距離にある物を素早く引き出すグラフ構造です。今回の修正は、その引き出しの奥まで余計な物を詰め込まないようにした話になります。
なるほど。破壊的変更はないんですか?
破壊的変更も新機能もありません。既存のシステムを壊さずに、安定性と速度だけを上げる修正が中心です。
最後に、この修正が入るのは、既存のユーザーだけですか?
既存のユーザーがアップデートする形で適用されます。バックアップやエラーグループ、LSMkvの修正など、既存ユーザー向けの改善が含まれています。

出典

この記事のもとになった情報

※ 本文と音声は生成 AI が作成しています。内容は出典をご確認ください。
本作品のキャラクターには株式会社Live2Dの著作物であるサンプルデータが株式会社Live2Dの定める規約に従って用いられています。本作品は制作者の完全な自己の裁量で制作されています。このキャラクターモデルは株式会社Live2Dより許諾を得て商用利用しています。

スポンサーリンク

-ツール・基盤