369
LLM Stats
実運用性能を測る独立系大規模言語モデル評価基盤
LLM Statsは、大規模言語モデルの実運用性能を比較したい利用者に、独立評価とベンチマーク結果を提供する事業である。学習データに含まれる従来型の評価とは異なるベンチマークを実施し、結果のアーカイブとモデルの順位表を構築する。収益モデル、課金方法、価格、顧客獲得チャネルは公開情報に記載がない。チームは2人で、売上高や利益などの財務数値も開示されていない。幅広いベンチマーク結果の蓄積と、学習データへの混入を防ぐ独立評価が強みである。一方、評価の信頼性や網羅性の維持には継続的な運営が必要であり、小規模なチームであることや収益基盤が不明な点がリスクとなる。