Dellows News

ONESTRUCTIONが建設分野特化の生成AI比較サイトを公開

openBIMを中心とした建設分野のソリューションを開発するONESTRUCTION株式会社は、国内外の主要な生成AIモデルが建設分野の業務にどこまで対応できるのかを比較するWebサイト「Construction AI Leaderboard」を公開しました。公開時点では、商用モデルと公開モデルをあわせた20モデルを対象に、建設業務に即した5つのカテゴリで評価を実施しています。

経済産業省およびNEDO(国立研究開発法人新エネルギー・産業技術総合開発機構)が推進する国内生成AI開発力強化プロジェクト「GENIAC」の第3期・第4期に採択された同社は、建設ドメイン特化型の生成AI基盤モデル「Ishigaki」の開発を手がけています。この開発で培った評価の知見を生かし、各モデルの特性を可視化して業務や目的に合った選定を支援する目的でサイトを立ち上げました。

建設業務に即した評価基準と対象モデル

リーダーボードとは、一定の評価基準やベンチマークに基づいて複数のAIモデルの性能を比較し、結果をランキング形式などで公開する仕組みです。「Construction AI Leaderboard」では、この仕組みを建設分野に特化させ、共通の評価基盤と同じ手順を用いて各モデルを評価しています。

公開時点で設定されている評価カテゴリとタスク数は以下の通りです。

  • BIM情報要件(IDS)の作成(Ishigaki-IDS-Bench、166問)
  • 図面・資料の理解(AEC-Bench、196タスク)
  • BIMデータの理解(IFC-Bench-V2、514問)
  • BIMデータの編集(BIM-Edit、324タスク)
  • 積算などの建設知識(CEQuest、134問)

なお、「BIM情報要件(IDS)の作成」カテゴリには、国際会議「CIKM 2026」に採択された同社の論文で提案したベンチマーク「Ishigaki-IDS-Bench」が用いられています。評価対象は、OpenAI、Google、Anthropicなどの商用モデルおよび公開モデルを含む計20モデルです。

2026年10月時点の評価結果

公開時点となる2026年10月の評価では、カテゴリによってモデルの得意・不得意が大きく分かれる傾向が見られました。

総合ランキングではClaude Opus 5.5が73.7点、Gemini 4 Argonが73.6点とほぼ並んで上位に立ち、汎用の大規模な商用モデルが上位を占めました。しかし、カテゴリ別の首位は5つのうち3つのカテゴリで異なるモデルとなっており、総合1位のモデルがすべての業務で最も優れているわけではない結果となっています。

また、積算などの建設知識では20モデルすべてが85点以上を獲得しモデル間の差が小さかった一方、図面・資料の理解とBIMデータの理解では最上位が60〜70点台にとどまり、小規模な公開モデルの中には一桁台となるものもあるなど大きな開きが生じました。さらに、BIM情報要件(IDS)の作成では汎用モデルの最高点でもClaude Opus 5.5による63.0点となり、首位の点数が5カテゴリの中で最も低い数値となりました。

※評価結果は公開時点のモデルと同社の評価条件におけるものであり、モデルの順位は各モデルを開発・提供する企業や組織の技術力の評価を示すものではありません。

今後の展開と運営企業

同サイトには今後、新しいモデルが公開されるたびに評価結果が追加される予定です。6つ目のカテゴリとして「図面からBIMを生成する能力(BIMGenBench (仮称)、Coming Soon)」の評価が後日公開されるほか、同社が開発する「Ishigaki」シリーズの他のモデルも順次掲載していくとしています。

発表元企業の概要は以下の通りです。

  • 社名:ONESTRUCTION株式会社
  • 本社:鳥取県鳥取市
  • 代表取締役:西岡大穂

本記事はONESTRUCTION株式会社の発表をもとに作成されています。

アクセスランキング

今日

1週間