Flutter GPU でフル 3D のアプリをリリースした話

Flutter GPU が Flutter 3.47 から stable チャンネルでも利用可能になった(API 自体はまだ実験的な扱い)ということで、自分も Claude Code の余っている利用枠でいろいろ試してみました。

特に外部のモデルファイルを利用せず、Claude Code が生成する Dart コードとシェーダーでどこまで表現できるか というチャレンジでいろいろ試していたところ、水や火、構造物など思っていた以上に多彩な 3D 表現が可能という発見がありました。

さらに 現実を再現するために参照可能な公開データを Claude Code に収集させる ことで、たとえば「ベルリンの街」や「月」「江戸」のように、実際には行ってみるのが難しい(or 不可能な)場所を再現してみるという試みもなかなか良い結果が出て、AI を使った新しい開発の可能性を感じています。

そんな遊びをしていたら、そういえば以前に 「イメトレ算数」というアプリ を作った時に「シリーズで理科も作りたいけど理科はもっとリアルな表現が必要だしな、、」と一度諦めていたことを思い出し、「Flutter GPU と Claude Code でここまで現実を再現できるならいけるのでは?」 ということでできたのが 「さわれる理科」 アプリです。

現在は App Store / Google Play のどちらでも公開されています。ダウンロードしたら即さわり始められますので、「Flutter GPU をフル活用したアプリ」に興味のある方はぜひ試してみてください。


さて、このアプリを作る上で力を入れた(Claude Code のトークンをたくさん消費した)のが以下の点です。

とにかく現実のデータを参照する

理科の実験や観察を題材にしたアプリにおいて最も大事なのが「現実を忠実に再現すること」だと思います。

現実を観察して理解する理科という科目をアプリにする以上、現実と異なる挙動や見た目は誤解に繋がるため可能な限り避けなければなりません。

そこで、Claude Code には 「とにかく実際の研究機関や器具メーカーなど然るべき団体が公開している研究結果や製品仕様、データ等を参照してから実装すること」 を毎回指示し、仕上げとして アプリの挙動の根拠としている計算式や仕様を ChatGPT にダブルチェックしてもらう という方法である程度の品質を担保するようにしています。

もちろんそれで完璧とは思いませんが、自分にはその正誤を判断する頭がない以上、いったん「誤りが含まれ得ることを利用規約でご了承」いただいた上で公開する、という判断です。もし誤りを見つけた際はご連絡ください。

パフォーマンス改善を何度もする

最初に Flutter GPU でいろいろ遊んでいた時は macOS のデスクトップアプリとして実行していたため、利用できる GPU は MacBook Pro のもので性能も当然モバイル端末より何倍も良い環境でした。

しかし今回の理科アプリはモバイル端末向けのアプリということで、fps をはじめとしたパフォーマンスやバッテリー消費はとてもシビアな問題となっています。

とはいえこの問題についてもやはり自分にチューニングのための知識がありませんので、ここも Claude Code 任せです。

具体的には「今どのような実装をしているか」「パフォーマンスを悪くする原因を特定するために実機で何の操作をして何を報告すれば良いか」「どこを妥協したら改善が見込める案を実現できるか」などを繰り返し質問し、それを元に「とにかく Claude Code に自由に端末を操作してもらって自動でパフォーマンスを計測し、改善に効く案を何度も試行錯誤してもらう」という方法で改善を試みています。

妥協の例として、今回のアプリは 「実験器具」についてはリアルな描画を追求する一方、何もアクションに影響しない背景については妥協して良い という感じでメリハリをつけつつ、なんとか限られたリソースをやりくりしています。

おかげで開発中よりは発熱も電池消費も少なく、ほとんどの状況でスムーズに動作するアプリになっていると思うのですが、どうでしょうか。こちらも「電池消費が激しい」「すごい発熱している」などありましたらご報告ください。


最後に、これは繰り返しいろいろなところで主張していますが、AI によって最も変わったのは「今まで作っていたようなアプリが効率的に作れるようになった」ことではなく「今まではコストや技術の問題で現実的に開発が不可能だったアプリが実現できるようになった」こと だと思っています。

今回の理科アプリにしても、私目線では 3D の知識も理科の知識もほとんどないから作れない、だからといってそれらの技術や知識がある開発者や企業が作るには採算の問題で作りづらい、そんな内容のアプリが AI の手助けによって個人開発でも実現可能になったというのは非常に大きな変化です。なにより そのメリットを享受できるのは開発者ではなく「今までにないアプリが利用できる」ようになった利用者 ではないでしょうか。

「AI の発達によって開発者の仕事がなくなってしまうのでは」と叫ばれて久しいですが、自分は「今まで開発が困難だったソフトウェアを実現する」仕事がその分増えるのではないかと考えています。そしてそれができるのは従来の限界を知っている開発者自身ではないかと思います。

という意味で、Flutter GPU は Flutter 開発者にとってゲームの領域に限らず幅広いアプリの表現力を広げる技術になると期待しています。AI の利用枠が余っている方はぜひ試してみてください。おすすめです。