Ink Studio は、ピクセル アートの外観でレンダリングする 3D シーンを作成するための JavaScript ツールキットです。符号付き距離場としてシェイプをスカルプトし、その表面をガウス スプラットにベイク処理し、その結果を静止画像、アニメーション フレーム、またはブラウザ キャンバスとしてレンダリングします。印象的なのは、意図的に分厚く限られたパレットの画像を保持しながら、立体的なシーンの周りでカメラを移動できることです。
このガイドでは、スプラットの機能、Ink Studio と写真ベースの 3D ガウス スプラッティングの違い、およびサンプルを自分でレンダリングする方法について説明します。基本的なコマンドラインの知識と Node.js が必要です。このツールキットには、それ自体で既製のビジュアル エディターは提供されません。
Ink Studio のピクセルアートはなぜ立体化されているのですか?
小さな石の祠とその上に浮かぶ生き物を思い浮かべてください。従来の 2D ピクセル アートでは、アーティストは必要なそれぞれの角度から見たイメージを描きます。代わりに、Ink Studio はオブジェクトを 3 次元で記述し、その表面をサンプリングし、カメラからそれらのサンプルをレンダリングします。最終的な画像は、パレットやその他のコントロールを使用して、外観を形作るのに役立つ低解像度のアート ピクセル グリッド上で解決されます。

パイプラインには 4 つの便利なステージがあります:
- シェイプをスカルプトします。 符号付き距離場 (SDF) を使用して、ボールやボックスなどのプリミティブを結合します。 SDF は、点がサーフェスからどのくらい離れているか、またその点がどちら側にあるかを記述します。ソリッドに穴を彫るなどの操作が便利になります。
- サーフェスをベイク処理します。 Ink Studio はジオメトリをサンプリングし、スプラットを書き込みます。
res設定はサンプリング間隔を制御します。一般に、値が小さいほどより多くのスプラットが生成され、ベイク処理とレンダリングの作業が増加します。 - スプラットをレンダリングします。 各サンプルは、指向性のあるガウス フットプリントに寄与します。 Ink Studio は、位置、密度、色、およびスプラットの形状を説明する共分散行列を他のデータとともに保存します。
- ピクセルの外観を解決します。 カメラ設定、照明、パレット ランプ、ディザリング、およびアート ピクセル解像度が画像に影響します。より高密度なサーフェスとより細かい最終ピクセル グリッドは異なるコントロールです。一方を変更しても、もう一方は自動的に修正されません。
これらは関連していますが、別の表現です。スプラットは正方形のピクセルやソリッド ボクセルではありません。これは、その寄与が画像に投影される 3D レンダリング プリミティブです。ブロック状の外観はレンダリング パイプラインの芸術的な結果であり、シーンが立方体から構築されているという証拠ではありません。
これは写真ベースの 3D ガウス スプラッティングとどう違うのですか?
2023 ガウス スプラッティング研究 は、マルチビュー画像からシーンを再構成およびレンダリングし、新しいビューを再現するために 3D ガウスを最適化する方法を示しています。 Ink Studio は、別のクリエイティブ ワークフローでガウス スプラットを使用します。つまり、ジオメトリを作成またはインポートし、それをスタイル化されたシーンにサンプリングします。これは、一連の写真からフォトリアリスティックな再構築をトレーニングすることと同じではありません。
| アプローチ | 出発材料 | 役に立ついつ |
|---|---|---|
| Ink Studio | コードまたは JSON で作成されたシェイプ。サポートされているジオメトリと深度の入力 | パーツを制御しながら、様式化されたシーンを構築してアニメーション化したいと考えています。 |
| 写真ベースの 3D ガウススプラッティング | 撮影したシーンの複数のビュー | 撮影した場所の様子を新しい視点から再現したい |
| ボクセルモデリング | 離散ボリュームセルのグリッド | デザインまたは編集ワークフローは、明示的に配置されたブロック状セルを中心としています。 |
選択は、シーンをどのように作成および編集するかです。ピクセル アートは画像の外観を表します。ガウス表現もボクセル グリッドも、優れたピクセル アートを自動的に保証するものではありません。
Ink Studio をインストールしてシーンをレンダリングする
公式インストール手順には、Node.js 18 以降が必要です。プロジェクト ディレクトリから、GitHub からパッケージをインストールし、バンドルされたシーンをリストします:
npm install github:siliconjungle/shapeshift-labs-ink-studio
npx ink-studio help
npx ink-studio scenes
次に、アニメーションの特定のポイントで Watcher のサンプルをレンダリングします:
npx ink-studio render watcher --t 2.6 --colored
npx ink-studio turn watcher --n 8 --t 2.6 --colored
npx ink-studio stats watcher
最初のコマンドは、通常は studio/out/ に PNG を書き込みます。 CLI はその宛先を報告します。 2 番目はマルチアングル シートを作成し、3 番目はスプラット数を含むシーン情報をレポートします。明示的な --out file.png はイメージ パスを選択します。正確な出力は、リポジトリの進化に応じて変化する可能性があります。

インストールが失敗した場合は、node --version、GitHub へのネットワーク アクセス、およびプロジェクト ディレクトリが書き込み可能かどうかを確認してください。結果が予期せず暗いか空である場合は、複数の設定を一度に変更する前に、上記の文書化されたシーンと時間を試してください。アニメーションは、特定の時点で表示される内容に影響を与える可能性があります。単一フレームをターンシートと比較し、CLI の出力パスを検査します。
ピクセルとして読み取り可能なシーンを構築する
焦点を当てた 1 つのオブジェクトと、そのシルエットが伝わるカメラ アングルから始めます。小さな神社のシーンの場合は、幅広の石のベース、浮いている目の形の生き物、およびアクセント カラーを 1 つ使用します。細かい彫刻を追加する前に、意図した表示サイズでシーンを確認してください。数アート ピクセル未満を占めるディテールは、カメラが動くと消えたり、ちらついたり、シルエットにノイズが発生したりすることがあります。
| 見たとき | 試してみる | 理由チェック |
|---|---|---|
| 隙間または不均一な表面被覆 | スカルプトの間隔を減らすres小規模なテスト。 | 高密度のサンプリングはカバレッジを向上させる可能性がありますが、作業が追加されます。スプラット数と画像を比較します。 |
| 泥だらけのシルエット | ジオメトリを単純化するか、オブジェクトとそのオブジェクト間のコントラストを増加します。周囲の環境。 | 意図したサイズでフォームが読みにくい場合、これ以上の詳細は役に立ちません。 |
| カメラの動き中に光るピクセル | レビュー短い軌道と文書化された安定性、スナップおよびディザのオプション。 | 静止フレームでは時間的アーティファクトを表示できません。 |
| スローシーン更新 | stats と perf を使用し、複雑さを軽減して再度測定します。 | サンプリング密度とアニメーション システムの両方が影響しますワークロード。 |
CLI は、複数のビュー、ピクセル アート アーティファクト、時間的変化を調べるための review、lint、および shimmer コマンドも提供します。アーティストの判断の代替としてではなく、視覚的なレビューと並行した診断として出力を扱います。正確な画像ベースラインを比較する場合は、同じレンダリング バックエンドを使用します。ノード/CLI レンダラは CPU 上で実行されますが、デフォルトのブラウザ レンダラは WebGL 2 を使用します。
シーンを移動する、ブラウザでレンダリングする、またはモデルをエクスポートする
Ink Studio には、アニメーション、パペット、パーティクル、シミュレーション用のツールが含まれています。シーンは JavaScript でスクリプト化することも、JSON として記述することもできます。ブラウザ アプリケーションは、WebGL 2 レンダラーを使用してキャンバスに描画できます。ホスト アプリケーションは引き続き独自の UI、入力処理、アニメーションの更新を提供します。レンダリングされたターンシート自体はイメージであり、インタラクティブ ゲームではありません。

このプロジェクトでは、OBJ、glTF、GLB ジオメトリのインポートと、サポートされている作成済みモデルを GLB としてエクスポートする方法についても説明します。ラウンドトリップに依存する前に、特定のインポートおよびエクスポートのパスを確認してください。README には、たとえば、テクスチャ イメージはスカルプティング メッシュ パスによってインポートされず、ビューに依存するスプラット ライティング、パーティクル、ピクセル単位のデカールはスプラット レンダラーによって処理されることが記載されています。 GLB メッシュのエクスポートは、スプラット レンダリングのすべての効果を再現すると想定すべきではありません。
ピクセルアートのアイデアをゲームコンセプトに変える
ビジュアルテクニックはゲームの一部にすぎません。より大きなシーンを構築する前に、プレーヤーが何を行うか、何を操作できるか、カメラが何を表示する必要があるかを書き留めます。例: 「小さな神社を探索し、ランタンを 3 つ集めて、ドアを開けます。プレイヤーと次に到達可能なランタンが斜めのピクセル アート ビューに表示されるようにします。」
その概要を使用して、どの要素を次元回転する必要があるか、またどの要素がより単純な 2D アートワークとして機能するかを決定します。 SEELE の 3D AI ゲーム クリエーター を使用して、より広範なゲームのアイデアを検討し、プレイ可能なループに基づいてデザインを改良することができます。これは別の創造的な出発点です。 SEELE が Ink Studio を実行したり、そのスプラットをインポートしたりすることを意味するものではありません。
よくある質問
Ink Studio はコード不要の 3D エディタですか?
Ink Studio は主に JavaScript ツールキットおよびコマンドライン ツールです。シーンを JavaScript または JSON で記述し、そのレンダラをブラウザ アプリケーションに埋め込むことができますが、エディタ インターフェイスと対話機能はホストによって提供されます。コマンドの実行に慣れている場合は、バンドルされている CLI サンプルが出発点として役立ちます。
Ink Studio シーンを作成するには写真が必要ですか?
いいえ。ジオメトリック プリミティブまたはシーン記述からシーンを作成し、そのサーフェスをスプラットにベイク処理できます。このプロジェクトでは、メッシュと深度マップの入力についても文書化しています。これらのオプションは、元の 3D ガウス スプラッティング研究で使用されたマルチビュー写真の最適化とは異なります。
Ink Studio でゲームを作ることはできますか?
そのレンダラーとシステムは対話型アプリケーションに貢献でき、ツールキットにはキャラクター、アニメーション、シミュレーション API が含まれています。完全なゲームには、独自のゲームプレイ ロジックとコンテンツとともに、入力を処理してシーンを進めるホストが必要です。ターゲットデバイスでパフォーマンスと視覚的な安定性をテストします。
GLB エクスポートではピクセルアートのスプラット レンダリングが保持されますか?
そうだと思わないでください。 Ink Studio は、サポートされているジオメトリ、マテリアル、および利用可能なアニメーション データを GLB にエクスポートできますが、一部のビュー依存のライティングやその他のエフェクトはスプラット レンダラーの一部のままです。エクスポートしたアセットを、使用するアプリケーションでテストします。


