nonohaの特徴

nonohaは、Pythonでリアルタイムに信号処理を行うために開発された、ノードベースの信号処理、アプリケーションフレームワークです。開発者は、AIとともに信号処理のグラフを作り、エンドユーザ向けのアプリケーションもトータルで構築できます。

純粋なPythonとNumPyのまま

nonohaは、入り組んだ高速化技術や多言語の依存を持たず、リアルタイム性を保ちながら、純粋なPythonとNumPyで信号処理を行います。

ノードとプラグインを書く
from scipy.signal import welch

def _on_input(self, values):
    # A plain NumPy array, no wrapper
    _, power = welch(values[0], fs=self.fs)
    self._output.dispatch([power])

軽量なコア

nonohaを実装するnonoha-coreは信号を軽量で高速に処理するよう設計され、ホットパスの処理を最適化しています。nonoha-coreの依存はNumPyのみで、その上にプラグイン等の拡張をのせて機能を追加する小さな層です。

リアルタイムの信号処理

NumPyは、配列をまとめて計算するベクトル演算が得意です。nonohaは、信号をバッチごとにまとめて1回のNumPy演算で処理し、リアルタイム性を保ちます。

ブラウザで動作するノードベースのエディタ

多くのプラットフォームで用意されている標準的なブラウザで、ノード、プロパティを設定し、計算グラフ上を流れる信号をプロットでリアルタイムに確認できます。

しくみ
ブラウザのエディタに表示したグラフ。クロックがシンセサイザーを動かし、波形がEMAフィルタとスペクトル解析を通って4つのプロットに流れている

自作のWeb UI

グラフ編集、モニタリングのためのnonoha editorの他に、ワークスペースに特化した独自のカスタムUIを作れます。カスタムUIは、WebベースでこれまでのWebエコシステムのライブラリ(WebGL, WebAudioなど)を用いて、高機能なアプリを構築できます。作ったUIはnonoha engineがホストし、追加のUIフレームワークは不要です。

カスタムのWeb UI
新しいワークスペースのWeb UI、Signal Lab。波形、スペクトル、帯域のエネルギーと、周波数・倍音・波形の操作

RESTとWebSocketで、離れた場所から操作

エンジンはAPIサーバーです。1台で動かし、別のコンピュータのブラウザや自作のアプリから、RESTとWebSocketでグラフを編集、モニタリングできます。

人とAIで一緒に作る

人はGUIで見て確かめ、AIのコーディングエージェントはコードを読み書きします。どちらも同じワークスペースで作業し、nonoha Hubの「Build with AI」でエージェントに渡せます。

人(GUI)
AIエージェント(コード)
グラフ
人(GUI)エディタでノードを見て、編集する
AIエージェント(コード)グラフのJSONファイルを読み書きする
Web UI
人(GUI)ブラウザでアプリを使う
AIエージェント(コード)Webページを書き、ブラウザで開いて確かめる
ワークスペースとnonoha Cloud
人(GUI)nonoha Hub: 作成、実行、ダウンロード、公開
AIエージェント(コード)nonoha CLI: 同じ操作をコマンドで。結果はJSONで返る(nonoha Hubに同梱)

人や組織をまたいで共有

nonoha Cloudは、多くの人が作ったワークスペースを集め、共有できるプラットフォームです。オープンなコミュニティでの共有や、特定の人や組織との限定的な共有も可能です。

デスクトップから端末まで

nonohaは、デスクトップからモバイル、組み込み端末(Raspberry Piなど)まで、幅広い環境で動作するよう設計されています。デスクトップで作ったワークスペースは、モバイルや組み込み端末でもそのまま動かせます(ただし、プラグインがそのプラットフォームに対応している必要があります)。デスクトップ、組み込みではnonoha engineが直接動作し、モバイルやサーバでのアプリ組み込みにはnonoha embeddedが活躍します。

Windows
macOS
Raspberry Pi
iOS
Android