はじめに
前回は連想記憶の双曲数化の試みについて解説しました。今回は連想記憶として実用的なモデルを解説します。原型は [1] で発表しました。このままではプロジェクションルールを適用するために不十分で、若干の拡張を [2] で行いました。[2] が話題の中心になります。
[1] M. Kobayashi: “Hyperbolic Hopfield Neural Networks with Directional Multistate Activation Function”, Neurocomputing, Vol.275, pp.2217-2226 (2018)
[2] M. Kobayashi: “Noise Robust Projection Rule for Hyperbolic Hopfield Neural Networks”, IEEE Transactions on Neural Networks and Learning Systems, Vol.31, No.1, pp.352-356 (2020)
モデル
ニューロン
安定性のために、結合荷重に対称性
エネルギーと安定性
エネルギーは次式で定義されます。 複素の場合と違って実数にするために Re が必要です。
ここで
おわりに
証明過程からは結合の安定性条件が見つけ辛いのではないかと感じた読者もおられると思います。実は Rotor Associative Memory (RAM) の特殊な場合として考えると見通しが良くなります。RAM の論文を先に掲載できれば良かったのですが、不採録になってしまって双曲連想記憶に適用した論文を投稿したら採録されて、こちらが先になってしまいました。IEEE と雖も、査読基準の一貫性の無さと査読者割り当ての運を実感させられました。次回はプロジェクションルールを解説します。