ED法と3値(+1,-1,0)のアイデアを元に新しい活性化関数(ExP2)を作ってGELU、ELUと性能比較してみた。MINIST精度 99.43%以上達成DeepLearningPyTorch活性化関数誤差逆伝播法ED法 追記 ELUとの比較を追加しました、金子さんのアイデアの凄さが明確に結果に出ています。 また最後にニューロンが正・負どちらに発火しているの...
理化学研究所（理研）脳神経科学研究センター 数理脳科学研究チームの寺田 裕 基礎科学特別研究員（研究当時）と豊泉 太郎 チームリーダーの研究チームは、神経ダイナミクスのカオス[1]を用いて、環境状態の推定を行う脳型のベイズ計算[2]機構を提案しました。本研究成果は、脳の情報処理メカニズムの原理の解明、特に神...
――日本人は昔からタコが大好きです……主に食べ物として。ですがタコは非常に好奇心旺盛で、番組や本でも見られるとおり、人間に対しても興味津々に近づいてきますよね。我々をサメのような捕食者として恐れないのはなぜなのでしょうか？ とても良い質問ですね（笑）。タコがいかに早く「信頼すること」を学ぶかについて、...
はじめに @pocokhc(ちぃがぅ)さんが、金子勇さんのED法を実装してMNISTの学習に成功しました。 金子勇さんの失われたED法 金子勇さんの失われたED法発掘の経緯 ここではちぃがぅさんのコードを元に、ED法をシンプルに解説していきたいと思います。 ED法をわかりやすく解説するため、今入力を(1,0)としたとき(0)を推論す...
初めまして。普段は産婦人科医をしつつAIの医学応用に関する研究をしています。 Qiitaは見る専でしたが、以下のバズっている記事を拝見した時、生理学の神経構造の話をふと思い出したのでメモ代わりに記載しようと思います。 読みにくい部分があれば申し訳ありません。 とくに@pocokhc(ちぃがぅ)さんの記事のコード詳細...
Winnyの金子勇さんが考案された機械学習アルゴリズムED法を再現して実装した人がいていま話題になっている。 『Winny』の金子勇さんの失われたED法を求めて…いたら見つかりました https://qiita.com/kanekanekaneko/items/901ee2837401750dfdad いまから書くことは私の記憶頼りなので間違ってたらコメント欄で教えて欲し...
右手と左手は線対称になっており、普通に考えると右利きになる確率と左利きになる確率はちょうど半々になりそうなもの。しかし、実際には左利きになる割合は約10％で、右利きが圧倒的多数となっています。利き手が左右のどちらになるのかは「特定の遺伝子における変異」が関連している可能性を、マックス・プランク心理...
追記：続きを書きました。 はじめに 先日以下の記事が投稿され、その斬新な考え方に個人的ながら衝撃を受けました。 内容をざっくり言うと、ニューラルネットワークの学習を現在の主流であるBP法（誤差逆伝播法）ではなく、ED法（誤差拡散法）という新しい学習手法を提案しているものです。 もし記事の内容が本当ならニ...
先日AY2024-Term3を終えて卒業要件単位数を満たすことができました。今はまだ卒業申請中なので「仮」としている。ディプロマを手にするまでは実感が湧かなそうだけれど日に日に記憶が薄れていくので振り返りを。 清々しい気分で見物した今年の牡丹 目次 CS 2204 Communications and Networking CS 2301 Operating System...
ファイファイ屋！ 感嘆符まで付けて楽しげに ファイファイ屋！ カンカン詰めの自由はいかが？ 癒しましょう 超ウザイ ニューロンがホーホー フェイフェイ派 ██の水は甘いとウワサの フェイフェイ派 早速数値はメジャーの兆し 痩せましょう ゲキ細く ジョージョーはハーハー FREE！ すべてFREE！ またはわずかなリス...
「ニューロン」に関連する商品は見つかりませんでした