1.概要 単純パーセプトロンは、最も基本的な形式のニューラルネットワークで、1つのニューロンから構成されます。入力ベクトルと重みベクトルの内積にバイアスを加え、その結果を活性化関数(しきい値関数)によって出力します。線形 …
カテゴリーアーカイブ: コンピュータサイエンス
トランスフォーマー(Transformer)
1.概要トランスフォーマーの元となるアーキテクチャは、以下の論文で発表されました: Title: Attention Is All You Need Authors: Ashish Vaswani, Noam Shaze …