「Transformer」の記事一覧

  • AI重要文献
AIの重要論文『Attention Is All You Need』を読む
2017年に発表された『Attention Is All You Need』は、現在の生成AIを支えるTransformerを提案した歴史的…
  • 連載「AIの原理」
【数式なしのAI解説】AttentionとTransformerとは何か【AIの原理 第6回】
Transformerは、文章を一語ずつ順番に読むという、それまで当然とされていた前提を捨てました。代わりに採…
  • 連載「AIの歴史」
Transformerとは何か—「Attention Is All You Need」と基盤モデルの誕生【AIの歴史 第9回】
2017年、Googleの研究者たちが発表した一本の論文が、それまで文章の処理を支えてきた「逐次処理」という…