Olewave - Professional and Trustworthy - Data Services and Solutions

Tutorials

GoogleがLaMDAが自覚を持つようになったという主張でBlake Lemoineを解雇したとき、その物語は急速に広まりましたが、根底にある質問は残りました：LaMDAやChatGPTのような大規模言語モデルは実際に思考しているのか、

8月 5, 2022· 1 min read

Tutorials

ASR製品をリリースした人なら誰でも固有名詞の苦労を知っています: 連絡先の名前、曲のタイトル、医薬品の名前、不明瞭な地名。

4月 9, 2022· 1 min read

Tutorials

長形式質問応答は、リーダーボード上では印象的に見えますが、顕微鏡で見ると不安になるようなベンチマークの1つです。

4月 2, 2022· 1 min read

Tutorials

InstructGPTが指示チューニングを一般的な用語にする前に、GoogleのFLAN論文は、自然言語指示に対する適度な量のマルチタスク微調整が、普通のLMを驚くほど

3月 5, 2022· 1 min read

Tutorials

Transformerを1000億パラメータを超えてスケーリングすることは急速に哲学的になります：すべてのトークンに対してネットワーク全体をアクティブにしますか、それとも各トークンを実際に見る必要があるスペシャリストにルーティングしますか？

2月 26, 2022· 1 min read

Tutorials

スピーカー適応は、エンコーダーの獲得した音響表現を損なわないようにシーケンス・ツー・シーケンスモデルを適応させようとするまでは、解決されたように聞こえるASR問題の1つです。

2月 19, 2022· 1 min read

Tutorials

ネイサン・チェンのクワッドフリップスコアリングへのウインクを交わしてフレーミングされたこのトークは、Switch Transformerを詳細に説明します。これはGoogleによるMixture-of-Expertsスケーリングの明確で積極的に単純化された取り組みです。

2月 12, 2022· 1 min read

Tutorials

MoEミニシリーズのパート2はGLaMに向かい、Googleの1.2兆パラメータMixture-of-Expertsモデルは、ゼロショット、ワンショット、フューショットベンチマークでGPT-3に匹敵するか上回っており、パラメータの約8%のみを活性化しています

2月 12, 2022· 1 min read

Tutorials

BERTはNLPではほぼ紹介の必要がありませんが、スピーチエンジニアの目を通して読むと、標準的な「マスク言語モデリングがすべてを変えた」という要約とは異なるレッスンが明らかになります。

2月 6, 2022· 1 min read

Tutorials

2つの論文、1つのストーリー。「Attention Is All You Need」はTransformerを世界に与え、シーケンスモデリングの方法をリセットした一方で、「Listen, Attend and Spell」（LAS）はエンドツーエンドスピーチについて1年前に同じことを行いました

1月 29, 2022· 1 min read

Tutorials

ウォルター・ホワイト、ジェシー・ピンクマン、そしてラベルなしオーディオのバッチに共通することは何か？

1月 22, 2022· 1 min read

Tag: ai