GitHub - LAION-AI/CLAP: Contrastive Language-Audio Pretraining
Contrastive Language-Audio Pretraining. Contribute to LAION-AI/CLAP development by creating an account on GitHub.
7 mentions:
![@stateofai_ja]( "@stateofai_ja")
![@stealthinu]( "@stealthinu")
![@Prgckwb]( "@Prgckwb")
![@JJitsev]( "@JJitsev")
![@digitalhealthxx]( "@digitalhealthxx")
![@kawamuramasahar]( "@kawamuramasahar")
Keywords:
学習済みモデル
Date:
Referring Tweets
@stateofai_ja ついに来た。巨大な画像×テキストデータセットでおなじみの LAION が今度は 63万ペアの「オーディオ×テキスト」で訓練した CLIP 的なモデル「CLAP」を OSS としてリリース。
画像生成 AI で起こった CLIP 主導の革命がオーディオ分野でも起こりつつある。目が離せない t.co/wGzejJvOsn
@stealthinu CLIPの音版であるCLAPが公開。想像力が乏しすぎて良い案が浮かばないがいろんな効果音とかをテキストから自動生成したりするのはすぐできるようになりそう。 / “GitHub - LAION-AI/CLAP: Contrastive Language-Audio Pretraining” t.co/9BnJoRGBrA
@Prgckwb Audio版CLIP出てたんだ、CVみたいにココから音声の生成も急発展するのかしら
t.co/u7MxfYkj0j
@JJitsev LAION goes audio - LAION-CLAP.
Using same idea as CLIP did when using contrastive InfoNCE loss for image-text pairs for audio-text pairs.
First publication out of MILA-LAION collaboration. Good to see cooperations working again so well.
t.co/Vw3kXGcZGH
@digitalhealthxx We are glad to announce our new work collaborating with t.co/YRgR6Nvkfz: a large-scale text-audio contrastive learning model with a large-scale text-audio dataset!
Paper: t.co/ci2slsLsz0
Code & Model: t.co/JR40vK4MHv…
Dataset: t.co/Go23n6HHTV t.co/0tTFgxZCWw
@kawamuramasahar CLAP : contrastive language-audio pretraining to develop audio representation by combining audio data with natural language descriptions using LAION-Audio-630K, large collection of 633526 audio-text pairs from different data sources
t.co/lzo41ZVfz4
t.co/k8DrxKvdgd
Bookmark Comments
id:stealthinu
CLIPの音版であるCLAPが公開。想像力が乏しすぎて良い案が浮かばないがいろんな効果音とかをテキストから自動生成したりするのはすぐできるようになりそう。
2022/11/16 15:51
Related Entries
Read more
GitHub - pfnet-research/chainer-stylegan: Chainer implementation of Style-based Generator
2 users,
3 mentions 2019/02/28 14:18
Read more
DeepLabCut — adaptive motor control lab
4 users,
7 mentions 2019/08/05 21:47
Read more
GitHub - jaywalnut310/vits: VITS: Conditional Variational Autoencoder with Adversarial Learning for ...
2 users,
2 mentions 2022/04/12 04:37
Read more
PyTorchのTensorの要素の値を取得: item() | note.nkmk.me
1 users,
1 mentions 2022/07/21 12:09
ML-Newsについて
機械学習の技術に関する情報は流速も早いし、分野も多様でキャッチアップが大変です。Twitterで機械学習用のリストを作っても、普段は機械学習以外の話題が多く流れており、効率的に情報収集するのは困難です。ML-NewsはSNSを情報源とした機械学習に特化したニュースサイトです。機械学習に関する論文、ブログ、ライブラリ、コンペティション、発表資料、勉強会などの最新の情報を効率的に収集できます。
機械学習を応用した自然言語処理、画像認識、情報検索などの分野の情報や機械学習で必要になるデータ基盤やMLOpsの話題もカバーしています。
安定したサイト運営のためにGitHub sponsor
を募集しています。