Striker2.0

Vydání Striker 2.0 1029

Jedna neuronová síť, která poslechne celou skladbu a najde v ní údery bicích, doby a basu.

Vyzkoušejte v klubu

Celá skladba. Jedna síť.

Striker 2.0 poslouchá hudbu pro světelnou aplikaci LightningStrike. Každých 10 ms řekne, kdy a jak silně udeřily bicí, kde leží doby a takty, kdy začal nový tón basy a které nástroje hrají. Nahrazuje tak celý řetěz oddělovačů a modelů.

Hudba dovnitř. Rytmus ven.

Celá skladba
Striker 2.0 Jedna síť130 M parametrů
Každých 10 ms
  • Bicí

    Kopák, virbl, hi-hat, činely a tomy, i se silou každého úderu.

  • Doby a takty

    Každá doba a první doba každého taktu.

  • Basa

    Okamžik, kdy začíná nový tón basy.

  • Nástroje

    Kdy hrají bicí, basa, zpěv a ostatní nástroje.

Pro představu: výstupy nakreslené pro smyčku ze záhlaví stránky. Nejsou to skutečné výstupy modelu.

Hranice možného

Na hraně možného.

Striker 2.0 1029 posouvá hranici tam, kde to ukazují srovnání níže: v přepisu bicích na veřejných sadách, které nikdy neslyšel, na elektronické hudbě a v nástupech basy. A to všechno jako jediná síť. Hranici v každé kategorii má za cíl Striker 2.1.

Bicí · ENST
0,872
Striker 2.0 10290,872
Weber a kol., 20250,80
Bicí · RBMA13, elektronika
0,767
Striker 2.0 10290,767
Weber a kol., 20250,67
Bicí · IDMT
0,985
Striker 2.0 10290,985
Noise-to-Notes, 20260,949
První doby · Raveform, elektronika
0,929
Striker 2.0 10290,929
Beat This!0,742
Basa · MoisesDB
0,917
Striker 2.0 10290,917
Oddělovač a detektor0,854

Všechna čísla patří vydání Striker 2.0 1029. Je to F-míra od 0 do 1 na testovacích skladbách, ze kterých se model neučil: jednička znamená, že našel každý úder a žádný si nevymyslel. Úder nebo tón basy platí do 50 ms od skutečného, doba do 70 ms. Pod Strikerem je vždy nejlepší srovnatelný systém na téže sadě.

Proč je Striker 2.0 lepší.

Co ho odlišuje od dosavadních řešení.

Jedna síť místo řetězu

Jedna síť zvládne najednou bicí i se silou úderu, doby, první doby, basu a nástroje a je postavená pro obyčejný počítač. Dřívější postup na to potřeboval oddělovače zvuku a několik modelů.

Před publikovanými výsledky

Na bicích sad ENST, RBMA13 a IDMT vede před každým srovnatelným publikovaným modelem. Ty sady přitom nikdy neslyšel.

Silný v elektronice

Nejvíc vede na elektronické hudbě. Právě ta byla nejslabším místem dřívějšího řetězu.

Poctivě měřený

Z testovacích sad se nikdy neučí a výsledky jsme předpověděli písemně ještě před tréninkem.

Tři rychlosti poslechu.

Jestli je úder virbl, nebo tlesknutí, a jestli doba začíná takt, se pozná až z taktů kolem. Síť proto poslouchá ve třech rychlostech najednou a odpovídá 100× za sekundu.

100× za sekundu

Přesný čas každého úderu.

25× za sekundu

Takty kolem úderu.

12,5× za sekundu

Nejhlubší vrstvy, kde leží většina ze 130 M parametrů.

Co přijde dál.

Striker 2.0 vzniká pro aplikaci LightningStrike a není veřejně dostupný. Na modelu dál pracujeme.

Další verze Plánujeme

Striker2.1

Cíl: hranice možného v každé kategorii. A k tomu části skladby, jako je sloka, refrén nebo drop.

Bicí · Doby · Basa · Části skladby
Rychlá varianta Plánujeme

Striker 2.0Small

Menší síť, kterou učí ta velká. Rychlá volba pro slabší počítače.

Asi 10 M parametrů · Učí ho velký Striker