Striker2.0
Jedna neuronová síť, která poslechne celou skladbu a najde v ní údery bicích, doby a basu.
Vyzkoušejte v klubuCelá skladba. Jedna síť.
Striker 2.0 poslouchá hudbu pro světelnou aplikaci LightningStrike. Každých 10 ms řekne, kdy a jak silně udeřily bicí, kde leží doby a takty, kdy začal nový tón basy a které nástroje hrají. Nahrazuje tak celý řetěz oddělovačů a modelů.
Hudba dovnitř. Rytmus ven.
-
Bicí
Kopák, virbl, hi-hat, činely a tomy, i se silou každého úderu.
-
Doby a takty
Každá doba a první doba každého taktu.
-
Basa
Okamžik, kdy začíná nový tón basy.
-
Nástroje
Kdy hrají bicí, basa, zpěv a ostatní nástroje.
Pro představu: výstupy nakreslené pro smyčku ze záhlaví stránky. Nejsou to skutečné výstupy modelu.
Na hraně možného.
Striker 2.0 1029 posouvá hranici tam, kde to ukazují srovnání níže: v přepisu bicích na veřejných sadách, které nikdy neslyšel, na elektronické hudbě a v nástupech basy. A to všechno jako jediná síť. Hranici v každé kategorii má za cíl Striker 2.1.
Všechna čísla patří vydání Striker 2.0 1029. Je to F-míra od 0 do 1 na testovacích skladbách, ze kterých se model neučil: jednička znamená, že našel každý úder a žádný si nevymyslel. Úder nebo tón basy platí do 50 ms od skutečného, doba do 70 ms. Pod Strikerem je vždy nejlepší srovnatelný systém na téže sadě.
Proč je Striker 2.0 lepší.
Co ho odlišuje od dosavadních řešení.
Jedna síť místo řetězu
Jedna síť zvládne najednou bicí i se silou úderu, doby, první doby, basu a nástroje a je postavená pro obyčejný počítač. Dřívější postup na to potřeboval oddělovače zvuku a několik modelů.
Před publikovanými výsledky
Na bicích sad ENST, RBMA13 a IDMT vede před každým srovnatelným publikovaným modelem. Ty sady přitom nikdy neslyšel.
Silný v elektronice
Nejvíc vede na elektronické hudbě. Právě ta byla nejslabším místem dřívějšího řetězu.
Poctivě měřený
Z testovacích sad se nikdy neučí a výsledky jsme předpověděli písemně ještě před tréninkem.
Tři rychlosti poslechu.
Jestli je úder virbl, nebo tlesknutí, a jestli doba začíná takt, se pozná až z taktů kolem. Síť proto poslouchá ve třech rychlostech najednou a odpovídá 100× za sekundu.
Přesný čas každého úderu.
Takty kolem úderu.
Nejhlubší vrstvy, kde leží většina ze 130 M parametrů.
Co přijde dál.
Striker 2.0 vzniká pro aplikaci LightningStrike a není veřejně dostupný. Na modelu dál pracujeme.