Een spel dat geluid en machinaal leren naadloos combineert
Audio Forager is een unieke game waarmee je de magie en het raadsel van machine learning kunt ervaren. Het spel combineert meer dan 44.000 Freesound-geluiden. Freesound is in feite een dataset gemaakt met dank aan Kyle McDonald en wat Cabbibo-gekheid.
Eenvoudig, maar toch een enorm scala aan mogelijkheden
Om je drumstel te creëren uit de smorgasbord van decadente geluiden, hoef je alleen maar je handen door een geluidswolk te laten lopen, de gemoedsgesteldheid van de computer te leren kennen, en kies de audiodelicatessen die je lekker vindt. Al deze mechanismen klinken eenvoudig: navigeren via een 3D-geluidskaart, individuele geluiden selecteren voor later gebruik en opnieuw op de geluiden drukken om ze later te gebruiken. Dankzij de absoluut enorme datasetgrootte zijn er echter eindeloze mogelijkheden. Als je je eigen piano wilt maken met behulp van synth-noten, kun je doorgaan en er een maken. Je kunt ook veel creatiever en leuker worden met je creaties, zoals het maken van een marimba van crackles en pops.
Massieve gegevens om te verkennen
Als je niet aan het maken van je eigen geluidsprofiel denkt en je alleen de geluiden of de soorten die er zijn, wilt verkennen, heb je meer dan voldoende gegevens om te verkennen. Het is gewoon niet nodig om een instrument te bespelen of er een te maken. Wat voor je ligt, is een hulpmiddel om een prachtig algoritme en gegevens, geluid genaamd, te ontdekken en te begrijpen. Om nog maar te zwijgen, Freesound en Kyle McDonald spelen een belangrijke rol bij het creëren van dit project. Kyle heeft in feite audio van de Freesound-website geschraapt en t-SNE-inbeddingen gemaakt.
