{ "citation": "@InProceedings{pmlr-v70-engel17a,\n title = \t {Neural Audio Synthesis of Musical Notes with {W}ave{N}et Autoencoders},\n author = \t {Jesse Engel and Cinjon Resnick and Adam Roberts and Sander Dieleman and Mohammad Norouzi and Douglas Eck and Karen Simonyan},\n booktitle = \t {Proceedings of the 34th International Conference on Machine Learning},\n pages = \t {1068--1077},\n year = \t {2017},\n editor = \t {Doina Precup and Yee Whye Teh},\n volume = \t {70},\n series = \t {Proceedings of Machine Learning Research},\n address = \t {International Convention Centre, Sydney, Australia},\n month = \t {06--11 Aug},\n publisher = \t {PMLR},\n pdf = \t {http://proceedings.mlr.press/v70/engel17a/engel17a.pdf},\n url = \t {http://proceedings.mlr.press/v70/engel17a.html},\n}\n", "description": "The NSynth Dataset is an audio dataset containing ~300k musical notes, each\nwith a unique pitch, timbre, and envelope. Each note is annotated with three\nadditional pieces of information based on a combination of human evaluation\nand heuristic algorithms:\n -Source: The method of sound production for the note's instrument.\n -Family: The high-level family of which the note's instrument is a member.\n -Qualities: Sonic qualities of the note.\n\nThe dataset is split into train, valid, and test sets, with no instruments\noverlapping between the train set and the valid/test sets.\n", "location": { "urls": [ "https://g.co/magenta/nsynth-dataset" ] }, "name": "nsynth", "schema": { "feature": [ { "name": "audio", "shape": { "dim": [ { "size": "64000" } ] }, "type": "FLOAT" }, { "name": "id", "type": "BYTES" }, { "name": "instrument" }, { "name": "pitch", "type": "INT" }, { "name": "qualities" }, { "name": "velocity", "type": "INT" } ] }, "sizeInBytes": "78460857223", "splits": [ { "name": "test", "numShards": "1", "shardLengths": [ "512", "512", "512", "512", "512", "512", "512", "512" ], "statistics": { "features": [ { "name": "audio", "numStats": { "commonStats": { "numNonMissing": "4096" }, "max": 1.0, "min": -1.0 }, "type": "FLOAT" }, { "bytesStats": { "commonStats": { "numNonMissing": "4096" } }, "name": "id", "type": "BYTES" }, { "name": "pitch", "numStats": { "commonStats": { "numNonMissing": "4096" }, "max": 119.0, "min": 9.0 } }, { "name": "velocity", "numStats": { "commonStats": { "numNonMissing": "4096" }, "max": 127.0, "min": 25.0 } } ], "numExamples": "4096" } }, { "name": "train", "numShards": "64", "shardLengths": [ "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282", "282", "283", "282", "283", "282", "283", "282" ], "statistics": { "features": [ { "name": "audio", "numStats": { "commonStats": { "numNonMissing": "289205" }, "max": 1.378176212310791, "min": -1.4374675750732422 }, "type": "FLOAT" }, { "bytesStats": { "commonStats": { "numNonMissing": "289205" } }, "name": "id", "type": "BYTES" }, { "name": "pitch", "numStats": { "commonStats": { "numNonMissing": "289205" }, "max": 120.0, "min": 9.0 } }, { "name": "velocity", "numStats": { "commonStats": { "numNonMissing": "289205" }, "max": 127.0, "min": 25.0 } } ], "numExamples": "289205" } }, { "name": "valid", "numShards": "4", "shardLengths": [ "396", "396", "397", "396", "396", "396", "396", "397", "396", "396", "396", "396", "396", "397", "396", "396", "396", "396", "397", "396", "396", "396", "396", "397", "396", "396", "396", "396", "396", "397", "396", "396" ], "statistics": { "features": [ { "name": "audio", "numStats": { "commonStats": { "numNonMissing": "12678" }, "max": 1.0, "min": -1.0 }, "type": "FLOAT" }, { "bytesStats": { "commonStats": { "numNonMissing": "12678" } }, "name": "id", "type": "BYTES" }, { "name": "pitch", "numStats": { "commonStats": { "numNonMissing": "12678" }, "max": 120.0, "min": 9.0 } }, { "name": "velocity", "numStats": { "commonStats": { "numNonMissing": "12678" }, "max": 127.0, "min": 25.0 } } ], "numExamples": "12678" } } ], "version": "2.0.0" }