A generic generation project based on action emulating with bionic method.
Deconstructing generation into layered, stateful protocols, and rendering complex workflows intervenable.
┌──────────────────────────────────────────────────────────────────────────────────────┐
│ Equinox │
│ File Edit Status Help About │
│ │
├─────┬────┬─────────────────────────────────────────────────┬─────────────────────────┤
│ │ │┌─────┐ ┌──────┐ ┌──────────┐ Track Overview│ Arranger │
│ M S │└─────┘ └──────┘ └──────────┘ (Determine how │ │
├─────┬────┼────────────────────────────────── track slice)│ ┌───┐ │
│ │ │ ┌──────┐ │ │#Sy│ │
│ M S │ └──────┘ │ │ ├────────────┐ │
├─────┬────┼─────────────────────────────────────────────────┤ │ │ │ │
│ │ │ │ └───┘ │ │
│ M S ├──(present waveform here...)─────────────────────┤ │ │
├────────┬─┴─────────────────────────────────────────────────┤ ┌───┐ ▼ │
│ │ PianoRoll│ │#Sy│ ┌─────┐│
│▌▌▌▌▌───┤ │ │ ├─────────►│ ││
│ │ │ │ │ ┌────►│ ││
│▌▌▌▌▌───┤ │ └───┘ │ ┌──►│ ││
│ │ │ │ │ │ ││
├────────┤ ┌───────────┐ │ ┌───┐ │ │ └─────┘│
│ │ │ │ │ │#Au│ │ │ │
│▌▌▌▌▌───┤ ┌───┐└───────────┘┌───┐ │ │ ├────┘ │ │
│ │ │ │ he- re │ │ │ │ │ │ │
│▌▌▌▌▌───┤ ┌───┐└───┘ └───┘ │ └───┘ │ │
│ │ │ │ me the │ ┌───┐ │ │
│▌▌▌▌▌───┤ └───┘ │ │ │ │ │
│ │ Let │ │ ├──────┘ │
├────────┤ ┌────────────────────┐│ │ │ │
│ │ │ ││ └───┘ │
│▌▌▌▌▌───┤ └────────────────────┘│ │
│ │ soun- -d │ ... Swelte │
│▌▌▌▌▌───┤ │ ┌────┐ Flow │
│ │ │ │ │ │
└────────┴───────────────────────────────────────────────────┴───┴────┴────────────────┘
┌─────────────────────────────────────────────────────────────────────────────────────────────────────────────┐
│ │
│ Syntheziser Node Editor │
│ │
├─────────────────────────────────────────────────────────────────────────────────────────────────────────────┤
│ ┌───────────┐ │
│ │Extra pitch│ │
│ │ (Optional)├─────────────────────────┐ ┌─────────────────────────────┐ │
│ │ │ ┌─────────────┐ │ │ Acoustic Model │ │
│ └───────────┘ │ Duration │ │ ├─────────────────────────────┤ │
│ │ Prediction │ │ │ *present mel soectrum │ │
│ ┌►│ │ │ │ within current calc │ │
│ │ │ │ │ │ transaction │ │
│ │ │ │ │ │ │ │
│ │ └─────────┬───┘ │ │ │ │
│ │ │ │ │ │ │
│ ┌─────────────────┐ │┌──────────┤ │ │ │ │
│ │Note(with lyrics)│ ││ │ │ │ │ │
│ │ (required) │ ││ ▼ ▼ │ /=\ ---- ├────┐ │
│ │ ▌─┤│ ┌─────────────┐┌───┐ │ /====\ /=\ ---- │ │ │
│ │ │ ││ │ Pitch ││ M │ │ /----\ /=\ ---- │ │ │
│ └─────────────────┘ ││ │ Prediction ││ A │ │ │ │ │
│ ├┼►│ ││ S │ └─────────────────────────────┘ │ │
│ ││ │ ││ K │ ▲ │ │
│ ││ │ ││ │ │ │ │
│ ││ └─────────────┘└─┬─┘ │ │ │
│ ││ │ │ │ │
│ │└────────┐ │Masked pitch │ ▼ │
│ │ ▼ │(partial override)│ ┌────────────────┐ ┌──────────────────┐ │
│ ┌────────────────┐ │ ┌──────────────┐ │ │ │ Vocoder │ │ Waveform │ │
│ │ breathness, │ │ │ Variance │ │ │ │ ├─►▌ (required node) │ │
│ │ gender, │ │ │ Model │ │ │ └────────────────┘ │ │ │
│ │ ... │ └►│ │ │ │ ▲ └──────────────────┘ │
│ │ ├──►│ │◄─┴──────────────────┴──────────────┘ │
│ │Extra Parameters│ │ │ │
│ │ (based on conf)│ └──────────────┘ │
│ └────────────────┘ │
│ │
│ │
│ │
└─────────────────────────────────────────────────────────────────────────────────────────────────────────────┘