É possível atribuir qualquer fonte de áudio ao sampler?

Não. Apenas uma fonte de áudio interna pode ser atribuída ao sampler.