<script>
function $(id) { var el = document.getElementById(id); if (el) return el; }
function switch_audio(obj, id) {
var o = $(id);
if (o) {
o.src = obj.href;
}
return false;
}
</script>
<audio id="myaudio" src=""></audio>
<a onclick="return switch_audio(this, 'myaudio');" href="link/do/pliku.ogg">Audio 1.</a><br />
<a onclick="return switch_audio(this, 'myaudio');" href="link/do/pliku2.ogg">Audio 2.</a><br />
<a onclick="return switch_audio(this, 'myaudio');" href="link/do/pliku3.ogg">Audio 3.</a>
Oczywiście onclick
jest brzydki i powinieneś bindować eventy w javascripcie, a nie takie coś. Ale ideę masz.