HTML5のaudioタグはまだこなれていない印象あり。使うにはいろいろ配慮が必要そう。

テクニック＆評価

HTML5 audioタグを使って音声を再生する方法 | Tech Booster
http://techbooster.org/html5/9915/

HTML – audioタグのcontrolsの使えなさっぷりを体感してみた – Qiita
http://qiita.com/tadfmac/items/14b3c679470e3c83d991

プレイヤー

jPlayer
http://jplayer.org/

MediaElement.js
http://mediaelementjs.com/

Amazing Audio Player
https://amazingaudioplayer.com/

Top 15+ Awesome jQuery Audio Video Player Plugins
http://www.narga.net/awesome-jquery-audio-video-player-plugins/