Au départ le boulet est celui qui sert à rien. La référence à ce surnom a été le boulet que portaient les prisonniers qui emcombrait le porteur. Et on dit donc boulet à celui qui sert à rien et qui fait plus chier qu'autre chose. A ne pas confondre avec le bougre ^^".