Наверное, потому, что бомжам мыться и стирать одежду негде и они за чистотой так не следят? Да и образ жизни у них обычно такой, что после бутылки вообще не волнует наличие одежды, лишь бы не замерзнуть. Про "культурных" бомжей, которые моются и стирают одежду в ТЦ или на вокзалах я только читала, но вот ни разу таких не видела и не слышала о них вживую.
Но это так же зависит от личного восприятия. Кому-то в лужу случайно наступить - фу и как бомж, а кто-то может в походе в грязь упасть и спокойно потом через весь город пройти, потому что и выхода нет и что такого-то.
Для меня "грязная одежда = бомж" только в том случае, если помимо грязи она еще и пахнет совсем не розами, слой грязи явно вековой и такую окаменелость проще выкинуть чем отстирать, и фасон одежды подобран чисто случайно, обычно вещи не по размеру и сильно устаревшие, что было в помойке, то и надел, ну, и внешний вид соответствующий, неухоженный, отекший, побитый, чумазый и так далее, а не "шла из...