Грязь - это когда не моют полы например, а хлам - это мусор, который не выкидывают годами
Ну, на такой случай есть хорошая и справедливая поговорка: что снаружи, то и внутри. Именно с этим и связано. Чего там за хлам и грязь внутри в каждом конкретном случае - это индивидуально уже.