Здесь имеется в виду, что каждая профессия имеет свой запах - пекарь, токарь, металлург, врач - все имеют специфические запахи. Даже если просто махать топором будешь пахнуть потом. А если ничего не делать, то и не вспотеешь.
Каждый человек должен заниматься каким то делом и получать от этого пользу.Например от садовода зависит его урожай и как он себя покормит зимой.Когда человек бездельничает он нечего не получает никакой пользы.Поэтому говорят безделье не чем не пахнет потому что никаких плодов он не получит повторюсь пользы