Cette expression du langage courant qui remonterait au XVIIe siècle signifie, au sens figuré :
- aborder franchement et sans détour un sujet, une question,
- aller droit au but, sans user de moyens détournés ; agir sans détour.
On dit par exemple : "Je n'irai pas par quatre chemins : je souhaite que tu quittes le domicile d'ici lundi".
L'expression "Ne pas tourner autour du pot"a sensiblement la même signification.
De même que, dans certains cas, l'expression "Ne pas y aller avec le dos de la cuillère".
Source : wiktionary.org et www.expressio.fr