Cette expression signifie que l'on a déjà un certain âge, que l'on n'est plus tout jeune.
Il s'agit cependant d'un pléonasme, puisque un perdreau est une jeune perdrix... de l'année !
Dire "Ne pas être un perdreau" devrait donc amplement suffire.
Mais je sais pertinemment que je risque encore de passer pour un redresseur de torts ou un vieux ronchon !