Le terroir aupsois, ensoleillé mais rigoureux, est une terre de contrastes et de transition entre la Basse Provence et les Préalpes du Haut Var. Le climat y est assez chaud en été malgré l'altitude mais l’hiver peut y être rude. Ces conditions restent toutefois favorables à la culture de l'olivier jusqu'à une altitude de 550 m environ. Le magnifique amphithéâtre naturel situé au nord du château constitue la zone la plus propice à la culture des oliviers.
La sagesse des anciens ne s’y était pas trompée en plantant des oliviers sur ces restanques. L’ensoleillement et la lumière y sont généreux et permettent la fructification de l’olivier et la maturation des olives. Ainsi exposés, les oliviers de Taurenne ont su résister aux températures froides de l'hiver et au mistral.