Lorsque des dispositions législatives ou réglementaires soumettent à des conditions de distance l'implantation ou l'extension de bâtiments agricoles vis-à-vis des habitations et immeubles habituellement occupés par des tiers, la même exigence d'éloignement doit être imposée à ces derniers à toute nouvelle construction et à tout changement de destination précités à usage non agricole nécessitant un permis de construire, à l'exception des extensions de constructions existantes. Dans les parties actuellement urbanisées des communes, des règles d'éloignement différentes de celles qui résultent du premier alinéa peuvent être fixées pour tenir compte de l'existence de constructions agricoles antérieurement implantées. Ces règles sont fixées par le plan local d'urbanisme ou, dans les communes non dotées d'un plan local d'urbanisme, par délibération du conseil municipal, prise après avis de la chambre d'agriculture et enquête publique réalisée conformément au chapitre III du titre II du livre Ier du code de l'environnement. Dans les secteurs où des règles spécifiques ont été fixées en application de l'alinéa précédent, l'extension limitée et les travaux rendus nécessaires par des mises aux normes des exploitations agricoles existantes sont autorisés, nonobstant la proximité de bâtiments d'habitations. Par dérogation aux dispositions du premier alinéa, une distance d'éloignement inférieure peut être autorisée par l'autorité qui délivre le permis de construire, après avis de la chambre d'agriculture, pour tenir compte des spécificités locales. Une telle dérogation n'est pas possible dans les secteurs où des règles spécifiques ont été fixées en application du deuxième alinéa. Il peut être dérogé aux règles du premier alinéa, sous réserve de l'accord des parties concernées, par la création d'une servitude grevant les immeubles concernés par la dérogation, dès lors qu'ils font l'objet d'un changement de destination ou de l'extension d'un bâtiment agricole existant dans les cas prévus par l'alinéa précédent.