sys/netpfil/pf/pf_if.c

   1 /*-
   2  * SPDX-License-Identifier: BSD-2-Clause
   3  *
   4  * Copyright (c) 2001 Daniel Hartmeier
   5  * Copyright (c) 2003 Cedric Berger
   6  * Copyright (c) 2005 Henning Brauer <henning@openbsd.org>
   7  * Copyright (c) 2005 Ryan McBride <mcbride@openbsd.org>
   8  * Copyright (c) 2012 Gleb Smirnoff <glebius@FreeBSD.org>
   9  * All rights reserved.
  10  *
  11  * Redistribution and use in source and binary forms, with or without
  12  * modification, are permitted provided that the following conditions
  13  * are met:
  14  *
  15  *    - Redistributions of source code must retain the above copyright
  16  *      notice, this list of conditions and the following disclaimer.
  17  *    - Redistributions in binary form must reproduce the above
  18  *      copyright notice, this list of conditions and the following
  19  *      disclaimer in the documentation and/or other materials provided
  20  *      with the distribution.
  21  *
  22  * THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDERS AND CONTRIBUTORS
  23  * "AS IS" AND ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT
  24  * LIMITED TO, THE IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS
  25  * FOR A PARTICULAR PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL THE
  26  * COPYRIGHT HOLDERS OR CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT,
  27  * INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING,
  28  * BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES;
  29  * LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER
  30  * CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  31  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN
  32  * ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
  33  * POSSIBILITY OF SUCH DAMAGE.
  34  *
  35  *      $OpenBSD: pf_if.c,v 1.54 2008/06/14 16:55:28 mk Exp $
  36  */
  37
  38 #include <sys/cdefs.h>
  39 __FBSDID("$FreeBSD$");
  40
  41 #include "opt_inet.h"
  42 #include "opt_inet6.h"
  43
  44 #include <sys/param.h>
  45 #include <sys/kernel.h>
  46 #include <sys/eventhandler.h>
  47 #include <sys/lock.h>
  48 #include <sys/mbuf.h>
  49 #include <sys/socket.h>
  50
  51 #include <net/if.h>
  52 #include <net/if_var.h>
  53 #include <net/vnet.h>
  54 #include <net/pfvar.h>
  55 #include <net/route.h>
  56
  57 VNET_DEFINE(struct pfi_kif *,    pfi_all);
  58 VNET_DEFINE_STATIC(long, pfi_update);
  59 #define V_pfi_update    VNET(pfi_update)
  60 #define PFI_BUFFER_MAX  0x10000
  61
  62 VNET_DECLARE(int, pf_vnet_active);
  63 #define V_pf_vnet_active        VNET(pf_vnet_active)
  64
  65 VNET_DEFINE_STATIC(struct pfr_addr *, pfi_buffer);
  66 VNET_DEFINE_STATIC(int, pfi_buffer_cnt);
  67 VNET_DEFINE_STATIC(int, pfi_buffer_max);
  68 #define V_pfi_buffer             VNET(pfi_buffer)
  69 #define V_pfi_buffer_cnt         VNET(pfi_buffer_cnt)
  70 #define V_pfi_buffer_max         VNET(pfi_buffer_max)
  71
  72 eventhandler_tag         pfi_attach_cookie;
  73 eventhandler_tag         pfi_detach_cookie;
  74 eventhandler_tag         pfi_attach_group_cookie;
  75 eventhandler_tag         pfi_change_group_cookie;
  76 eventhandler_tag         pfi_detach_group_cookie;
  77 eventhandler_tag         pfi_ifaddr_event_cookie;
  78
  79 static void      pfi_attach_ifnet(struct ifnet *, struct pfi_kif *);
  80 static void      pfi_attach_ifgroup(struct ifg_group *, struct pfi_kif *);
  81
  82 static void      pfi_kif_update(struct pfi_kif *);
  83 static void      pfi_dynaddr_update(struct pfi_dynaddr *dyn);
  84 static void      pfi_table_update(struct pfr_ktable *, struct pfi_kif *, int,
  85                     int);
  86 static void      pfi_instance_add(struct ifnet *, int, int);
  87 static void      pfi_address_add(struct sockaddr *, int, int);
  88 static int       pfi_if_compare(struct pfi_kif *, struct pfi_kif *);
  89 static int       pfi_skip_if(const char *, struct pfi_kif *);
  90 static int       pfi_unmask(void *);
  91 static void      pfi_attach_ifnet_event(void * __unused, struct ifnet *);
  92 static void      pfi_detach_ifnet_event(void * __unused, struct ifnet *);
  93 static void      pfi_attach_group_event(void * __unused, struct ifg_group *);
  94 static void      pfi_change_group_event(void * __unused, char *);
  95 static void      pfi_detach_group_event(void * __unused, struct ifg_group *);
  96 static void      pfi_ifaddr_event(void * __unused, struct ifnet *);
  97
  98 RB_HEAD(pfi_ifhead, pfi_kif);
  99 static RB_PROTOTYPE(pfi_ifhead, pfi_kif, pfik_tree, pfi_if_compare);
 100 static RB_GENERATE(pfi_ifhead, pfi_kif, pfik_tree, pfi_if_compare);
 101 VNET_DEFINE_STATIC(struct pfi_ifhead, pfi_ifs);
 102 #define V_pfi_ifs       VNET(pfi_ifs)
 103
 104 #define PFI_BUFFER_MAX          0x10000
 105 MALLOC_DEFINE(PFI_MTYPE, "pf_ifnet", "pf(4) interface database");
 106
 107 LIST_HEAD(pfi_list, pfi_kif);
 108 VNET_DEFINE_STATIC(struct pfi_list, pfi_unlinked_kifs);
 109 #define V_pfi_unlinked_kifs     VNET(pfi_unlinked_kifs)
 110 static struct mtx pfi_unlnkdkifs_mtx;
 111 MTX_SYSINIT(pfi_unlnkdkifs_mtx, &pfi_unlnkdkifs_mtx, "pf unlinked interfaces",
 112     MTX_DEF);
 113
 114 void
 115 pfi_initialize_vnet(void)
 116 {
 117         struct pfi_list kifs = LIST_HEAD_INITIALIZER();
 118         struct epoch_tracker et;
 119         struct pfi_kif *kif;
 120         struct ifg_group *ifg;
 121         struct ifnet *ifp;
 122         int nkifs;
 123
 124         V_pfi_buffer_max = 64;
 125         V_pfi_buffer = malloc(V_pfi_buffer_max * sizeof(*V_pfi_buffer),
 126             PFI_MTYPE, M_WAITOK);
 127
 128         nkifs = 1;      /* one for V_pfi_all */
 129         IFNET_RLOCK();
 130         CK_STAILQ_FOREACH(ifg, &V_ifg_head, ifg_next)
 131                 nkifs++;
 132         CK_STAILQ_FOREACH(ifp, &V_ifnet, if_link)
 133                 nkifs++;
 134
 135         for (int n = 0; n < nkifs; n++) {
 136                 kif = malloc(sizeof(*kif), PFI_MTYPE, M_WAITOK);
 137                 LIST_INSERT_HEAD(&kifs, kif, pfik_list);
 138         }
 139
 140         NET_EPOCH_ENTER(et);
 141         PF_RULES_WLOCK();
 142         kif = LIST_FIRST(&kifs);
 143         LIST_REMOVE(kif, pfik_list);
 144         V_pfi_all = pfi_kif_attach(kif, IFG_ALL);
 145         CK_STAILQ_FOREACH(ifg, &V_ifg_head, ifg_next) {
 146                 kif = LIST_FIRST(&kifs);
 147                 LIST_REMOVE(kif, pfik_list);
 148                 pfi_attach_ifgroup(ifg, kif);
 149         }
 150         CK_STAILQ_FOREACH(ifp, &V_ifnet, if_link) {
 151                 kif = LIST_FIRST(&kifs);
 152                 LIST_REMOVE(kif, pfik_list);
 153                 pfi_attach_ifnet(ifp, kif);
 154         }
 155         PF_RULES_WUNLOCK();
 156         NET_EPOCH_EXIT(et);
 157         IFNET_RUNLOCK();
 158
 159         MPASS(LIST_EMPTY(&kifs));
 160 }
 161
 162 void
 163 pfi_initialize(void)
 164 {
 165
 166         pfi_attach_cookie = EVENTHANDLER_REGISTER(ifnet_arrival_event,
 167             pfi_attach_ifnet_event, NULL, EVENTHANDLER_PRI_ANY);
 168         pfi_detach_cookie = EVENTHANDLER_REGISTER(ifnet_departure_event,
 169             pfi_detach_ifnet_event, NULL, EVENTHANDLER_PRI_ANY);
 170         pfi_attach_group_cookie = EVENTHANDLER_REGISTER(group_attach_event,
 171             pfi_attach_group_event, NULL, EVENTHANDLER_PRI_ANY);
 172         pfi_change_group_cookie = EVENTHANDLER_REGISTER(group_change_event,
 173             pfi_change_group_event, NULL, EVENTHANDLER_PRI_ANY);
 174         pfi_detach_group_cookie = EVENTHANDLER_REGISTER(group_detach_event,
 175             pfi_detach_group_event, NULL, EVENTHANDLER_PRI_ANY);
 176         pfi_ifaddr_event_cookie = EVENTHANDLER_REGISTER(ifaddr_event,
 177             pfi_ifaddr_event, NULL, EVENTHANDLER_PRI_ANY);
 178 }
 179
 180 void
 181 pfi_cleanup_vnet(void)
 182 {
 183         struct pfi_kif *kif;
 184
 185         PF_RULES_WASSERT();
 186
 187         V_pfi_all = NULL;
 188         while ((kif = RB_MIN(pfi_ifhead, &V_pfi_ifs))) {
 189                 RB_REMOVE(pfi_ifhead, &V_pfi_ifs, kif);
 190                 if (kif->pfik_group)
 191                         kif->pfik_group->ifg_pf_kif = NULL;
 192                 if (kif->pfik_ifp) {
 193                         if_rele(kif->pfik_ifp);
 194                         kif->pfik_ifp->if_pf_kif = NULL;
 195                 }
 196                 free(kif, PFI_MTYPE);
 197         }
 198
 199         mtx_lock(&pfi_unlnkdkifs_mtx);
 200         while ((kif = LIST_FIRST(&V_pfi_unlinked_kifs))) {
 201                 LIST_REMOVE(kif, pfik_list);
 202                 free(kif, PFI_MTYPE);
 203         }
 204         mtx_unlock(&pfi_unlnkdkifs_mtx);
 205
 206         free(V_pfi_buffer, PFI_MTYPE);
 207 }
 208
 209 void
 210 pfi_cleanup(void)
 211 {
 212
 213         EVENTHANDLER_DEREGISTER(ifnet_arrival_event, pfi_attach_cookie);
 214         EVENTHANDLER_DEREGISTER(ifnet_departure_event, pfi_detach_cookie);
 215         EVENTHANDLER_DEREGISTER(group_attach_event, pfi_attach_group_cookie);
 216         EVENTHANDLER_DEREGISTER(group_change_event, pfi_change_group_cookie);
 217         EVENTHANDLER_DEREGISTER(group_detach_event, pfi_detach_group_cookie);
 218         EVENTHANDLER_DEREGISTER(ifaddr_event, pfi_ifaddr_event_cookie);
 219 }
 220
 221 struct pfi_kif *
 222 pfi_kif_find(const char *kif_name)
 223 {
 224         struct pfi_kif_cmp s;
 225
 226         PF_RULES_ASSERT();
 227
 228         bzero(&s, sizeof(s));
 229         strlcpy(s.pfik_name, kif_name, sizeof(s.pfik_name));
 230
 231         return (RB_FIND(pfi_ifhead, &V_pfi_ifs, (struct pfi_kif *)&s));
 232 }
 233
 234 struct pfi_kif *
 235 pfi_kif_attach(struct pfi_kif *kif, const char *kif_name)
 236 {
 237         struct pfi_kif *kif1;
 238
 239         PF_RULES_WASSERT();
 240         KASSERT(kif != NULL, ("%s: null kif", __func__));
 241
 242         kif1 = pfi_kif_find(kif_name);
 243         if (kif1 != NULL) {
 244                 free(kif, PFI_MTYPE);
 245                 return (kif1);
 246         }
 247
 248         bzero(kif, sizeof(*kif));
 249         strlcpy(kif->pfik_name, kif_name, sizeof(kif->pfik_name));
 250         /*
 251          * It seems that the value of time_second is in unintialzied state
 252          * when pf sets interface statistics clear time in boot phase if pf
 253          * was statically linked to kernel. Instead of setting the bogus
 254          * time value have pfi_get_ifaces handle this case. In
 255          * pfi_get_ifaces it uses time_second if it sees the time is 0.
 256          */
 257         kif->pfik_tzero = time_second > 1 ? time_second : 0;
 258         TAILQ_INIT(&kif->pfik_dynaddrs);
 259
 260         RB_INSERT(pfi_ifhead, &V_pfi_ifs, kif);
 261
 262         return (kif);
 263 }
 264
 265 void
 266 pfi_kif_ref(struct pfi_kif *kif)
 267 {
 268
 269         PF_RULES_WASSERT();
 270         kif->pfik_rulerefs++;
 271 }
 272
 273 void
 274 pfi_kif_unref(struct pfi_kif *kif)
 275 {
 276
 277         PF_RULES_WASSERT();
 278         KASSERT(kif->pfik_rulerefs > 0, ("%s: %p has zero refs", __func__, kif));
 279
 280         kif->pfik_rulerefs--;
 281
 282         if (kif->pfik_rulerefs > 0)
 283                 return;
 284
 285         /* kif referencing an existing ifnet or group should exist. */
 286         if (kif->pfik_ifp != NULL || kif->pfik_group != NULL || kif == V_pfi_all)
 287                 return;
 288
 289         RB_REMOVE(pfi_ifhead, &V_pfi_ifs, kif);
 290
 291         kif->pfik_flags |= PFI_IFLAG_REFS;
 292
 293         mtx_lock(&pfi_unlnkdkifs_mtx);
 294         LIST_INSERT_HEAD(&V_pfi_unlinked_kifs, kif, pfik_list);
 295         mtx_unlock(&pfi_unlnkdkifs_mtx);
 296 }
 297
 298 void
 299 pfi_kif_purge(void)
 300 {
 301         struct pfi_kif *kif, *kif1;
 302
 303         /*
 304          * Do naive mark-and-sweep garbage collecting of old kifs.
 305          * Reference flag is raised by pf_purge_expired_states().
 306          */
 307         mtx_lock(&pfi_unlnkdkifs_mtx);
 308         LIST_FOREACH_SAFE(kif, &V_pfi_unlinked_kifs, pfik_list, kif1) {
 309                 if (!(kif->pfik_flags & PFI_IFLAG_REFS)) {
 310                         LIST_REMOVE(kif, pfik_list);
 311                         free(kif, PFI_MTYPE);
 312                 } else
 313                         kif->pfik_flags &= ~PFI_IFLAG_REFS;
 314         }
 315         mtx_unlock(&pfi_unlnkdkifs_mtx);
 316 }
 317
 318 int
 319 pfi_kif_match(struct pfi_kif *rule_kif, struct pfi_kif *packet_kif)
 320 {
 321         struct ifg_list *p;
 322
 323         NET_EPOCH_ASSERT();
 324
 325         if (rule_kif == NULL || rule_kif == packet_kif)
 326                 return (1);
 327
 328         if (rule_kif->pfik_group != NULL) {
 329                 CK_STAILQ_FOREACH(p, &packet_kif->pfik_ifp->if_groups, ifgl_next)
 330                         if (p->ifgl_group == rule_kif->pfik_group)
 331                                 return (1);
 332         }
 333
 334         return (0);
 335 }
 336
 337 static void
 338 pfi_attach_ifnet(struct ifnet *ifp, struct pfi_kif *kif)
 339 {
 340
 341         PF_RULES_WASSERT();
 342
 343         V_pfi_update++;
 344         kif = pfi_kif_attach(kif, ifp->if_xname);
 345         if_ref(ifp);
 346         kif->pfik_ifp = ifp;
 347         ifp->if_pf_kif = kif;
 348         pfi_kif_update(kif);
 349 }
 350
 351 static void
 352 pfi_attach_ifgroup(struct ifg_group *ifg, struct pfi_kif *kif)
 353 {
 354
 355         PF_RULES_WASSERT();
 356
 357         V_pfi_update++;
 358         kif = pfi_kif_attach(kif, ifg->ifg_group);
 359         kif->pfik_group = ifg;
 360         ifg->ifg_pf_kif = kif;
 361 }
 362
 363 int
 364 pfi_match_addr(struct pfi_dynaddr *dyn, struct pf_addr *a, sa_family_t af)
 365 {
 366         switch (af) {
 367 #ifdef INET
 368         case AF_INET:
 369                 switch (dyn->pfid_acnt4) {
 370                 case 0:
 371                         return (0);
 372                 case 1:
 373                         return (PF_MATCHA(0, &dyn->pfid_addr4,
 374                             &dyn->pfid_mask4, a, AF_INET));
 375                 default:
 376                         return (pfr_match_addr(dyn->pfid_kt, a, AF_INET));
 377                 }
 378                 break;
 379 #endif /* INET */
 380 #ifdef INET6
 381         case AF_INET6:
 382                 switch (dyn->pfid_acnt6) {
 383                 case 0:
 384                         return (0);
 385                 case 1:
 386                         return (PF_MATCHA(0, &dyn->pfid_addr6,
 387                             &dyn->pfid_mask6, a, AF_INET6));
 388                 default:
 389                         return (pfr_match_addr(dyn->pfid_kt, a, AF_INET6));
 390                 }
 391                 break;
 392 #endif /* INET6 */
 393         default:
 394                 return (0);
 395         }
 396 }
 397
 398 int
 399 pfi_dynaddr_setup(struct pf_addr_wrap *aw, sa_family_t af)
 400 {
 401         struct epoch_tracker     et;
 402         struct pfi_dynaddr      *dyn;
 403         char                     tblname[PF_TABLE_NAME_SIZE];
 404         struct pf_ruleset       *ruleset = NULL;
 405         struct pfi_kif          *kif;
 406         int                      rv = 0;
 407
 408         PF_RULES_WASSERT();
 409         KASSERT(aw->type == PF_ADDR_DYNIFTL, ("%s: type %u",
 410             __func__, aw->type));
 411         KASSERT(aw->p.dyn == NULL, ("%s: dyn is %p", __func__, aw->p.dyn));
 412
 413         if ((dyn = malloc(sizeof(*dyn), PFI_MTYPE, M_NOWAIT | M_ZERO)) == NULL)
 414                 return (ENOMEM);
 415
 416         if ((kif = malloc(sizeof(*kif), PFI_MTYPE, M_NOWAIT)) == NULL) {
 417                 free(dyn, PFI_MTYPE);
 418                 return (ENOMEM);
 419         }
 420
 421         if (!strcmp(aw->v.ifname, "self"))
 422                 dyn->pfid_kif = pfi_kif_attach(kif, IFG_ALL);
 423         else
 424                 dyn->pfid_kif = pfi_kif_attach(kif, aw->v.ifname);
 425         pfi_kif_ref(dyn->pfid_kif);
 426
 427         dyn->pfid_net = pfi_unmask(&aw->v.a.mask);
 428         if (af == AF_INET && dyn->pfid_net == 32)
 429                 dyn->pfid_net = 128;
 430         strlcpy(tblname, aw->v.ifname, sizeof(tblname));
 431         if (aw->iflags & PFI_AFLAG_NETWORK)
 432                 strlcat(tblname, ":network", sizeof(tblname));
 433         if (aw->iflags & PFI_AFLAG_BROADCAST)
 434                 strlcat(tblname, ":broadcast", sizeof(tblname));
 435         if (aw->iflags & PFI_AFLAG_PEER)
 436                 strlcat(tblname, ":peer", sizeof(tblname));
 437         if (aw->iflags & PFI_AFLAG_NOALIAS)
 438                 strlcat(tblname, ":0", sizeof(tblname));
 439         if (dyn->pfid_net != 128)
 440                 snprintf(tblname + strlen(tblname),
 441                     sizeof(tblname) - strlen(tblname), "/%d", dyn->pfid_net);
 442         if ((ruleset = pf_find_or_create_ruleset(PF_RESERVED_ANCHOR)) == NULL) {
 443                 rv = ENOMEM;
 444                 goto _bad;
 445         }
 446
 447         if ((dyn->pfid_kt = pfr_attach_table(ruleset, tblname)) == NULL) {
 448                 rv = ENOMEM;
 449                 goto _bad;
 450         }
 451
 452         dyn->pfid_kt->pfrkt_flags |= PFR_TFLAG_ACTIVE;
 453         dyn->pfid_iflags = aw->iflags;
 454         dyn->pfid_af = af;
 455
 456         TAILQ_INSERT_TAIL(&dyn->pfid_kif->pfik_dynaddrs, dyn, entry);
 457         aw->p.dyn = dyn;
 458         NET_EPOCH_ENTER(et);
 459         pfi_kif_update(dyn->pfid_kif);
 460         NET_EPOCH_EXIT(et);
 461
 462         return (0);
 463
 464 _bad:
 465         if (dyn->pfid_kt != NULL)
 466                 pfr_detach_table(dyn->pfid_kt);
 467         if (ruleset != NULL)
 468                 pf_remove_if_empty_ruleset(ruleset);
 469         if (dyn->pfid_kif != NULL)
 470                 pfi_kif_unref(dyn->pfid_kif);
 471         free(dyn, PFI_MTYPE);
 472
 473         return (rv);
 474 }
 475
 476 static void
 477 pfi_kif_update(struct pfi_kif *kif)
 478 {
 479         struct ifg_list         *ifgl;
 480         struct pfi_dynaddr      *p;
 481
 482         NET_EPOCH_ASSERT();
 483         PF_RULES_WASSERT();
 484
 485         /* update all dynaddr */
 486         TAILQ_FOREACH(p, &kif->pfik_dynaddrs, entry)
 487                 pfi_dynaddr_update(p);
 488
 489         /* again for all groups kif is member of */
 490         if (kif->pfik_ifp != NULL) {
 491                 CK_STAILQ_FOREACH(ifgl, &kif->pfik_ifp->if_groups, ifgl_next)
 492                         pfi_kif_update((struct pfi_kif *)
 493                             ifgl->ifgl_group->ifg_pf_kif);
 494         }
 495 }
 496
 497 static void
 498 pfi_dynaddr_update(struct pfi_dynaddr *dyn)
 499 {
 500         struct pfi_kif          *kif;
 501         struct pfr_ktable       *kt;
 502
 503         PF_RULES_WASSERT();
 504         KASSERT(dyn && dyn->pfid_kif && dyn->pfid_kt,
 505             ("%s: bad argument", __func__));
 506
 507         kif = dyn->pfid_kif;
 508         kt = dyn->pfid_kt;
 509
 510         if (kt->pfrkt_larg != V_pfi_update) {
 511                 /* this table needs to be brought up-to-date */
 512                 pfi_table_update(kt, kif, dyn->pfid_net, dyn->pfid_iflags);
 513                 kt->pfrkt_larg = V_pfi_update;
 514         }
 515         pfr_dynaddr_update(kt, dyn);
 516 }
 517
 518 static void
 519 pfi_table_update(struct pfr_ktable *kt, struct pfi_kif *kif, int net, int flags)
 520 {
 521         int                      e, size2 = 0;
 522         struct ifg_member       *ifgm;
 523
 524         NET_EPOCH_ASSERT();
 525
 526         V_pfi_buffer_cnt = 0;
 527
 528         if (kif->pfik_ifp != NULL)
 529                 pfi_instance_add(kif->pfik_ifp, net, flags);
 530         else if (kif->pfik_group != NULL) {
 531                 CK_STAILQ_FOREACH(ifgm, &kif->pfik_group->ifg_members, ifgm_next)
 532                         pfi_instance_add(ifgm->ifgm_ifp, net, flags);
 533         }
 534
 535         if ((e = pfr_set_addrs(&kt->pfrkt_t, V_pfi_buffer, V_pfi_buffer_cnt, &size2,
 536             NULL, NULL, NULL, 0, PFR_TFLAG_ALLMASK)))
 537                 printf("%s: cannot set %d new addresses into table %s: %d\n",
 538                     __func__, V_pfi_buffer_cnt, kt->pfrkt_name, e);
 539 }
 540
 541 static void
 542 pfi_instance_add(struct ifnet *ifp, int net, int flags)
 543 {
 544         struct ifaddr   *ia;
 545         int              got4 = 0, got6 = 0;
 546         int              net2, af;
 547
 548         NET_EPOCH_ASSERT();
 549
 550         CK_STAILQ_FOREACH(ia, &ifp->if_addrhead, ifa_link) {
 551                 if (ia->ifa_addr == NULL)
 552                         continue;
 553                 af = ia->ifa_addr->sa_family;
 554                 if (af != AF_INET && af != AF_INET6)
 555                         continue;
 556                 /*
 557                  * XXX: For point-to-point interfaces, (ifname:0) and IPv4,
 558                  *      jump over addresses without a proper route to work
 559                  *      around a problem with ppp not fully removing the
 560                  *      address used during IPCP.
 561                  */
 562                 if ((ifp->if_flags & IFF_POINTOPOINT) &&
 563                     !(ia->ifa_flags & IFA_ROUTE) &&
 564                     (flags & PFI_AFLAG_NOALIAS) && (af == AF_INET))
 565                         continue;
 566                 if ((flags & PFI_AFLAG_BROADCAST) && af == AF_INET6)
 567                         continue;
 568                 if ((flags & PFI_AFLAG_BROADCAST) &&
 569                     !(ifp->if_flags & IFF_BROADCAST))
 570                         continue;
 571                 if ((flags & PFI_AFLAG_PEER) &&
 572                     !(ifp->if_flags & IFF_POINTOPOINT))
 573                         continue;
 574                 if ((flags & (PFI_AFLAG_NETWORK | PFI_AFLAG_NOALIAS)) &&
 575                     af == AF_INET6 &&
 576                     IN6_IS_ADDR_LINKLOCAL(
 577                     &((struct sockaddr_in6 *)ia->ifa_addr)->sin6_addr))
 578                         continue;
 579                 if (flags & PFI_AFLAG_NOALIAS) {
 580                         if (af == AF_INET && got4)
 581                                 continue;
 582                         if (af == AF_INET6 && got6)
 583                                 continue;
 584                 }
 585                 if (af == AF_INET)
 586                         got4 = 1;
 587                 else if (af == AF_INET6)
 588                         got6 = 1;
 589                 net2 = net;
 590                 if (net2 == 128 && (flags & PFI_AFLAG_NETWORK)) {
 591                         if (af == AF_INET)
 592                                 net2 = pfi_unmask(&((struct sockaddr_in *)
 593                                     ia->ifa_netmask)->sin_addr);
 594                         else if (af == AF_INET6)
 595                                 net2 = pfi_unmask(&((struct sockaddr_in6 *)
 596                                     ia->ifa_netmask)->sin6_addr);
 597                 }
 598                 if (af == AF_INET && net2 > 32)
 599                         net2 = 32;
 600                 if (flags & PFI_AFLAG_BROADCAST)
 601                         pfi_address_add(ia->ifa_broadaddr, af, net2);
 602                 else if (flags & PFI_AFLAG_PEER)
 603                         pfi_address_add(ia->ifa_dstaddr, af, net2);
 604                 else
 605                         pfi_address_add(ia->ifa_addr, af, net2);
 606         }
 607 }
 608
 609 static void
 610 pfi_address_add(struct sockaddr *sa, int af, int net)
 611 {
 612         struct pfr_addr *p;
 613         int              i;
 614
 615         if (V_pfi_buffer_cnt >= V_pfi_buffer_max) {
 616                 int              new_max = V_pfi_buffer_max * 2;
 617
 618                 if (new_max > PFI_BUFFER_MAX) {
 619                         printf("%s: address buffer full (%d/%d)\n", __func__,
 620                             V_pfi_buffer_cnt, PFI_BUFFER_MAX);
 621                         return;
 622                 }
 623                 p = malloc(new_max * sizeof(*V_pfi_buffer), PFI_MTYPE,
 624                     M_NOWAIT);
 625                 if (p == NULL) {
 626                         printf("%s: no memory to grow buffer (%d/%d)\n",
 627                             __func__, V_pfi_buffer_cnt, PFI_BUFFER_MAX);
 628                         return;
 629                 }
 630                 memcpy(p, V_pfi_buffer, V_pfi_buffer_max * sizeof(*V_pfi_buffer));
 631                 /* no need to zero buffer */
 632                 free(V_pfi_buffer, PFI_MTYPE);
 633                 V_pfi_buffer = p;
 634                 V_pfi_buffer_max = new_max;
 635         }
 636         if (af == AF_INET && net > 32)
 637                 net = 128;
 638         p = V_pfi_buffer + V_pfi_buffer_cnt++;
 639         bzero(p, sizeof(*p));
 640         p->pfra_af = af;
 641         p->pfra_net = net;
 642         if (af == AF_INET)
 643                 p->pfra_ip4addr = ((struct sockaddr_in *)sa)->sin_addr;
 644         else if (af == AF_INET6) {
 645                 p->pfra_ip6addr = ((struct sockaddr_in6 *)sa)->sin6_addr;
 646                 if (IN6_IS_SCOPE_EMBED(&p->pfra_ip6addr))
 647                         p->pfra_ip6addr.s6_addr16[1] = 0;
 648         }
 649         /* mask network address bits */
 650         if (net < 128)
 651                 ((caddr_t)p)[p->pfra_net/8] &= ~(0xFF >> (p->pfra_net%8));
 652         for (i = (p->pfra_net+7)/8; i < sizeof(p->pfra_u); i++)
 653                 ((caddr_t)p)[i] = 0;
 654 }
 655
 656 void
 657 pfi_dynaddr_remove(struct pfi_dynaddr *dyn)
 658 {
 659
 660         KASSERT(dyn->pfid_kif != NULL, ("%s: null pfid_kif", __func__));
 661         KASSERT(dyn->pfid_kt != NULL, ("%s: null pfid_kt", __func__));
 662
 663         TAILQ_REMOVE(&dyn->pfid_kif->pfik_dynaddrs, dyn, entry);
 664         pfi_kif_unref(dyn->pfid_kif);
 665         pfr_detach_table(dyn->pfid_kt);
 666         free(dyn, PFI_MTYPE);
 667 }
 668
 669 void
 670 pfi_dynaddr_copyout(struct pf_addr_wrap *aw)
 671 {
 672
 673         KASSERT(aw->type == PF_ADDR_DYNIFTL,
 674             ("%s: type %u", __func__, aw->type));
 675
 676         if (aw->p.dyn == NULL || aw->p.dyn->pfid_kif == NULL)
 677                 return;
 678         aw->p.dyncnt = aw->p.dyn->pfid_acnt4 + aw->p.dyn->pfid_acnt6;
 679 }
 680
 681 static int
 682 pfi_if_compare(struct pfi_kif *p, struct pfi_kif *q)
 683 {
 684         return (strncmp(p->pfik_name, q->pfik_name, IFNAMSIZ));
 685 }
 686
 687 void
 688 pfi_update_status(const char *name, struct pf_status *pfs)
 689 {
 690         struct pfi_kif          *p;
 691         struct pfi_kif_cmp       key;
 692         struct ifg_member        p_member, *ifgm;
 693         CK_STAILQ_HEAD(, ifg_member) ifg_members;
 694         int                      i, j, k;
 695
 696         strlcpy(key.pfik_name, name, sizeof(key.pfik_name));
 697         p = RB_FIND(pfi_ifhead, &V_pfi_ifs, (struct pfi_kif *)&key);
 698         if (p == NULL)
 699                 return;
 700
 701         if (p->pfik_group != NULL) {
 702                 bcopy(&p->pfik_group->ifg_members, &ifg_members,
 703                     sizeof(ifg_members));
 704         } else {
 705                 /* build a temporary list for p only */
 706                 bzero(&p_member, sizeof(p_member));
 707                 p_member.ifgm_ifp = p->pfik_ifp;
 708                 CK_STAILQ_INIT(&ifg_members);
 709                 CK_STAILQ_INSERT_TAIL(&ifg_members, &p_member, ifgm_next);
 710         }
 711         if (pfs) {
 712                 bzero(pfs->pcounters, sizeof(pfs->pcounters));
 713                 bzero(pfs->bcounters, sizeof(pfs->bcounters));
 714         }
 715         CK_STAILQ_FOREACH(ifgm, &ifg_members, ifgm_next) {
 716                 if (ifgm->ifgm_ifp == NULL || ifgm->ifgm_ifp->if_pf_kif == NULL)
 717                         continue;
 718                 p = (struct pfi_kif *)ifgm->ifgm_ifp->if_pf_kif;
 719
 720                 /* just clear statistics */
 721                 if (pfs == NULL) {
 722                         bzero(p->pfik_packets, sizeof(p->pfik_packets));
 723                         bzero(p->pfik_bytes, sizeof(p->pfik_bytes));
 724                         p->pfik_tzero = time_second;
 725                         continue;
 726                 }
 727                 for (i = 0; i < 2; i++)
 728                         for (j = 0; j < 2; j++)
 729                                 for (k = 0; k < 2; k++) {
 730                                         pfs->pcounters[i][j][k] +=
 731                                                 p->pfik_packets[i][j][k];
 732                                         pfs->bcounters[i][j] +=
 733                                                 p->pfik_bytes[i][j][k];
 734                                 }
 735         }
 736 }
 737
 738 void
 739 pfi_get_ifaces(const char *name, struct pfi_kif *buf, int *size)
 740 {
 741         struct epoch_tracker et;
 742         struct pfi_kif  *p, *nextp;
 743         int              n = 0;
 744
 745         NET_EPOCH_ENTER(et);
 746         for (p = RB_MIN(pfi_ifhead, &V_pfi_ifs); p; p = nextp) {
 747                 nextp = RB_NEXT(pfi_ifhead, &V_pfi_ifs, p);
 748                 if (pfi_skip_if(name, p))
 749                         continue;
 750                 if (*size <= n++)
 751                         break;
 752                 if (!p->pfik_tzero)
 753                         p->pfik_tzero = time_second;
 754                 bcopy(p, buf++, sizeof(*buf));
 755                 nextp = RB_NEXT(pfi_ifhead, &V_pfi_ifs, p);
 756         }
 757         *size = n;
 758         NET_EPOCH_EXIT(et);
 759 }
 760
 761 static int
 762 pfi_skip_if(const char *filter, struct pfi_kif *p)
 763 {
 764         struct ifg_list *i;
 765         int     n;
 766
 767         NET_EPOCH_ASSERT();
 768
 769         if (filter == NULL || !*filter)
 770                 return (0);
 771         if (!strcmp(p->pfik_name, filter))
 772                 return (0);     /* exact match */
 773         n = strlen(filter);
 774         if (n < 1 || n >= IFNAMSIZ)
 775                 return (1);     /* sanity check */
 776         if (filter[n-1] >= '0' && filter[n-1] <= '9')
 777                 return (1);     /* group names may not end in a digit */
 778         if (p->pfik_ifp == NULL)
 779                 return (1);
 780         CK_STAILQ_FOREACH(i, &p->pfik_ifp->if_groups, ifgl_next)
 781                 if (!strncmp(i->ifgl_group->ifg_group, filter, IFNAMSIZ))
 782                         return (0); /* iface is in group "filter" */
 783         return (1);
 784 }
 785
 786 int
 787 pfi_set_flags(const char *name, int flags)
 788 {
 789         struct epoch_tracker et;
 790         struct pfi_kif  *p;
 791
 792         NET_EPOCH_ENTER(et);
 793         RB_FOREACH(p, pfi_ifhead, &V_pfi_ifs) {
 794                 if (pfi_skip_if(name, p))
 795                         continue;
 796                 p->pfik_flags |= flags;
 797         }
 798         NET_EPOCH_EXIT(et);
 799         return (0);
 800 }
 801
 802 int
 803 pfi_clear_flags(const char *name, int flags)
 804 {
 805         struct epoch_tracker et;
 806         struct pfi_kif  *p;
 807
 808         NET_EPOCH_ENTER(et);
 809         RB_FOREACH(p, pfi_ifhead, &V_pfi_ifs) {
 810                 if (pfi_skip_if(name, p))
 811                         continue;
 812                 p->pfik_flags &= ~flags;
 813         }
 814         NET_EPOCH_EXIT(et);
 815         return (0);
 816 }
 817
 818 /* from pf_print_state.c */
 819 static int
 820 pfi_unmask(void *addr)
 821 {
 822         struct pf_addr *m = addr;
 823         int i = 31, j = 0, b = 0;
 824         u_int32_t tmp;
 825
 826         while (j < 4 && m->addr32[j] == 0xffffffff) {
 827                 b += 32;
 828                 j++;
 829         }
 830         if (j < 4) {
 831                 tmp = ntohl(m->addr32[j]);
 832                 for (i = 31; tmp & (1 << i); --i)
 833                         b++;
 834         }
 835         return (b);
 836 }
 837
 838 static void
 839 pfi_attach_ifnet_event(void *arg __unused, struct ifnet *ifp)
 840 {
 841         struct epoch_tracker et;
 842         struct pfi_kif *kif;
 843
 844         if (V_pf_vnet_active == 0) {
 845                 /* Avoid teardown race in the least expensive way. */
 846                 return;
 847         }
 848         kif = malloc(sizeof(*kif), PFI_MTYPE, M_WAITOK);
 849         NET_EPOCH_ENTER(et);
 850         PF_RULES_WLOCK();
 851         pfi_attach_ifnet(ifp, kif);
 852 #ifdef ALTQ
 853         pf_altq_ifnet_event(ifp, 0);
 854 #endif
 855         PF_RULES_WUNLOCK();
 856         NET_EPOCH_EXIT(et);
 857 }
 858
 859 static void
 860 pfi_detach_ifnet_event(void *arg __unused, struct ifnet *ifp)
 861 {
 862         struct epoch_tracker et;
 863         struct pfi_kif *kif = (struct pfi_kif *)ifp->if_pf_kif;
 864
 865         if (pfsync_detach_ifnet_ptr)
 866                 pfsync_detach_ifnet_ptr(ifp);
 867
 868         if (kif == NULL)
 869                 return;
 870
 871         if (V_pf_vnet_active == 0) {
 872                 /* Avoid teardown race in the least expensive way. */
 873                 return;
 874         }
 875
 876         NET_EPOCH_ENTER(et);
 877         PF_RULES_WLOCK();
 878         V_pfi_update++;
 879         pfi_kif_update(kif);
 880
 881         if (kif->pfik_ifp)
 882                 if_rele(kif->pfik_ifp);
 883
 884         kif->pfik_ifp = NULL;
 885         ifp->if_pf_kif = NULL;
 886 #ifdef ALTQ
 887         pf_altq_ifnet_event(ifp, 1);
 888 #endif
 889         PF_RULES_WUNLOCK();
 890         NET_EPOCH_EXIT(et);
 891 }
 892
 893 static void
 894 pfi_attach_group_event(void *arg __unused, struct ifg_group *ifg)
 895 {
 896         struct epoch_tracker et;
 897         struct pfi_kif *kif;
 898
 899         if (V_pf_vnet_active == 0) {
 900                 /* Avoid teardown race in the least expensive way. */
 901                 return;
 902         }
 903         kif = malloc(sizeof(*kif), PFI_MTYPE, M_WAITOK);
 904         NET_EPOCH_ENTER(et);
 905         PF_RULES_WLOCK();
 906         pfi_attach_ifgroup(ifg, kif);
 907         PF_RULES_WUNLOCK();
 908         NET_EPOCH_EXIT(et);
 909 }
 910
 911 static void
 912 pfi_change_group_event(void *arg __unused, char *gname)
 913 {
 914         struct epoch_tracker et;
 915         struct pfi_kif *kif;
 916
 917         if (V_pf_vnet_active == 0) {
 918                 /* Avoid teardown race in the least expensive way. */
 919                 return;
 920         }
 921
 922         kif = malloc(sizeof(*kif), PFI_MTYPE, M_WAITOK);
 923         NET_EPOCH_ENTER(et);
 924         PF_RULES_WLOCK();
 925         V_pfi_update++;
 926         kif = pfi_kif_attach(kif, gname);
 927         pfi_kif_update(kif);
 928         PF_RULES_WUNLOCK();
 929         NET_EPOCH_EXIT(et);
 930 }
 931
 932 static void
 933 pfi_detach_group_event(void *arg __unused, struct ifg_group *ifg)
 934 {
 935         struct pfi_kif *kif = (struct pfi_kif *)ifg->ifg_pf_kif;
 936
 937         if (kif == NULL)
 938                 return;
 939
 940         if (V_pf_vnet_active == 0) {
 941                 /* Avoid teardown race in the least expensive way. */
 942                 return;
 943         }
 944         PF_RULES_WLOCK();
 945         V_pfi_update++;
 946
 947         kif->pfik_group = NULL;
 948         ifg->ifg_pf_kif = NULL;
 949         PF_RULES_WUNLOCK();
 950 }
 951
 952 static void
 953 pfi_ifaddr_event(void *arg __unused, struct ifnet *ifp)
 954 {
 955
 956         KASSERT(ifp, ("ifp == NULL"));
 957
 958         if (ifp->if_pf_kif == NULL)
 959                 return;
 960
 961         if (V_pf_vnet_active == 0) {
 962                 /* Avoid teardown race in the least expensive way. */
 963                 return;
 964         }
 965         PF_RULES_WLOCK();
 966         if (ifp->if_pf_kif) {
 967                 struct epoch_tracker et;
 968
 969                 V_pfi_update++;
 970                 NET_EPOCH_ENTER(et);
 971                 pfi_kif_update(ifp->if_pf_kif);
 972                 NET_EPOCH_EXIT(et);
 973         }
 974         PF_RULES_WUNLOCK();
 975 }