sys/kern/kern_jail.c

   1 /*-
   2  * SPDX-License-Identifier: BSD-2-Clause-FreeBSD
   3  *
   4  * Copyright (c) 1999 Poul-Henning Kamp.
   5  * Copyright (c) 2008 Bjoern A. Zeeb.
   6  * Copyright (c) 2009 James Gritton.
   7  * All rights reserved.
   8  *
   9  * Redistribution and use in source and binary forms, with or without
  10  * modification, are permitted provided that the following conditions
  11  * are met:
  12  * 1. Redistributions of source code must retain the above copyright
  13  *    notice, this list of conditions and the following disclaimer.
  14  * 2. Redistributions in binary form must reproduce the above copyright
  15  *    notice, this list of conditions and the following disclaimer in the
  16  *    documentation and/or other materials provided with the distribution.
  17  *
  18  * THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
  19  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  20  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  21  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  22  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  23  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  24  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  25  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  26  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  27  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  28  * SUCH DAMAGE.
  29  */
  30
  31 #include <sys/cdefs.h>
  32 __FBSDID("$FreeBSD$");
  33
  34 #include "opt_ddb.h"
  35 #include "opt_inet.h"
  36 #include "opt_inet6.h"
  37
  38 #include <sys/param.h>
  39 #include <sys/types.h>
  40 #include <sys/kernel.h>
  41 #include <sys/systm.h>
  42 #include <sys/errno.h>
  43 #include <sys/sysproto.h>
  44 #include <sys/malloc.h>
  45 #include <sys/osd.h>
  46 #include <sys/priv.h>
  47 #include <sys/proc.h>
  48 #include <sys/taskqueue.h>
  49 #include <sys/fcntl.h>
  50 #include <sys/jail.h>
  51 #include <sys/linker.h>
  52 #include <sys/lock.h>
  53 #include <sys/mutex.h>
  54 #include <sys/racct.h>
  55 #include <sys/rctl.h>
  56 #include <sys/refcount.h>
  57 #include <sys/sx.h>
  58 #include <sys/sysent.h>
  59 #include <sys/namei.h>
  60 #include <sys/mount.h>
  61 #include <sys/queue.h>
  62 #include <sys/socket.h>
  63 #include <sys/syscallsubr.h>
  64 #include <sys/sysctl.h>
  65 #include <sys/uuid.h>
  66 #include <sys/vnode.h>
  67
  68 #include <net/if.h>
  69 #include <net/vnet.h>
  70
  71 #include <netinet/in.h>
  72
  73 #ifdef DDB
  74 #include <ddb/ddb.h>
  75 #endif /* DDB */
  76
  77 #include <security/mac/mac_framework.h>
  78
  79 #define DEFAULT_HOSTUUID        "00000000-0000-0000-0000-000000000000"
  80 #define PRISON0_HOSTUUID_MODULE "hostuuid"
  81
  82 MALLOC_DEFINE(M_PRISON, "prison", "Prison structures");
  83 static MALLOC_DEFINE(M_PRISON_RACCT, "prison_racct", "Prison racct structures");
  84
  85 /* Keep struct prison prison0 and some code in kern_jail_set() readable. */
  86 #ifdef INET
  87 #ifdef INET6
  88 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL|PR_IP6_SADDRSEL
  89 #else
  90 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL
  91 #endif
  92 #else /* !INET */
  93 #ifdef INET6
  94 #define _PR_IP_SADDRSEL PR_IP6_SADDRSEL
  95 #else
  96 #define _PR_IP_SADDRSEL 0
  97 #endif
  98 #endif
  99
 100 /* prison0 describes what is "real" about the system. */
 101 struct prison prison0 = {
 102         .pr_id          = 0,
 103         .pr_name        = "0",
 104         .pr_ref         = 1,
 105         .pr_uref        = 1,
 106         .pr_path        = "/",
 107         .pr_securelevel = -1,
 108         .pr_devfs_rsnum = 0,
 109         .pr_state       = PRISON_STATE_ALIVE,
 110         .pr_childmax    = JAIL_MAX,
 111         .pr_hostuuid    = DEFAULT_HOSTUUID,
 112         .pr_children    = LIST_HEAD_INITIALIZER(prison0.pr_children),
 113 #ifdef VIMAGE
 114         .pr_flags       = PR_HOST|PR_VNET|_PR_IP_SADDRSEL,
 115 #else
 116         .pr_flags       = PR_HOST|_PR_IP_SADDRSEL,
 117 #endif
 118         .pr_allow       = PR_ALLOW_ALL_STATIC,
 119 };
 120 MTX_SYSINIT(prison0, &prison0.pr_mtx, "jail mutex", MTX_DEF);
 121
 122 struct bool_flags {
 123         const char      *name;
 124         const char      *noname;
 125         volatile u_int   flag;
 126 };
 127 struct jailsys_flags {
 128         const char      *name;
 129         unsigned         disable;
 130         unsigned         new;
 131 };
 132
 133 /* allprison, allprison_racct and lastprid are protected by allprison_lock. */
 134 struct  sx allprison_lock;
 135 SX_SYSINIT(allprison_lock, &allprison_lock, "allprison");
 136 struct  prisonlist allprison = TAILQ_HEAD_INITIALIZER(allprison);
 137 LIST_HEAD(, prison_racct) allprison_racct;
 138 int     lastprid = 0;
 139
 140 static int get_next_prid(struct prison **insprp);
 141 static int do_jail_attach(struct thread *td, struct prison *pr, int drflags);
 142 static void prison_complete(void *context, int pending);
 143 static void prison_deref(struct prison *pr, int flags);
 144 static int prison_lock_xlock(struct prison *pr, int flags);
 145 static void prison_free_not_last(struct prison *pr);
 146 static void prison_set_allow_locked(struct prison *pr, unsigned flag,
 147     int enable);
 148 static char *prison_path(struct prison *pr1, struct prison *pr2);
 149 static void prison_remove_one(struct prison *pr);
 150 #ifdef RACCT
 151 static void prison_racct_attach(struct prison *pr);
 152 static void prison_racct_modify(struct prison *pr);
 153 static void prison_racct_detach(struct prison *pr);
 154 #endif
 155
 156 /* Flags for prison_deref */
 157 #define PD_DEREF        0x01    /* Decrement pr_ref */
 158 #define PD_DEUREF       0x02    /* Decrement pr_uref */
 159 #define PD_LOCKED       0x04    /* pr_mtx is held */
 160 #define PD_LIST_SLOCKED 0x08    /* allprison_lock is held shared */
 161 #define PD_LIST_XLOCKED 0x10    /* allprison_lock is held exclusive */
 162
 163 /*
 164  * Parameter names corresponding to PR_* flag values.  Size values are for kvm
 165  * as we cannot figure out the size of a sparse array, or an array without a
 166  * terminating entry.
 167  */
 168 static struct bool_flags pr_flag_bool[] = {
 169         {"persist", "nopersist", PR_PERSIST},
 170 #ifdef INET
 171         {"ip4.saddrsel", "ip4.nosaddrsel", PR_IP4_SADDRSEL},
 172 #endif
 173 #ifdef INET6
 174         {"ip6.saddrsel", "ip6.nosaddrsel", PR_IP6_SADDRSEL},
 175 #endif
 176 };
 177 const size_t pr_flag_bool_size = sizeof(pr_flag_bool);
 178
 179 static struct jailsys_flags pr_flag_jailsys[] = {
 180         {"host", 0, PR_HOST},
 181 #ifdef VIMAGE
 182         {"vnet", 0, PR_VNET},
 183 #endif
 184 #ifdef INET
 185         {"ip4", PR_IP4_USER, PR_IP4_USER},
 186 #endif
 187 #ifdef INET6
 188         {"ip6", PR_IP6_USER, PR_IP6_USER},
 189 #endif
 190 };
 191 const size_t pr_flag_jailsys_size = sizeof(pr_flag_jailsys);
 192
 193 /*
 194  * Make this array full-size so dynamic parameters can be added.
 195  * It is protected by prison0.mtx, but lockless reading is allowed
 196  * with an atomic check of the flag values.
 197  */
 198 static struct bool_flags pr_flag_allow[NBBY * NBPW] = {
 199         {"allow.set_hostname", "allow.noset_hostname", PR_ALLOW_SET_HOSTNAME},
 200         {"allow.sysvipc", "allow.nosysvipc", PR_ALLOW_SYSVIPC},
 201         {"allow.raw_sockets", "allow.noraw_sockets", PR_ALLOW_RAW_SOCKETS},
 202         {"allow.chflags", "allow.nochflags", PR_ALLOW_CHFLAGS},
 203         {"allow.mount", "allow.nomount", PR_ALLOW_MOUNT},
 204         {"allow.quotas", "allow.noquotas", PR_ALLOW_QUOTAS},
 205         {"allow.socket_af", "allow.nosocket_af", PR_ALLOW_SOCKET_AF},
 206         {"allow.mlock", "allow.nomlock", PR_ALLOW_MLOCK},
 207         {"allow.reserved_ports", "allow.noreserved_ports",
 208          PR_ALLOW_RESERVED_PORTS},
 209         {"allow.read_msgbuf", "allow.noread_msgbuf", PR_ALLOW_READ_MSGBUF},
 210         {"allow.unprivileged_proc_debug", "allow.nounprivileged_proc_debug",
 211          PR_ALLOW_UNPRIV_DEBUG},
 212         {"allow.suser", "allow.nosuser", PR_ALLOW_SUSER},
 213 };
 214 static unsigned pr_allow_all = PR_ALLOW_ALL_STATIC;
 215 const size_t pr_flag_allow_size = sizeof(pr_flag_allow);
 216
 217 #define JAIL_DEFAULT_ALLOW              (PR_ALLOW_SET_HOSTNAME | \
 218                                          PR_ALLOW_RESERVED_PORTS | \
 219                                          PR_ALLOW_UNPRIV_DEBUG | \
 220                                          PR_ALLOW_SUSER)
 221 #define JAIL_DEFAULT_ENFORCE_STATFS     2
 222 #define JAIL_DEFAULT_DEVFS_RSNUM        0
 223 static unsigned jail_default_allow = JAIL_DEFAULT_ALLOW;
 224 static int jail_default_enforce_statfs = JAIL_DEFAULT_ENFORCE_STATFS;
 225 static int jail_default_devfs_rsnum = JAIL_DEFAULT_DEVFS_RSNUM;
 226 #if defined(INET) || defined(INET6)
 227 static unsigned jail_max_af_ips = 255;
 228 #endif
 229
 230 /*
 231  * Initialize the parts of prison0 that can't be static-initialized with
 232  * constants.  This is called from proc0_init() after creating thread0 cpuset.
 233  */
 234 void
 235 prison0_init(void)
 236 {
 237         uint8_t *file, *data;
 238         size_t size;
 239
 240         prison0.pr_cpuset = cpuset_ref(thread0.td_cpuset);
 241         prison0.pr_osreldate = osreldate;
 242         strlcpy(prison0.pr_osrelease, osrelease, sizeof(prison0.pr_osrelease));
 243
 244         /* If we have a preloaded hostuuid, use it. */
 245         file = preload_search_by_type(PRISON0_HOSTUUID_MODULE);
 246         if (file != NULL) {
 247                 data = preload_fetch_addr(file);
 248                 size = preload_fetch_size(file);
 249                 if (data != NULL) {
 250                         /*
 251                          * The preloaded data may include trailing whitespace, almost
 252                          * certainly a newline; skip over any whitespace or
 253                          * non-printable characters to be safe.
 254                          */
 255                         while (size > 0 && data[size - 1] <= 0x20) {
 256                                 data[size--] = '\0';
 257                         }
 258                         if (validate_uuid(data, size, NULL, 0) == 0) {
 259                                 (void)strlcpy(prison0.pr_hostuuid, data,
 260                                     size + 1);
 261                         } else if (bootverbose) {
 262                                 printf("hostuuid: preload data malformed: '%s'",
 263                                     data);
 264                         }
 265                 }
 266         }
 267         if (bootverbose)
 268                 printf("hostuuid: using %s\n", prison0.pr_hostuuid);
 269 }
 270
 271 /*
 272  * struct jail_args {
 273  *      struct jail *jail;
 274  * };
 275  */
 276 int
 277 sys_jail(struct thread *td, struct jail_args *uap)
 278 {
 279         uint32_t version;
 280         int error;
 281         struct jail j;
 282
 283         error = copyin(uap->jail, &version, sizeof(uint32_t));
 284         if (error)
 285                 return (error);
 286
 287         switch (version) {
 288         case 0:
 289         {
 290                 struct jail_v0 j0;
 291
 292                 /* FreeBSD single IPv4 jails. */
 293                 bzero(&j, sizeof(struct jail));
 294                 error = copyin(uap->jail, &j0, sizeof(struct jail_v0));
 295                 if (error)
 296                         return (error);
 297                 j.version = j0.version;
 298                 j.path = j0.path;
 299                 j.hostname = j0.hostname;
 300                 j.ip4s = htonl(j0.ip_number);   /* jail_v0 is host order */
 301                 break;
 302         }
 303
 304         case 1:
 305                 /*
 306                  * Version 1 was used by multi-IPv4 jail implementations
 307                  * that never made it into the official kernel.
 308                  */
 309                 return (EINVAL);
 310
 311         case 2: /* JAIL_API_VERSION */
 312                 /* FreeBSD multi-IPv4/IPv6,noIP jails. */
 313                 error = copyin(uap->jail, &j, sizeof(struct jail));
 314                 if (error)
 315                         return (error);
 316                 break;
 317
 318         default:
 319                 /* Sci-Fi jails are not supported, sorry. */
 320                 return (EINVAL);
 321         }
 322         return (kern_jail(td, &j));
 323 }
 324
 325 int
 326 kern_jail(struct thread *td, struct jail *j)
 327 {
 328         struct iovec optiov[2 * (4 + nitems(pr_flag_allow)
 329 #ifdef INET
 330                             + 1
 331 #endif
 332 #ifdef INET6
 333                             + 1
 334 #endif
 335                             )];
 336         struct uio opt;
 337         char *u_path, *u_hostname, *u_name;
 338         struct bool_flags *bf;
 339 #ifdef INET
 340         uint32_t ip4s;
 341         struct in_addr *u_ip4;
 342 #endif
 343 #ifdef INET6
 344         struct in6_addr *u_ip6;
 345 #endif
 346         size_t tmplen;
 347         int error, enforce_statfs;
 348
 349         bzero(&optiov, sizeof(optiov));
 350         opt.uio_iov = optiov;
 351         opt.uio_iovcnt = 0;
 352         opt.uio_offset = -1;
 353         opt.uio_resid = -1;
 354         opt.uio_segflg = UIO_SYSSPACE;
 355         opt.uio_rw = UIO_READ;
 356         opt.uio_td = td;
 357
 358         /* Set permissions for top-level jails from sysctls. */
 359         if (!jailed(td->td_ucred)) {
 360                 for (bf = pr_flag_allow;
 361                      bf < pr_flag_allow + nitems(pr_flag_allow) &&
 362                         atomic_load_int(&bf->flag) != 0;
 363                      bf++) {
 364                         optiov[opt.uio_iovcnt].iov_base = __DECONST(char *,
 365                             (jail_default_allow & bf->flag)
 366                             ? bf->name : bf->noname);
 367                         optiov[opt.uio_iovcnt].iov_len =
 368                             strlen(optiov[opt.uio_iovcnt].iov_base) + 1;
 369                         opt.uio_iovcnt += 2;
 370                 }
 371                 optiov[opt.uio_iovcnt].iov_base = "enforce_statfs";
 372                 optiov[opt.uio_iovcnt].iov_len = sizeof("enforce_statfs");
 373                 opt.uio_iovcnt++;
 374                 enforce_statfs = jail_default_enforce_statfs;
 375                 optiov[opt.uio_iovcnt].iov_base = &enforce_statfs;
 376                 optiov[opt.uio_iovcnt].iov_len = sizeof(enforce_statfs);
 377                 opt.uio_iovcnt++;
 378         }
 379
 380         tmplen = MAXPATHLEN + MAXHOSTNAMELEN + MAXHOSTNAMELEN;
 381 #ifdef INET
 382         ip4s = (j->version == 0) ? 1 : j->ip4s;
 383         if (ip4s > jail_max_af_ips)
 384                 return (EINVAL);
 385         tmplen += ip4s * sizeof(struct in_addr);
 386 #else
 387         if (j->ip4s > 0)
 388                 return (EINVAL);
 389 #endif
 390 #ifdef INET6
 391         if (j->ip6s > jail_max_af_ips)
 392                 return (EINVAL);
 393         tmplen += j->ip6s * sizeof(struct in6_addr);
 394 #else
 395         if (j->ip6s > 0)
 396                 return (EINVAL);
 397 #endif
 398         u_path = malloc(tmplen, M_TEMP, M_WAITOK);
 399         u_hostname = u_path + MAXPATHLEN;
 400         u_name = u_hostname + MAXHOSTNAMELEN;
 401 #ifdef INET
 402         u_ip4 = (struct in_addr *)(u_name + MAXHOSTNAMELEN);
 403 #endif
 404 #ifdef INET6
 405 #ifdef INET
 406         u_ip6 = (struct in6_addr *)(u_ip4 + ip4s);
 407 #else
 408         u_ip6 = (struct in6_addr *)(u_name + MAXHOSTNAMELEN);
 409 #endif
 410 #endif
 411         optiov[opt.uio_iovcnt].iov_base = "path";
 412         optiov[opt.uio_iovcnt].iov_len = sizeof("path");
 413         opt.uio_iovcnt++;
 414         optiov[opt.uio_iovcnt].iov_base = u_path;
 415         error = copyinstr(j->path, u_path, MAXPATHLEN,
 416             &optiov[opt.uio_iovcnt].iov_len);
 417         if (error) {
 418                 free(u_path, M_TEMP);
 419                 return (error);
 420         }
 421         opt.uio_iovcnt++;
 422         optiov[opt.uio_iovcnt].iov_base = "host.hostname";
 423         optiov[opt.uio_iovcnt].iov_len = sizeof("host.hostname");
 424         opt.uio_iovcnt++;
 425         optiov[opt.uio_iovcnt].iov_base = u_hostname;
 426         error = copyinstr(j->hostname, u_hostname, MAXHOSTNAMELEN,
 427             &optiov[opt.uio_iovcnt].iov_len);
 428         if (error) {
 429                 free(u_path, M_TEMP);
 430                 return (error);
 431         }
 432         opt.uio_iovcnt++;
 433         if (j->jailname != NULL) {
 434                 optiov[opt.uio_iovcnt].iov_base = "name";
 435                 optiov[opt.uio_iovcnt].iov_len = sizeof("name");
 436                 opt.uio_iovcnt++;
 437                 optiov[opt.uio_iovcnt].iov_base = u_name;
 438                 error = copyinstr(j->jailname, u_name, MAXHOSTNAMELEN,
 439                     &optiov[opt.uio_iovcnt].iov_len);
 440                 if (error) {
 441                         free(u_path, M_TEMP);
 442                         return (error);
 443                 }
 444                 opt.uio_iovcnt++;
 445         }
 446 #ifdef INET
 447         optiov[opt.uio_iovcnt].iov_base = "ip4.addr";
 448         optiov[opt.uio_iovcnt].iov_len = sizeof("ip4.addr");
 449         opt.uio_iovcnt++;
 450         optiov[opt.uio_iovcnt].iov_base = u_ip4;
 451         optiov[opt.uio_iovcnt].iov_len = ip4s * sizeof(struct in_addr);
 452         if (j->version == 0)
 453                 u_ip4->s_addr = j->ip4s;
 454         else {
 455                 error = copyin(j->ip4, u_ip4, optiov[opt.uio_iovcnt].iov_len);
 456                 if (error) {
 457                         free(u_path, M_TEMP);
 458                         return (error);
 459                 }
 460         }
 461         opt.uio_iovcnt++;
 462 #endif
 463 #ifdef INET6
 464         optiov[opt.uio_iovcnt].iov_base = "ip6.addr";
 465         optiov[opt.uio_iovcnt].iov_len = sizeof("ip6.addr");
 466         opt.uio_iovcnt++;
 467         optiov[opt.uio_iovcnt].iov_base = u_ip6;
 468         optiov[opt.uio_iovcnt].iov_len = j->ip6s * sizeof(struct in6_addr);
 469         error = copyin(j->ip6, u_ip6, optiov[opt.uio_iovcnt].iov_len);
 470         if (error) {
 471                 free(u_path, M_TEMP);
 472                 return (error);
 473         }
 474         opt.uio_iovcnt++;
 475 #endif
 476         KASSERT(opt.uio_iovcnt <= nitems(optiov),
 477                 ("kern_jail: too many iovecs (%d)", opt.uio_iovcnt));
 478         error = kern_jail_set(td, &opt, JAIL_CREATE | JAIL_ATTACH);
 479         free(u_path, M_TEMP);
 480         return (error);
 481 }
 482
 483 /*
 484  * struct jail_set_args {
 485  *      struct iovec *iovp;
 486  *      unsigned int iovcnt;
 487  *      int flags;
 488  * };
 489  */
 490 int
 491 sys_jail_set(struct thread *td, struct jail_set_args *uap)
 492 {
 493         struct uio *auio;
 494         int error;
 495
 496         /* Check that we have an even number of iovecs. */
 497         if (uap->iovcnt & 1)
 498                 return (EINVAL);
 499
 500         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
 501         if (error)
 502                 return (error);
 503         error = kern_jail_set(td, auio, uap->flags);
 504         free(auio, M_IOV);
 505         return (error);
 506 }
 507
 508 int
 509 kern_jail_set(struct thread *td, struct uio *optuio, int flags)
 510 {
 511         struct nameidata nd;
 512 #ifdef INET
 513         struct in_addr *ip4;
 514 #endif
 515 #ifdef INET6
 516         struct in6_addr *ip6;
 517 #endif
 518         struct vfsopt *opt;
 519         struct vfsoptlist *opts;
 520         struct prison *pr, *deadpr, *inspr, *mypr, *ppr, *tpr;
 521         struct vnode *root;
 522         char *domain, *errmsg, *host, *name, *namelc, *p, *path, *uuid;
 523         char *g_path, *osrelstr;
 524         struct bool_flags *bf;
 525         struct jailsys_flags *jsf;
 526 #if defined(INET) || defined(INET6)
 527         struct prison *tppr;
 528         void *op;
 529 #endif
 530         unsigned long hid;
 531         size_t namelen, onamelen, pnamelen;
 532         int born, created, cuflags, descend, drflags, enforce;
 533         int error, errmsg_len, errmsg_pos;
 534         int gotchildmax, gotenforce, gothid, gotrsnum, gotslevel;
 535         int jid, jsys, len, level;
 536         int childmax, osreldt, rsnum, slevel;
 537 #if defined(INET) || defined(INET6)
 538         int ii, ij;
 539 #endif
 540 #ifdef INET
 541         int ip4s, redo_ip4;
 542 #endif
 543 #ifdef INET6
 544         int ip6s, redo_ip6;
 545 #endif
 546         uint64_t pr_allow, ch_allow, pr_flags, ch_flags;
 547         uint64_t pr_allow_diff;
 548         unsigned tallow;
 549         char numbuf[12];
 550
 551         error = priv_check(td, PRIV_JAIL_SET);
 552         if (!error && (flags & JAIL_ATTACH))
 553                 error = priv_check(td, PRIV_JAIL_ATTACH);
 554         if (error)
 555                 return (error);
 556         mypr = td->td_ucred->cr_prison;
 557         if ((flags & JAIL_CREATE) && mypr->pr_childmax == 0)
 558                 return (EPERM);
 559         if (flags & ~JAIL_SET_MASK)
 560                 return (EINVAL);
 561
 562         /*
 563          * Check all the parameters before committing to anything.  Not all
 564          * errors can be caught early, but we may as well try.  Also, this
 565          * takes care of some expensive stuff (path lookup) before getting
 566          * the allprison lock.
 567          *
 568          * XXX Jails are not filesystems, and jail parameters are not mount
 569          *     options.  But it makes more sense to re-use the vfsopt code
 570          *     than duplicate it under a different name.
 571          */
 572         error = vfs_buildopts(optuio, &opts);
 573         if (error)
 574                 return (error);
 575 #ifdef INET
 576         ip4 = NULL;
 577 #endif
 578 #ifdef INET6
 579         ip6 = NULL;
 580 #endif
 581         g_path = NULL;
 582
 583         cuflags = flags & (JAIL_CREATE | JAIL_UPDATE);
 584         if (!cuflags) {
 585                 error = EINVAL;
 586                 vfs_opterror(opts, "no valid operation (create or update)");
 587                 goto done_errmsg;
 588         }
 589
 590         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
 591         if (error == ENOENT)
 592                 jid = 0;
 593         else if (error != 0)
 594                 goto done_free;
 595
 596         error = vfs_copyopt(opts, "securelevel", &slevel, sizeof(slevel));
 597         if (error == ENOENT)
 598                 gotslevel = 0;
 599         else if (error != 0)
 600                 goto done_free;
 601         else
 602                 gotslevel = 1;
 603
 604         error =
 605             vfs_copyopt(opts, "children.max", &childmax, sizeof(childmax));
 606         if (error == ENOENT)
 607                 gotchildmax = 0;
 608         else if (error != 0)
 609                 goto done_free;
 610         else
 611                 gotchildmax = 1;
 612
 613         error = vfs_copyopt(opts, "enforce_statfs", &enforce, sizeof(enforce));
 614         if (error == ENOENT)
 615                 gotenforce = 0;
 616         else if (error != 0)
 617                 goto done_free;
 618         else if (enforce < 0 || enforce > 2) {
 619                 error = EINVAL;
 620                 goto done_free;
 621         } else
 622                 gotenforce = 1;
 623
 624         error = vfs_copyopt(opts, "devfs_ruleset", &rsnum, sizeof(rsnum));
 625         if (error == ENOENT)
 626                 gotrsnum = 0;
 627         else if (error != 0)
 628                 goto done_free;
 629         else
 630                 gotrsnum = 1;
 631
 632         pr_flags = ch_flags = 0;
 633         for (bf = pr_flag_bool;
 634              bf < pr_flag_bool + nitems(pr_flag_bool);
 635              bf++) {
 636                 vfs_flagopt(opts, bf->name, &pr_flags, bf->flag);
 637                 vfs_flagopt(opts, bf->noname, &ch_flags, bf->flag);
 638         }
 639         ch_flags |= pr_flags;
 640         for (jsf = pr_flag_jailsys;
 641              jsf < pr_flag_jailsys + nitems(pr_flag_jailsys);
 642              jsf++) {
 643                 error = vfs_copyopt(opts, jsf->name, &jsys, sizeof(jsys));
 644                 if (error == ENOENT)
 645                         continue;
 646                 if (error != 0)
 647                         goto done_free;
 648                 switch (jsys) {
 649                 case JAIL_SYS_DISABLE:
 650                         if (!jsf->disable) {
 651                                 error = EINVAL;
 652                                 goto done_free;
 653                         }
 654                         pr_flags |= jsf->disable;
 655                         break;
 656                 case JAIL_SYS_NEW:
 657                         pr_flags |= jsf->new;
 658                         break;
 659                 case JAIL_SYS_INHERIT:
 660                         break;
 661                 default:
 662                         error = EINVAL;
 663                         goto done_free;
 664                 }
 665                 ch_flags |= jsf->new | jsf->disable;
 666         }
 667         if ((flags & (JAIL_CREATE | JAIL_ATTACH)) == JAIL_CREATE
 668             && !(pr_flags & PR_PERSIST)) {
 669                 error = EINVAL;
 670                 vfs_opterror(opts, "new jail must persist or attach");
 671                 goto done_errmsg;
 672         }
 673 #ifdef VIMAGE
 674         if ((flags & JAIL_UPDATE) && (ch_flags & PR_VNET)) {
 675                 error = EINVAL;
 676                 vfs_opterror(opts, "vnet cannot be changed after creation");
 677                 goto done_errmsg;
 678         }
 679 #endif
 680 #ifdef INET
 681         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP4_USER)) {
 682                 error = EINVAL;
 683                 vfs_opterror(opts, "ip4 cannot be changed after creation");
 684                 goto done_errmsg;
 685         }
 686 #endif
 687 #ifdef INET6
 688         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP6_USER)) {
 689                 error = EINVAL;
 690                 vfs_opterror(opts, "ip6 cannot be changed after creation");
 691                 goto done_errmsg;
 692         }
 693 #endif
 694
 695         pr_allow = ch_allow = 0;
 696         for (bf = pr_flag_allow;
 697              bf < pr_flag_allow + nitems(pr_flag_allow) &&
 698                 atomic_load_int(&bf->flag) != 0;
 699              bf++) {
 700                 vfs_flagopt(opts, bf->name, &pr_allow, bf->flag);
 701                 vfs_flagopt(opts, bf->noname, &ch_allow, bf->flag);
 702         }
 703         ch_allow |= pr_allow;
 704
 705         error = vfs_getopt(opts, "name", (void **)&name, &len);
 706         if (error == ENOENT)
 707                 name = NULL;
 708         else if (error != 0)
 709                 goto done_free;
 710         else {
 711                 if (len == 0 || name[len - 1] != '\0') {
 712                         error = EINVAL;
 713                         goto done_free;
 714                 }
 715                 if (len > MAXHOSTNAMELEN) {
 716                         error = ENAMETOOLONG;
 717                         goto done_free;
 718                 }
 719         }
 720
 721         error = vfs_getopt(opts, "host.hostname", (void **)&host, &len);
 722         if (error == ENOENT)
 723                 host = NULL;
 724         else if (error != 0)
 725                 goto done_free;
 726         else {
 727                 ch_flags |= PR_HOST;
 728                 pr_flags |= PR_HOST;
 729                 if (len == 0 || host[len - 1] != '\0') {
 730                         error = EINVAL;
 731                         goto done_free;
 732                 }
 733                 if (len > MAXHOSTNAMELEN) {
 734                         error = ENAMETOOLONG;
 735                         goto done_free;
 736                 }
 737         }
 738
 739         error = vfs_getopt(opts, "host.domainname", (void **)&domain, &len);
 740         if (error == ENOENT)
 741                 domain = NULL;
 742         else if (error != 0)
 743                 goto done_free;
 744         else {
 745                 ch_flags |= PR_HOST;
 746                 pr_flags |= PR_HOST;
 747                 if (len == 0 || domain[len - 1] != '\0') {
 748                         error = EINVAL;
 749                         goto done_free;
 750                 }
 751                 if (len > MAXHOSTNAMELEN) {
 752                         error = ENAMETOOLONG;
 753                         goto done_free;
 754                 }
 755         }
 756
 757         error = vfs_getopt(opts, "host.hostuuid", (void **)&uuid, &len);
 758         if (error == ENOENT)
 759                 uuid = NULL;
 760         else if (error != 0)
 761                 goto done_free;
 762         else {
 763                 ch_flags |= PR_HOST;
 764                 pr_flags |= PR_HOST;
 765                 if (len == 0 || uuid[len - 1] != '\0') {
 766                         error = EINVAL;
 767                         goto done_free;
 768                 }
 769                 if (len > HOSTUUIDLEN) {
 770                         error = ENAMETOOLONG;
 771                         goto done_free;
 772                 }
 773         }
 774
 775 #ifdef COMPAT_FREEBSD32
 776         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
 777                 uint32_t hid32;
 778
 779                 error = vfs_copyopt(opts, "host.hostid", &hid32, sizeof(hid32));
 780                 hid = hid32;
 781         } else
 782 #endif
 783                 error = vfs_copyopt(opts, "host.hostid", &hid, sizeof(hid));
 784         if (error == ENOENT)
 785                 gothid = 0;
 786         else if (error != 0)
 787                 goto done_free;
 788         else {
 789                 gothid = 1;
 790                 ch_flags |= PR_HOST;
 791                 pr_flags |= PR_HOST;
 792         }
 793
 794 #ifdef INET
 795         error = vfs_getopt(opts, "ip4.addr", &op, &ip4s);
 796         if (error == ENOENT)
 797                 ip4s = 0;
 798         else if (error != 0)
 799                 goto done_free;
 800         else if (ip4s & (sizeof(*ip4) - 1)) {
 801                 error = EINVAL;
 802                 goto done_free;
 803         } else {
 804                 ch_flags |= PR_IP4_USER;
 805                 pr_flags |= PR_IP4_USER;
 806                 if (ip4s > 0) {
 807                         ip4s /= sizeof(*ip4);
 808                         if (ip4s > jail_max_af_ips) {
 809                                 error = EINVAL;
 810                                 vfs_opterror(opts, "too many IPv4 addresses");
 811                                 goto done_errmsg;
 812                         }
 813                         ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
 814                         bcopy(op, ip4, ip4s * sizeof(*ip4));
 815                         /*
 816                          * IP addresses are all sorted but ip[0] to preserve
 817                          * the primary IP address as given from userland.
 818                          * This special IP is used for unbound outgoing
 819                          * connections as well for "loopback" traffic in case
 820                          * source address selection cannot find any more fitting
 821                          * address to connect from.
 822                          */
 823                         if (ip4s > 1)
 824                                 qsort(ip4 + 1, ip4s - 1, sizeof(*ip4),
 825                                     prison_qcmp_v4);
 826                         /*
 827                          * Check for duplicate addresses and do some simple
 828                          * zero and broadcast checks. If users give other bogus
 829                          * addresses it is their problem.
 830                          *
 831                          * We do not have to care about byte order for these
 832                          * checks so we will do them in NBO.
 833                          */
 834                         for (ii = 0; ii < ip4s; ii++) {
 835                                 if (ip4[ii].s_addr == INADDR_ANY ||
 836                                     ip4[ii].s_addr == INADDR_BROADCAST) {
 837                                         error = EINVAL;
 838                                         goto done_free;
 839                                 }
 840                                 if ((ii+1) < ip4s &&
 841                                     (ip4[0].s_addr == ip4[ii+1].s_addr ||
 842                                      ip4[ii].s_addr == ip4[ii+1].s_addr)) {
 843                                         error = EINVAL;
 844                                         goto done_free;
 845                                 }
 846                         }
 847                 }
 848         }
 849 #endif
 850
 851 #ifdef INET6
 852         error = vfs_getopt(opts, "ip6.addr", &op, &ip6s);
 853         if (error == ENOENT)
 854                 ip6s = 0;
 855         else if (error != 0)
 856                 goto done_free;
 857         else if (ip6s & (sizeof(*ip6) - 1)) {
 858                 error = EINVAL;
 859                 goto done_free;
 860         } else {
 861                 ch_flags |= PR_IP6_USER;
 862                 pr_flags |= PR_IP6_USER;
 863                 if (ip6s > 0) {
 864                         ip6s /= sizeof(*ip6);
 865                         if (ip6s > jail_max_af_ips) {
 866                                 error = EINVAL;
 867                                 vfs_opterror(opts, "too many IPv6 addresses");
 868                                 goto done_errmsg;
 869                         }
 870                         ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
 871                         bcopy(op, ip6, ip6s * sizeof(*ip6));
 872                         if (ip6s > 1)
 873                                 qsort(ip6 + 1, ip6s - 1, sizeof(*ip6),
 874                                     prison_qcmp_v6);
 875                         for (ii = 0; ii < ip6s; ii++) {
 876                                 if (IN6_IS_ADDR_UNSPECIFIED(&ip6[ii])) {
 877                                         error = EINVAL;
 878                                         goto done_free;
 879                                 }
 880                                 if ((ii+1) < ip6s &&
 881                                     (IN6_ARE_ADDR_EQUAL(&ip6[0], &ip6[ii+1]) ||
 882                                      IN6_ARE_ADDR_EQUAL(&ip6[ii], &ip6[ii+1])))
 883                                 {
 884                                         error = EINVAL;
 885                                         goto done_free;
 886                                 }
 887                         }
 888                 }
 889         }
 890 #endif
 891
 892 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
 893         if ((ch_flags & PR_VNET) && (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
 894                 error = EINVAL;
 895                 vfs_opterror(opts,
 896                     "vnet jails cannot have IP address restrictions");
 897                 goto done_errmsg;
 898         }
 899 #endif
 900
 901         error = vfs_getopt(opts, "osrelease", (void **)&osrelstr, &len);
 902         if (error == ENOENT)
 903                 osrelstr = NULL;
 904         else if (error != 0)
 905                 goto done_free;
 906         else {
 907                 if (flags & JAIL_UPDATE) {
 908                         error = EINVAL;
 909                         vfs_opterror(opts,
 910                             "osrelease cannot be changed after creation");
 911                         goto done_errmsg;
 912                 }
 913                 if (len == 0 || osrelstr[len - 1] != '\0') {
 914                         error = EINVAL;
 915                         goto done_free;
 916                 }
 917                 if (len >= OSRELEASELEN) {
 918                         error = ENAMETOOLONG;
 919                         vfs_opterror(opts,
 920                             "osrelease string must be 1-%d bytes long",
 921                             OSRELEASELEN - 1);
 922                         goto done_errmsg;
 923                 }
 924         }
 925
 926         error = vfs_copyopt(opts, "osreldate", &osreldt, sizeof(osreldt));
 927         if (error == ENOENT)
 928                 osreldt = 0;
 929         else if (error != 0)
 930                 goto done_free;
 931         else {
 932                 if (flags & JAIL_UPDATE) {
 933                         error = EINVAL;
 934                         vfs_opterror(opts,
 935                             "osreldate cannot be changed after creation");
 936                         goto done_errmsg;
 937                 }
 938                 if (osreldt == 0) {
 939                         error = EINVAL;
 940                         vfs_opterror(opts, "osreldate cannot be 0");
 941                         goto done_errmsg;
 942                 }
 943         }
 944
 945         root = NULL;
 946         error = vfs_getopt(opts, "path", (void **)&path, &len);
 947         if (error == ENOENT)
 948                 path = NULL;
 949         else if (error != 0)
 950                 goto done_free;
 951         else {
 952                 if (flags & JAIL_UPDATE) {
 953                         error = EINVAL;
 954                         vfs_opterror(opts,
 955                             "path cannot be changed after creation");
 956                         goto done_errmsg;
 957                 }
 958                 if (len == 0 || path[len - 1] != '\0') {
 959                         error = EINVAL;
 960                         goto done_free;
 961                 }
 962                 NDINIT(&nd, LOOKUP, FOLLOW | LOCKLEAF, UIO_SYSSPACE,
 963                     path, td);
 964                 error = namei(&nd);
 965                 if (error)
 966                         goto done_free;
 967                 root = nd.ni_vp;
 968                 NDFREE(&nd, NDF_ONLY_PNBUF);
 969                 g_path = malloc(MAXPATHLEN, M_TEMP, M_WAITOK);
 970                 strlcpy(g_path, path, MAXPATHLEN);
 971                 error = vn_path_to_global_path(td, root, g_path, MAXPATHLEN);
 972                 if (error == 0) {
 973                         path = g_path;
 974                 } else {
 975                         /* exit on other errors */
 976                         goto done_free;
 977                 }
 978                 if (root->v_type != VDIR) {
 979                         error = ENOTDIR;
 980                         vput(root);
 981                         goto done_free;
 982                 }
 983                 VOP_UNLOCK(root);
 984         }
 985
 986         /*
 987          * Find the specified jail, or at least its parent.
 988          * This abuses the file error codes ENOENT and EEXIST.
 989          */
 990         pr = NULL;
 991         ppr = mypr;
 992         inspr = NULL;
 993         if (cuflags == JAIL_CREATE && jid == 0 && name != NULL) {
 994                 namelc = strrchr(name, '.');
 995                 jid = strtoul(namelc != NULL ? namelc + 1 : name, &p, 10);
 996                 if (*p != '\0')
 997                         jid = 0;
 998         }
 999         sx_xlock(&allprison_lock);
1000         drflags = PD_LIST_XLOCKED;
1001         if (jid != 0) {
1002                 if (jid < 0) {
1003                         error = EINVAL;
1004                         vfs_opterror(opts, "negative jid");
1005                         goto done_deref;
1006                 }
1007                 /*
1008                  * See if a requested jid already exists.  Keep track of
1009                  * where it can be inserted later.
1010                  */
1011                 TAILQ_FOREACH(inspr, &allprison, pr_list) {
1012                         if (inspr->pr_id < jid)
1013                                 continue;
1014                         if (inspr->pr_id > jid)
1015                                 break;
1016                         pr = inspr;
1017                         mtx_lock(&pr->pr_mtx);
1018                         drflags |= PD_LOCKED;
1019                         inspr = NULL;
1020                         break;
1021                 }
1022                 if (pr != NULL) {
1023                         ppr = pr->pr_parent;
1024                         /* Create: jid must not exist. */
1025                         if (cuflags == JAIL_CREATE) {
1026                                 /*
1027                                  * Even creators that cannot see the jail will
1028                                  * get EEXIST.
1029                                  */
1030                                 error = EEXIST;
1031                                 vfs_opterror(opts, "jail %d already exists",
1032                                     jid);
1033                                 goto done_deref;
1034                         }
1035                         if (!prison_ischild(mypr, pr)) {
1036                                 /*
1037                                  * Updaters get ENOENT if they cannot see the
1038                                  * jail.  This is true even for CREATE | UPDATE,
1039                                  * which normally cannot give this error.
1040                                  */
1041                                 error = ENOENT;
1042                                 vfs_opterror(opts, "jail %d not found", jid);
1043                                 goto done_deref;
1044                         }
1045                         if (!prison_isalive(pr)) {
1046                                 if (!(flags & JAIL_DYING)) {
1047                                         error = ENOENT;
1048                                         vfs_opterror(opts, "jail %d is dying",
1049                                             jid);
1050                                         goto done_deref;
1051                                 }
1052                                 if ((flags & JAIL_ATTACH) ||
1053                                     (pr_flags & PR_PERSIST)) {
1054                                         /*
1055                                          * A dying jail might be resurrected
1056                                          * (via attach or persist), but first
1057                                          * it must determine if another jail
1058                                          * has claimed its name.  Accomplish
1059                                          * this by implicitly re-setting the
1060                                          * name.
1061                                          */
1062                                         if (name == NULL)
1063                                                 name = prison_name(mypr, pr);
1064                                 }
1065                         }
1066                 } else {
1067                         /* Update: jid must exist. */
1068                         if (cuflags == JAIL_UPDATE) {
1069                                 error = ENOENT;
1070                                 vfs_opterror(opts, "jail %d not found", jid);
1071                                 goto done_deref;
1072                         }
1073                 }
1074         }
1075         /*
1076          * If the caller provided a name, look for a jail by that name.
1077          * This has different semantics for creates and updates keyed by jid
1078          * (where the name must not already exist in a different jail),
1079          * and updates keyed by the name itself (where the name must exist
1080          * because that is the jail being updated).
1081          */
1082         namelc = NULL;
1083         if (name != NULL) {
1084                 namelc = strrchr(name, '.');
1085                 if (namelc == NULL)
1086                         namelc = name;
1087                 else {
1088                         /*
1089                          * This is a hierarchical name.  Split it into the
1090                          * parent and child names, and make sure the parent
1091                          * exists or matches an already found jail.
1092                          */
1093                         if (pr != NULL) {
1094                                 if (strncmp(name, ppr->pr_name, namelc - name)
1095                                     || ppr->pr_name[namelc - name] != '\0') {
1096                                         error = EINVAL;
1097                                         vfs_opterror(opts,
1098                                             "cannot change jail's parent");
1099                                         goto done_deref;
1100                                 }
1101                         } else {
1102                                 *namelc = '\0';
1103                                 ppr = prison_find_name(mypr, name);
1104                                 if (ppr == NULL) {
1105                                         error = ENOENT;
1106                                         vfs_opterror(opts,
1107                                             "jail \"%s\" not found", name);
1108                                         goto done_deref;
1109                                 }
1110                                 if (!(flags & JAIL_DYING) &&
1111                                     !prison_isalive(ppr)) {
1112                                         mtx_unlock(&ppr->pr_mtx);
1113                                         error = ENOENT;
1114                                         vfs_opterror(opts,
1115                                             "jail \"%s\" is dying", name);
1116                                         goto done_deref;
1117                                 }
1118                                 mtx_unlock(&ppr->pr_mtx);
1119                                 *namelc = '.';
1120                         }
1121                         namelc++;
1122                 }
1123                 if (namelc[0] != '\0') {
1124                         pnamelen =
1125                             (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1126                         deadpr = NULL;
1127                         FOREACH_PRISON_CHILD(ppr, tpr) {
1128                                 if (tpr != pr &&
1129                                     !strcmp(tpr->pr_name + pnamelen, namelc)) {
1130                                         if (prison_isalive(tpr)) {
1131                                                 if (pr == NULL &&
1132                                                     cuflags != JAIL_CREATE) {
1133                                                         /*
1134                                                          * Use this jail
1135                                                          * for updates.
1136                                                          */
1137                                                         pr = tpr;
1138                                                         mtx_lock(&pr->pr_mtx);
1139                                                         drflags |= PD_LOCKED;
1140                                                         break;
1141                                                 }
1142                                                 /*
1143                                                  * Create, or update(jid):
1144                                                  * name must not exist in an
1145                                                  * active sibling jail.
1146                                                  */
1147                                                 error = EEXIST;
1148                                                 vfs_opterror(opts,
1149                                                    "jail \"%s\" already exists",
1150                                                    name);
1151                                                 goto done_deref;
1152                                         }
1153                                         if (pr == NULL &&
1154                                             cuflags != JAIL_CREATE) {
1155                                                 deadpr = tpr;
1156                                         }
1157                                 }
1158                         }
1159                         /* If no active jail is found, use a dying one. */
1160                         if (deadpr != NULL && pr == NULL) {
1161                                 if (flags & JAIL_DYING) {
1162                                         pr = deadpr;
1163                                         mtx_lock(&pr->pr_mtx);
1164                                         drflags |= PD_LOCKED;
1165                                 } else if (cuflags == JAIL_UPDATE) {
1166                                         error = ENOENT;
1167                                         vfs_opterror(opts,
1168                                             "jail \"%s\" is dying", name);
1169                                         goto done_deref;
1170                                 }
1171                         }
1172                         /* Update: name must exist if no jid. */
1173                         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1174                                 error = ENOENT;
1175                                 vfs_opterror(opts, "jail \"%s\" not found",
1176                                     name);
1177                                 goto done_deref;
1178                         }
1179                 }
1180         }
1181         /* Update: must provide a jid or name. */
1182         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1183                 error = ENOENT;
1184                 vfs_opterror(opts, "update specified no jail");
1185                 goto done_deref;
1186         }
1187
1188         /* If there's no prison to update, create a new one and link it in. */
1189         created = pr == NULL;
1190         if (created) {
1191                 for (tpr = mypr; tpr != NULL; tpr = tpr->pr_parent)
1192                         if (tpr->pr_childcount >= tpr->pr_childmax) {
1193                                 error = EPERM;
1194                                 vfs_opterror(opts, "prison limit exceeded");
1195                                 goto done_deref;
1196                         }
1197                 prison_hold(ppr);
1198                 if (!refcount_acquire_if_not_zero(&ppr->pr_uref)) {
1199                         /* This brings the parent back to life. */
1200                         mtx_lock(&ppr->pr_mtx);
1201                         refcount_acquire(&ppr->pr_uref);
1202                         ppr->pr_state = PRISON_STATE_ALIVE;
1203                         mtx_unlock(&ppr->pr_mtx);
1204                         error = osd_jail_call(ppr, PR_METHOD_CREATE, opts);
1205                         if (error) {
1206                                 pr = ppr;
1207                                 drflags |= PD_DEREF | PD_DEUREF;
1208                                 goto done_deref;
1209                         }
1210                 }
1211
1212                 if (jid == 0 && (jid = get_next_prid(&inspr)) == 0) {
1213                         error = EAGAIN;
1214                         vfs_opterror(opts, "no available jail IDs");
1215                         pr = ppr;
1216                         drflags |= PD_DEREF | PD_DEUREF;
1217                         goto done_deref;
1218                 }
1219
1220                 pr = malloc(sizeof(*pr), M_PRISON, M_WAITOK | M_ZERO);
1221                 pr->pr_state = PRISON_STATE_INVALID;
1222                 refcount_init(&pr->pr_ref, 1);
1223                 refcount_init(&pr->pr_uref, 0);
1224                 drflags |= PD_DEREF;
1225                 LIST_INIT(&pr->pr_children);
1226                 mtx_init(&pr->pr_mtx, "jail mutex", NULL, MTX_DEF | MTX_DUPOK);
1227                 TASK_INIT(&pr->pr_task, 0, prison_complete, pr);
1228
1229                 pr->pr_id = jid;
1230                 if (inspr != NULL)
1231                         TAILQ_INSERT_BEFORE(inspr, pr, pr_list);
1232                 else
1233                         TAILQ_INSERT_TAIL(&allprison, pr, pr_list);
1234
1235                 pr->pr_parent = ppr;
1236                 LIST_INSERT_HEAD(&ppr->pr_children, pr, pr_sibling);
1237                 for (tpr = ppr; tpr != NULL; tpr = tpr->pr_parent)
1238                         tpr->pr_childcount++;
1239
1240                 /* Set some default values, and inherit some from the parent. */
1241                 if (namelc == NULL)
1242                         namelc = "";
1243                 if (path == NULL) {
1244                         path = "/";
1245                         root = mypr->pr_root;
1246                         vref(root);
1247                 }
1248                 strlcpy(pr->pr_hostuuid, DEFAULT_HOSTUUID, HOSTUUIDLEN);
1249                 pr->pr_flags |= PR_HOST;
1250 #if defined(INET) || defined(INET6)
1251 #ifdef VIMAGE
1252                 if (!(pr_flags & PR_VNET))
1253 #endif
1254                 {
1255 #ifdef INET
1256                         if (!(ch_flags & PR_IP4_USER))
1257                                 pr->pr_flags |= PR_IP4 | PR_IP4_USER;
1258                         else if (!(pr_flags & PR_IP4_USER)) {
1259                                 pr->pr_flags |= ppr->pr_flags & PR_IP4;
1260                                 if (ppr->pr_ip4 != NULL) {
1261                                         pr->pr_ip4s = ppr->pr_ip4s;
1262                                         pr->pr_ip4 = malloc(pr->pr_ip4s *
1263                                             sizeof(struct in_addr), M_PRISON,
1264                                             M_WAITOK);
1265                                         bcopy(ppr->pr_ip4, pr->pr_ip4,
1266                                             pr->pr_ip4s * sizeof(*pr->pr_ip4));
1267                                 }
1268                         }
1269 #endif
1270 #ifdef INET6
1271                         if (!(ch_flags & PR_IP6_USER))
1272                                 pr->pr_flags |= PR_IP6 | PR_IP6_USER;
1273                         else if (!(pr_flags & PR_IP6_USER)) {
1274                                 pr->pr_flags |= ppr->pr_flags & PR_IP6;
1275                                 if (ppr->pr_ip6 != NULL) {
1276                                         pr->pr_ip6s = ppr->pr_ip6s;
1277                                         pr->pr_ip6 = malloc(pr->pr_ip6s *
1278                                             sizeof(struct in6_addr), M_PRISON,
1279                                             M_WAITOK);
1280                                         bcopy(ppr->pr_ip6, pr->pr_ip6,
1281                                             pr->pr_ip6s * sizeof(*pr->pr_ip6));
1282                                 }
1283                         }
1284 #endif
1285                 }
1286 #endif
1287                 /* Source address selection is always on by default. */
1288                 pr->pr_flags |= _PR_IP_SADDRSEL;
1289
1290                 pr->pr_securelevel = ppr->pr_securelevel;
1291                 pr->pr_allow = JAIL_DEFAULT_ALLOW & ppr->pr_allow;
1292                 pr->pr_enforce_statfs = jail_default_enforce_statfs;
1293                 pr->pr_devfs_rsnum = ppr->pr_devfs_rsnum;
1294
1295                 pr->pr_osreldate = osreldt ? osreldt : ppr->pr_osreldate;
1296                 if (osrelstr == NULL)
1297                         strlcpy(pr->pr_osrelease, ppr->pr_osrelease,
1298                             sizeof(pr->pr_osrelease));
1299                 else
1300                         strlcpy(pr->pr_osrelease, osrelstr,
1301                             sizeof(pr->pr_osrelease));
1302
1303 #ifdef VIMAGE
1304                 /* Allocate a new vnet if specified. */
1305                 pr->pr_vnet = (pr_flags & PR_VNET)
1306                     ? vnet_alloc() : ppr->pr_vnet;
1307 #endif
1308                 /*
1309                  * Allocate a dedicated cpuset for each jail.
1310                  * Unlike other initial settings, this may return an erorr.
1311                  */
1312                 error = cpuset_create_root(ppr, &pr->pr_cpuset);
1313                 if (error)
1314                         goto done_deref;
1315
1316                 mtx_lock(&pr->pr_mtx);
1317                 drflags |= PD_LOCKED;
1318         } else {
1319                 /*
1320                  * Grab a reference for existing prisons, to ensure they
1321                  * continue to exist for the duration of the call.
1322                  */
1323                 prison_hold(pr);
1324                 drflags |= PD_DEREF;
1325 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
1326                 if ((pr->pr_flags & PR_VNET) &&
1327                     (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
1328                         error = EINVAL;
1329                         vfs_opterror(opts,
1330                             "vnet jails cannot have IP address restrictions");
1331                         goto done_deref;
1332                 }
1333 #endif
1334 #ifdef INET
1335                 if (PR_IP4_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1336                         error = EINVAL;
1337                         vfs_opterror(opts,
1338                             "ip4 cannot be changed after creation");
1339                         goto done_deref;
1340                 }
1341 #endif
1342 #ifdef INET6
1343                 if (PR_IP6_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1344                         error = EINVAL;
1345                         vfs_opterror(opts,
1346                             "ip6 cannot be changed after creation");
1347                         goto done_deref;
1348                 }
1349 #endif
1350         }
1351
1352         /* Do final error checking before setting anything. */
1353         if (gotslevel) {
1354                 if (slevel < ppr->pr_securelevel) {
1355                         error = EPERM;
1356                         goto done_deref;
1357                 }
1358         }
1359         if (gotchildmax) {
1360                 if (childmax >= ppr->pr_childmax) {
1361                         error = EPERM;
1362                         goto done_deref;
1363                 }
1364         }
1365         if (gotenforce) {
1366                 if (enforce < ppr->pr_enforce_statfs) {
1367                         error = EPERM;
1368                         goto done_deref;
1369                 }
1370         }
1371         if (gotrsnum) {
1372                 /*
1373                  * devfs_rsnum is a uint16_t
1374                  */
1375                 if (rsnum < 0 || rsnum > 65535) {
1376                         error = EINVAL;
1377                         goto done_deref;
1378                 }
1379                 /*
1380                  * Nested jails always inherit parent's devfs ruleset
1381                  */
1382                 if (jailed(td->td_ucred)) {
1383                         if (rsnum > 0 && rsnum != ppr->pr_devfs_rsnum) {
1384                                 error = EPERM;
1385                                 goto done_deref;
1386                         } else
1387                                 rsnum = ppr->pr_devfs_rsnum;
1388                 }
1389         }
1390 #ifdef INET
1391         if (ip4s > 0) {
1392                 if (ppr->pr_flags & PR_IP4) {
1393                         /*
1394                          * Make sure the new set of IP addresses is a
1395                          * subset of the parent's list.  Don't worry
1396                          * about the parent being unlocked, as any
1397                          * setting is done with allprison_lock held.
1398                          */
1399                         for (ij = 0; ij < ppr->pr_ip4s; ij++)
1400                                 if (ip4[0].s_addr == ppr->pr_ip4[ij].s_addr)
1401                                         break;
1402                         if (ij == ppr->pr_ip4s) {
1403                                 error = EPERM;
1404                                 goto done_deref;
1405                         }
1406                         if (ip4s > 1) {
1407                                 for (ii = ij = 1; ii < ip4s; ii++) {
1408                                         if (ip4[ii].s_addr ==
1409                                             ppr->pr_ip4[0].s_addr)
1410                                                 continue;
1411                                         for (; ij < ppr->pr_ip4s; ij++)
1412                                                 if (ip4[ii].s_addr ==
1413                                                     ppr->pr_ip4[ij].s_addr)
1414                                                         break;
1415                                         if (ij == ppr->pr_ip4s)
1416                                                 break;
1417                                 }
1418                                 if (ij == ppr->pr_ip4s) {
1419                                         error = EPERM;
1420                                         goto done_deref;
1421                                 }
1422                         }
1423                 }
1424                 /*
1425                  * Check for conflicting IP addresses.  We permit them
1426                  * if there is no more than one IP on each jail.  If
1427                  * there is a duplicate on a jail with more than one
1428                  * IP stop checking and return error.
1429                  */
1430 #ifdef VIMAGE
1431                 for (tppr = ppr; tppr != &prison0; tppr = tppr->pr_parent)
1432                         if (tppr->pr_flags & PR_VNET)
1433                                 break;
1434 #else
1435                 tppr = &prison0;
1436 #endif
1437                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1438                         if (tpr == pr ||
1439 #ifdef VIMAGE
1440                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1441 #endif
1442                             !prison_isalive(tpr)) {
1443                                 descend = 0;
1444                                 continue;
1445                         }
1446                         if (!(tpr->pr_flags & PR_IP4_USER))
1447                                 continue;
1448                         descend = 0;
1449                         if (tpr->pr_ip4 == NULL ||
1450                             (ip4s == 1 && tpr->pr_ip4s == 1))
1451                                 continue;
1452                         for (ii = 0; ii < ip4s; ii++) {
1453                                 if (prison_check_ip4_locked(tpr, &ip4[ii]) ==
1454                                     0) {
1455                                         error = EADDRINUSE;
1456                                         vfs_opterror(opts,
1457                                             "IPv4 addresses clash");
1458                                         goto done_deref;
1459                                 }
1460                         }
1461                 }
1462         }
1463 #endif
1464 #ifdef INET6
1465         if (ip6s > 0) {
1466                 if (ppr->pr_flags & PR_IP6) {
1467                         /*
1468                          * Make sure the new set of IP addresses is a
1469                          * subset of the parent's list.
1470                          */
1471                         for (ij = 0; ij < ppr->pr_ip6s; ij++)
1472                                 if (IN6_ARE_ADDR_EQUAL(&ip6[0],
1473                                     &ppr->pr_ip6[ij]))
1474                                         break;
1475                         if (ij == ppr->pr_ip6s) {
1476                                 error = EPERM;
1477                                 goto done_deref;
1478                         }
1479                         if (ip6s > 1) {
1480                                 for (ii = ij = 1; ii < ip6s; ii++) {
1481                                         if (IN6_ARE_ADDR_EQUAL(&ip6[ii],
1482                                              &ppr->pr_ip6[0]))
1483                                                 continue;
1484                                         for (; ij < ppr->pr_ip6s; ij++)
1485                                                 if (IN6_ARE_ADDR_EQUAL(
1486                                                     &ip6[ii], &ppr->pr_ip6[ij]))
1487                                                         break;
1488                                         if (ij == ppr->pr_ip6s)
1489                                                 break;
1490                                 }
1491                                 if (ij == ppr->pr_ip6s) {
1492                                         error = EPERM;
1493                                         goto done_deref;
1494                                 }
1495                         }
1496                 }
1497                 /* Check for conflicting IP addresses. */
1498 #ifdef VIMAGE
1499                 for (tppr = ppr; tppr != &prison0; tppr = tppr->pr_parent)
1500                         if (tppr->pr_flags & PR_VNET)
1501                                 break;
1502 #else
1503                 tppr = &prison0;
1504 #endif
1505                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1506                         if (tpr == pr ||
1507 #ifdef VIMAGE
1508                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1509 #endif
1510                             !prison_isalive(tpr)) {
1511                                 descend = 0;
1512                                 continue;
1513                         }
1514                         if (!(tpr->pr_flags & PR_IP6_USER))
1515                                 continue;
1516                         descend = 0;
1517                         if (tpr->pr_ip6 == NULL ||
1518                             (ip6s == 1 && tpr->pr_ip6s == 1))
1519                                 continue;
1520                         for (ii = 0; ii < ip6s; ii++) {
1521                                 if (prison_check_ip6_locked(tpr, &ip6[ii]) ==
1522                                     0) {
1523                                         error = EADDRINUSE;
1524                                         vfs_opterror(opts,
1525                                             "IPv6 addresses clash");
1526                                         goto done_deref;
1527                                 }
1528                         }
1529                 }
1530         }
1531 #endif
1532         onamelen = namelen = 0;
1533         if (namelc != NULL) {
1534                 /* Give a default name of the jid.  Also allow the name to be
1535                  * explicitly the jid - but not any other number, and only in
1536                  * normal form (no leading zero/etc).
1537                  */
1538                 if (namelc[0] == '\0')
1539                         snprintf(namelc = numbuf, sizeof(numbuf), "%d", jid);
1540                 else if ((strtoul(namelc, &p, 10) != jid ||
1541                           namelc[0] < '1' || namelc[0] > '9') && *p == '\0') {
1542                         error = EINVAL;
1543                         vfs_opterror(opts,
1544                             "name cannot be numeric (unless it is the jid)");
1545                         goto done_deref;
1546                 }
1547                 /*
1548                  * Make sure the name isn't too long for the prison or its
1549                  * children.
1550                  */
1551                 pnamelen = (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1552                 onamelen = strlen(pr->pr_name + pnamelen);
1553                 namelen = strlen(namelc);
1554                 if (pnamelen + namelen + 1 > sizeof(pr->pr_name)) {
1555                         error = ENAMETOOLONG;
1556                         goto done_deref;
1557                 }
1558                 FOREACH_PRISON_DESCENDANT(pr, tpr, descend) {
1559                         if (strlen(tpr->pr_name) + (namelen - onamelen) >=
1560                             sizeof(pr->pr_name)) {
1561                                 error = ENAMETOOLONG;
1562                                 goto done_deref;
1563                         }
1564                 }
1565         }
1566         pr_allow_diff = pr_allow & ~ppr->pr_allow;
1567         if (pr_allow_diff & ~PR_ALLOW_DIFFERENCES) {
1568                 error = EPERM;
1569                 goto done_deref;
1570         }
1571
1572         /*
1573          * Let modules check their parameters.  This requires unlocking and
1574          * then re-locking the prison, but this is still a valid state as long
1575          * as allprison_lock remains xlocked.
1576          */
1577         mtx_unlock(&pr->pr_mtx);
1578         drflags &= ~PD_LOCKED;
1579         error = osd_jail_call(pr, PR_METHOD_CHECK, opts);
1580         if (error != 0)
1581                 goto done_deref;
1582         mtx_lock(&pr->pr_mtx);
1583         drflags |= PD_LOCKED;
1584
1585         /* At this point, all valid parameters should have been noted. */
1586         TAILQ_FOREACH(opt, opts, link) {
1587                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
1588                         error = EINVAL;
1589                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
1590                         goto done_deref;
1591                 }
1592         }
1593
1594         /* Set the parameters of the prison. */
1595 #ifdef INET
1596         redo_ip4 = 0;
1597         if (pr_flags & PR_IP4_USER) {
1598                 pr->pr_flags |= PR_IP4;
1599                 free(pr->pr_ip4, M_PRISON);
1600                 pr->pr_ip4s = ip4s;
1601                 pr->pr_ip4 = ip4;
1602                 ip4 = NULL;
1603                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1604 #ifdef VIMAGE
1605                         if (tpr->pr_flags & PR_VNET) {
1606                                 descend = 0;
1607                                 continue;
1608                         }
1609 #endif
1610                         if (prison_restrict_ip4(tpr, NULL)) {
1611                                 redo_ip4 = 1;
1612                                 descend = 0;
1613                         }
1614                 }
1615         }
1616 #endif
1617 #ifdef INET6
1618         redo_ip6 = 0;
1619         if (pr_flags & PR_IP6_USER) {
1620                 pr->pr_flags |= PR_IP6;
1621                 free(pr->pr_ip6, M_PRISON);
1622                 pr->pr_ip6s = ip6s;
1623                 pr->pr_ip6 = ip6;
1624                 ip6 = NULL;
1625                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1626 #ifdef VIMAGE
1627                         if (tpr->pr_flags & PR_VNET) {
1628                                 descend = 0;
1629                                 continue;
1630                         }
1631 #endif
1632                         if (prison_restrict_ip6(tpr, NULL)) {
1633                                 redo_ip6 = 1;
1634                                 descend = 0;
1635                         }
1636                 }
1637         }
1638 #endif
1639         if (gotslevel) {
1640                 pr->pr_securelevel = slevel;
1641                 /* Set all child jails to be at least this level. */
1642                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1643                         if (tpr->pr_securelevel < slevel)
1644                                 tpr->pr_securelevel = slevel;
1645         }
1646         if (gotchildmax) {
1647                 pr->pr_childmax = childmax;
1648                 /* Set all child jails to under this limit. */
1649                 FOREACH_PRISON_DESCENDANT_LOCKED_LEVEL(pr, tpr, descend, level)
1650                         if (tpr->pr_childmax > childmax - level)
1651                                 tpr->pr_childmax = childmax > level
1652                                     ? childmax - level : 0;
1653         }
1654         if (gotenforce) {
1655                 pr->pr_enforce_statfs = enforce;
1656                 /* Pass this restriction on to the children. */
1657                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1658                         if (tpr->pr_enforce_statfs < enforce)
1659                                 tpr->pr_enforce_statfs = enforce;
1660         }
1661         if (gotrsnum) {
1662                 pr->pr_devfs_rsnum = rsnum;
1663                 /* Pass this restriction on to the children. */
1664                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1665                         tpr->pr_devfs_rsnum = rsnum;
1666         }
1667         if (namelc != NULL) {
1668                 if (ppr == &prison0)
1669                         strlcpy(pr->pr_name, namelc, sizeof(pr->pr_name));
1670                 else
1671                         snprintf(pr->pr_name, sizeof(pr->pr_name), "%s.%s",
1672                             ppr->pr_name, namelc);
1673                 /* Change this component of child names. */
1674                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1675                         bcopy(tpr->pr_name + onamelen, tpr->pr_name + namelen,
1676                             strlen(tpr->pr_name + onamelen) + 1);
1677                         bcopy(pr->pr_name, tpr->pr_name, namelen);
1678                 }
1679         }
1680         if (path != NULL) {
1681                 /* Try to keep a real-rooted full pathname. */
1682                 strlcpy(pr->pr_path, path, sizeof(pr->pr_path));
1683                 pr->pr_root = root;
1684                 root = NULL;
1685         }
1686         if (PR_HOST & ch_flags & ~pr_flags) {
1687                 if (pr->pr_flags & PR_HOST) {
1688                         /*
1689                          * Copy the parent's host info.  As with pr_ip4 above,
1690                          * the lack of a lock on the parent is not a problem;
1691                          * it is always set with allprison_lock at least
1692                          * shared, and is held exclusively here.
1693                          */
1694                         strlcpy(pr->pr_hostname, pr->pr_parent->pr_hostname,
1695                             sizeof(pr->pr_hostname));
1696                         strlcpy(pr->pr_domainname, pr->pr_parent->pr_domainname,
1697                             sizeof(pr->pr_domainname));
1698                         strlcpy(pr->pr_hostuuid, pr->pr_parent->pr_hostuuid,
1699                             sizeof(pr->pr_hostuuid));
1700                         pr->pr_hostid = pr->pr_parent->pr_hostid;
1701                 }
1702         } else if (host != NULL || domain != NULL || uuid != NULL || gothid) {
1703                 /* Set this prison, and any descendants without PR_HOST. */
1704                 if (host != NULL)
1705                         strlcpy(pr->pr_hostname, host, sizeof(pr->pr_hostname));
1706                 if (domain != NULL)
1707                         strlcpy(pr->pr_domainname, domain,
1708                             sizeof(pr->pr_domainname));
1709                 if (uuid != NULL)
1710                         strlcpy(pr->pr_hostuuid, uuid, sizeof(pr->pr_hostuuid));
1711                 if (gothid)
1712                         pr->pr_hostid = hid;
1713                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1714                         if (tpr->pr_flags & PR_HOST)
1715                                 descend = 0;
1716                         else {
1717                                 if (host != NULL)
1718                                         strlcpy(tpr->pr_hostname,
1719                                             pr->pr_hostname,
1720                                             sizeof(tpr->pr_hostname));
1721                                 if (domain != NULL)
1722                                         strlcpy(tpr->pr_domainname,
1723                                             pr->pr_domainname,
1724                                             sizeof(tpr->pr_domainname));
1725                                 if (uuid != NULL)
1726                                         strlcpy(tpr->pr_hostuuid,
1727                                             pr->pr_hostuuid,
1728                                             sizeof(tpr->pr_hostuuid));
1729                                 if (gothid)
1730                                         tpr->pr_hostid = hid;
1731                         }
1732                 }
1733         }
1734         pr->pr_allow = (pr->pr_allow & ~ch_allow) | pr_allow;
1735         if ((tallow = ch_allow & ~pr_allow))
1736                 prison_set_allow_locked(pr, tallow, 0);
1737         /*
1738          * Persistent prisons get an extra reference, and prisons losing their
1739          * persist flag lose that reference.
1740          */
1741         born = !prison_isalive(pr);
1742         if (ch_flags & PR_PERSIST & (pr_flags ^ pr->pr_flags)) {
1743                 if (pr_flags & PR_PERSIST) {
1744                         prison_hold(pr);
1745                         /*
1746                          * This may make a dead prison alive again, but wait
1747                          * to label it as such until after OSD calls have had
1748                          * a chance to run (and perhaps to fail).
1749                          */
1750                         refcount_acquire(&pr->pr_uref);
1751                 } else {
1752                         drflags |= PD_DEUREF;
1753                         prison_free_not_last(pr);
1754                 }
1755         }
1756         pr->pr_flags = (pr->pr_flags & ~ch_flags) | pr_flags;
1757         mtx_unlock(&pr->pr_mtx);
1758         drflags &= ~PD_LOCKED;
1759
1760 #ifdef RACCT
1761         if (racct_enable && created)
1762                 prison_racct_attach(pr);
1763 #endif
1764
1765         /* Locks may have prevented a complete restriction of child IP
1766          * addresses.  If so, allocate some more memory and try again.
1767          */
1768 #ifdef INET
1769         while (redo_ip4) {
1770                 ip4s = pr->pr_ip4s;
1771                 ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
1772                 mtx_lock(&pr->pr_mtx);
1773                 redo_ip4 = 0;
1774                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1775 #ifdef VIMAGE
1776                         if (tpr->pr_flags & PR_VNET) {
1777                                 descend = 0;
1778                                 continue;
1779                         }
1780 #endif
1781                         if (prison_restrict_ip4(tpr, ip4)) {
1782                                 if (ip4 != NULL)
1783                                         ip4 = NULL;
1784                                 else
1785                                         redo_ip4 = 1;
1786                         }
1787                 }
1788                 mtx_unlock(&pr->pr_mtx);
1789         }
1790 #endif
1791 #ifdef INET6
1792         while (redo_ip6) {
1793                 ip6s = pr->pr_ip6s;
1794                 ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
1795                 mtx_lock(&pr->pr_mtx);
1796                 redo_ip6 = 0;
1797                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1798 #ifdef VIMAGE
1799                         if (tpr->pr_flags & PR_VNET) {
1800                                 descend = 0;
1801                                 continue;
1802                         }
1803 #endif
1804                         if (prison_restrict_ip6(tpr, ip6)) {
1805                                 if (ip6 != NULL)
1806                                         ip6 = NULL;
1807                                 else
1808                                         redo_ip6 = 1;
1809                         }
1810                 }
1811                 mtx_unlock(&pr->pr_mtx);
1812         }
1813 #endif
1814
1815         /* Let the modules do their work. */
1816         if (born) {
1817                 error = osd_jail_call(pr, PR_METHOD_CREATE, opts);
1818                 if (error) {
1819                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1820                         goto done_deref;
1821                 }
1822         }
1823         error = osd_jail_call(pr, PR_METHOD_SET, opts);
1824         if (error) {
1825                 if (born)
1826                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1827                 goto done_deref;
1828         }
1829
1830         /*
1831          * A new prison is now ready to be seen; either it has gained a user
1832          * reference via persistence, or is about to gain one via attachment.
1833          */
1834         if (born) {
1835                 drflags = prison_lock_xlock(pr, drflags);
1836                 pr->pr_state = PRISON_STATE_ALIVE;
1837         }
1838
1839         /* Attach this process to the prison if requested. */
1840         if (flags & JAIL_ATTACH) {
1841                 error = do_jail_attach(td, pr, prison_lock_xlock(pr, drflags));
1842                 drflags &= ~(PD_LOCKED | PD_LIST_XLOCKED);
1843                 if (error) {
1844                         vfs_opterror(opts, "attach failed");
1845                         goto done_deref;
1846                 }
1847         }
1848
1849 #ifdef RACCT
1850         if (racct_enable && !created) {
1851                 if (drflags & PD_LOCKED) {
1852                         mtx_unlock(&pr->pr_mtx);
1853                         drflags &= ~PD_LOCKED;
1854                 }
1855                 if (drflags & PD_LIST_XLOCKED) {
1856                         sx_xunlock(&allprison_lock);
1857                         drflags &= ~PD_LIST_XLOCKED;
1858                 }
1859                 prison_racct_modify(pr);
1860         }
1861 #endif
1862
1863         td->td_retval[0] = pr->pr_id;
1864
1865  done_deref:
1866         /* Release any temporary prison holds and/or locks. */
1867         if (pr != NULL)
1868                 prison_deref(pr, drflags);
1869         else if (drflags & PD_LIST_SLOCKED)
1870                 sx_sunlock(&allprison_lock);
1871         else if (drflags & PD_LIST_XLOCKED)
1872                 sx_xunlock(&allprison_lock);
1873         if (root != NULL)
1874                 vrele(root);
1875  done_errmsg:
1876         if (error) {
1877                 /* Write the error message back to userspace. */
1878                 if (vfs_getopt(opts, "errmsg", (void **)&errmsg,
1879                     &errmsg_len) == 0 && errmsg_len > 0) {
1880                         errmsg_pos = 2 * vfs_getopt_pos(opts, "errmsg") + 1;
1881                         if (optuio->uio_segflg == UIO_SYSSPACE)
1882                                 bcopy(errmsg,
1883                                     optuio->uio_iov[errmsg_pos].iov_base,
1884                                     errmsg_len);
1885                         else
1886                                 copyout(errmsg,
1887                                     optuio->uio_iov[errmsg_pos].iov_base,
1888                                     errmsg_len);
1889                 }
1890         }
1891  done_free:
1892 #ifdef INET
1893         free(ip4, M_PRISON);
1894 #endif
1895 #ifdef INET6
1896         free(ip6, M_PRISON);
1897 #endif
1898         if (g_path != NULL)
1899                 free(g_path, M_TEMP);
1900         vfs_freeopts(opts);
1901         return (error);
1902 }
1903
1904 /*
1905  * Find the next available prison ID.  Return the ID on success, or zero
1906  * on failure.  Also set a pointer to the allprison list entry the prison
1907  * should be inserted before.
1908  */
1909 static int
1910 get_next_prid(struct prison **insprp)
1911 {
1912         struct prison *inspr;
1913         int jid, maxid;
1914
1915         jid = lastprid % JAIL_MAX + 1;
1916         if (TAILQ_EMPTY(&allprison) ||
1917             TAILQ_LAST(&allprison, prisonlist)->pr_id < jid) {
1918                 /*
1919                  * A common case is for all jails to be implicitly numbered,
1920                  * which means they'll go on the end of the list, at least
1921                  * for the first JAIL_MAX times.
1922                  */
1923                 inspr = NULL;
1924         } else {
1925                 /*
1926                  * Take two passes through the allprison list: first starting
1927                  * with the proposed jid, then ending with it.
1928                  */
1929                 for (maxid = JAIL_MAX; maxid != 0; ) {
1930                         TAILQ_FOREACH(inspr, &allprison, pr_list) {
1931                                 if (inspr->pr_id < jid)
1932                                         continue;
1933                                 if (inspr->pr_id > jid) {
1934                                         /* Found an opening. */
1935                                         maxid = 0;
1936                                         break;
1937                                 }
1938                                 if (++jid > maxid) {
1939                                         if (lastprid == maxid || lastprid == 0)
1940                                         {
1941                                                 /*
1942                                                  * The entire legal range
1943                                                  * has been traversed
1944                                                  */
1945                                                 return 0;
1946                                         }
1947                                         /* Try again from the start. */
1948                                         jid = 1;
1949                                         maxid = lastprid;
1950                                         break;
1951                                 }
1952                         }
1953                         if (inspr == NULL) {
1954                                 /* Found room at the end of the list. */
1955                                 break;
1956                         }
1957                 }
1958         }
1959         *insprp = inspr;
1960         lastprid = jid;
1961         return (jid);
1962 }
1963
1964 /*
1965  * struct jail_get_args {
1966  *      struct iovec *iovp;
1967  *      unsigned int iovcnt;
1968  *      int flags;
1969  * };
1970  */
1971 int
1972 sys_jail_get(struct thread *td, struct jail_get_args *uap)
1973 {
1974         struct uio *auio;
1975         int error;
1976
1977         /* Check that we have an even number of iovecs. */
1978         if (uap->iovcnt & 1)
1979                 return (EINVAL);
1980
1981         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
1982         if (error)
1983                 return (error);
1984         error = kern_jail_get(td, auio, uap->flags);
1985         if (error == 0)
1986                 error = copyout(auio->uio_iov, uap->iovp,
1987                     uap->iovcnt * sizeof (struct iovec));
1988         free(auio, M_IOV);
1989         return (error);
1990 }
1991
1992 int
1993 kern_jail_get(struct thread *td, struct uio *optuio, int flags)
1994 {
1995         struct bool_flags *bf;
1996         struct jailsys_flags *jsf;
1997         struct prison *pr, *mypr;
1998         struct vfsopt *opt;
1999         struct vfsoptlist *opts;
2000         char *errmsg, *name;
2001         int drflags, error, errmsg_len, errmsg_pos, i, jid, len, pos;
2002         unsigned f;
2003
2004         if (flags & ~JAIL_GET_MASK)
2005                 return (EINVAL);
2006
2007         /* Get the parameter list. */
2008         error = vfs_buildopts(optuio, &opts);
2009         if (error)
2010                 return (error);
2011         errmsg_pos = vfs_getopt_pos(opts, "errmsg");
2012         mypr = td->td_ucred->cr_prison;
2013         pr = NULL;
2014
2015         /*
2016          * Find the prison specified by one of: lastjid, jid, name.
2017          */
2018         sx_slock(&allprison_lock);
2019         drflags = PD_LIST_SLOCKED;
2020         error = vfs_copyopt(opts, "lastjid", &jid, sizeof(jid));
2021         if (error == 0) {
2022                 TAILQ_FOREACH(pr, &allprison, pr_list) {
2023                         if (pr->pr_id > jid &&
2024                             ((flags & JAIL_DYING) || prison_isalive(pr)) &&
2025                             prison_ischild(mypr, pr)) {
2026                                 mtx_lock(&pr->pr_mtx);
2027                                 drflags |= PD_LOCKED;
2028                                 goto found_prison;
2029                         }
2030                 }
2031                 error = ENOENT;
2032                 vfs_opterror(opts, "no jail after %d", jid);
2033                 goto done;
2034         } else if (error != ENOENT)
2035                 goto done;
2036
2037         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
2038         if (error == 0) {
2039                 if (jid != 0) {
2040                         pr = prison_find_child(mypr, jid);
2041                         if (pr != NULL) {
2042                                 drflags |= PD_LOCKED;
2043                                 if (!(prison_isalive(pr) ||
2044                                     (flags & JAIL_DYING))) {
2045                                         error = ENOENT;
2046                                         vfs_opterror(opts, "jail %d is dying",
2047                                             jid);
2048                                         goto done;
2049                                 }
2050                                 goto found_prison;
2051                         }
2052                         error = ENOENT;
2053                         vfs_opterror(opts, "jail %d not found", jid);
2054                         goto done;
2055                 }
2056         } else if (error != ENOENT)
2057                 goto done;
2058
2059         error = vfs_getopt(opts, "name", (void **)&name, &len);
2060         if (error == 0) {
2061                 if (len == 0 || name[len - 1] != '\0') {
2062                         error = EINVAL;
2063                         goto done;
2064                 }
2065                 pr = prison_find_name(mypr, name);
2066                 if (pr != NULL) {
2067                         drflags |= PD_LOCKED;
2068                         if (!(prison_isalive(pr) || (flags & JAIL_DYING))) {
2069                                 error = ENOENT;
2070                                 vfs_opterror(opts, "jail \"%s\" is dying",
2071                                     name);
2072                                 goto done;
2073                         }
2074                         goto found_prison;
2075                 }
2076                 error = ENOENT;
2077                 vfs_opterror(opts, "jail \"%s\" not found", name);
2078                 goto done;
2079         } else if (error != ENOENT)
2080                 goto done;
2081
2082         vfs_opterror(opts, "no jail specified");
2083         error = ENOENT;
2084         goto done;
2085
2086  found_prison:
2087         /* Get the parameters of the prison. */
2088         prison_hold(pr);
2089         drflags |= PD_DEREF;
2090         td->td_retval[0] = pr->pr_id;
2091         error = vfs_setopt(opts, "jid", &pr->pr_id, sizeof(pr->pr_id));
2092         if (error != 0 && error != ENOENT)
2093                 goto done;
2094         i = (pr->pr_parent == mypr) ? 0 : pr->pr_parent->pr_id;
2095         error = vfs_setopt(opts, "parent", &i, sizeof(i));
2096         if (error != 0 && error != ENOENT)
2097                 goto done;
2098         error = vfs_setopts(opts, "name", prison_name(mypr, pr));
2099         if (error != 0 && error != ENOENT)
2100                 goto done;
2101         error = vfs_setopt(opts, "cpuset.id", &pr->pr_cpuset->cs_id,
2102             sizeof(pr->pr_cpuset->cs_id));
2103         if (error != 0 && error != ENOENT)
2104                 goto done;
2105         error = vfs_setopts(opts, "path", prison_path(mypr, pr));
2106         if (error != 0 && error != ENOENT)
2107                 goto done;
2108 #ifdef INET
2109         error = vfs_setopt_part(opts, "ip4.addr", pr->pr_ip4,
2110             pr->pr_ip4s * sizeof(*pr->pr_ip4));
2111         if (error != 0 && error != ENOENT)
2112                 goto done;
2113 #endif
2114 #ifdef INET6
2115         error = vfs_setopt_part(opts, "ip6.addr", pr->pr_ip6,
2116             pr->pr_ip6s * sizeof(*pr->pr_ip6));
2117         if (error != 0 && error != ENOENT)
2118                 goto done;
2119 #endif
2120         error = vfs_setopt(opts, "securelevel", &pr->pr_securelevel,
2121             sizeof(pr->pr_securelevel));
2122         if (error != 0 && error != ENOENT)
2123                 goto done;
2124         error = vfs_setopt(opts, "children.cur", &pr->pr_childcount,
2125             sizeof(pr->pr_childcount));
2126         if (error != 0 && error != ENOENT)
2127                 goto done;
2128         error = vfs_setopt(opts, "children.max", &pr->pr_childmax,
2129             sizeof(pr->pr_childmax));
2130         if (error != 0 && error != ENOENT)
2131                 goto done;
2132         error = vfs_setopts(opts, "host.hostname", pr->pr_hostname);
2133         if (error != 0 && error != ENOENT)
2134                 goto done;
2135         error = vfs_setopts(opts, "host.domainname", pr->pr_domainname);
2136         if (error != 0 && error != ENOENT)
2137                 goto done;
2138         error = vfs_setopts(opts, "host.hostuuid", pr->pr_hostuuid);
2139         if (error != 0 && error != ENOENT)
2140                 goto done;
2141 #ifdef COMPAT_FREEBSD32
2142         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
2143                 uint32_t hid32 = pr->pr_hostid;
2144
2145                 error = vfs_setopt(opts, "host.hostid", &hid32, sizeof(hid32));
2146         } else
2147 #endif
2148         error = vfs_setopt(opts, "host.hostid", &pr->pr_hostid,
2149             sizeof(pr->pr_hostid));
2150         if (error != 0 && error != ENOENT)
2151                 goto done;
2152         error = vfs_setopt(opts, "enforce_statfs", &pr->pr_enforce_statfs,
2153             sizeof(pr->pr_enforce_statfs));
2154         if (error != 0 && error != ENOENT)
2155                 goto done;
2156         error = vfs_setopt(opts, "devfs_ruleset", &pr->pr_devfs_rsnum,
2157             sizeof(pr->pr_devfs_rsnum));
2158         if (error != 0 && error != ENOENT)
2159                 goto done;
2160         for (bf = pr_flag_bool;
2161              bf < pr_flag_bool + nitems(pr_flag_bool);
2162              bf++) {
2163                 i = (pr->pr_flags & bf->flag) ? 1 : 0;
2164                 error = vfs_setopt(opts, bf->name, &i, sizeof(i));
2165                 if (error != 0 && error != ENOENT)
2166                         goto done;
2167                 i = !i;
2168                 error = vfs_setopt(opts, bf->noname, &i, sizeof(i));
2169                 if (error != 0 && error != ENOENT)
2170                         goto done;
2171         }
2172         for (jsf = pr_flag_jailsys;
2173              jsf < pr_flag_jailsys + nitems(pr_flag_jailsys);
2174              jsf++) {
2175                 f = pr->pr_flags & (jsf->disable | jsf->new);
2176                 i = (f != 0 && f == jsf->disable) ? JAIL_SYS_DISABLE
2177                     : (f == jsf->new) ? JAIL_SYS_NEW
2178                     : JAIL_SYS_INHERIT;
2179                 error = vfs_setopt(opts, jsf->name, &i, sizeof(i));
2180                 if (error != 0 && error != ENOENT)
2181                         goto done;
2182         }
2183         for (bf = pr_flag_allow;
2184              bf < pr_flag_allow + nitems(pr_flag_allow) &&
2185                 atomic_load_int(&bf->flag) != 0;
2186              bf++) {
2187                 i = (pr->pr_allow & bf->flag) ? 1 : 0;
2188                 error = vfs_setopt(opts, bf->name, &i, sizeof(i));
2189                 if (error != 0 && error != ENOENT)
2190                         goto done;
2191                 i = !i;
2192                 error = vfs_setopt(opts, bf->noname, &i, sizeof(i));
2193                 if (error != 0 && error != ENOENT)
2194                         goto done;
2195         }
2196         i = !prison_isalive(pr);
2197         error = vfs_setopt(opts, "dying", &i, sizeof(i));
2198         if (error != 0 && error != ENOENT)
2199                 goto done;
2200         i = !i;
2201         error = vfs_setopt(opts, "nodying", &i, sizeof(i));
2202         if (error != 0 && error != ENOENT)
2203                 goto done;
2204         error = vfs_setopt(opts, "osreldate", &pr->pr_osreldate,
2205             sizeof(pr->pr_osreldate));
2206         if (error != 0 && error != ENOENT)
2207                 goto done;
2208         error = vfs_setopts(opts, "osrelease", pr->pr_osrelease);
2209         if (error != 0 && error != ENOENT)
2210                 goto done;
2211
2212         /* Get the module parameters. */
2213         mtx_unlock(&pr->pr_mtx);
2214         drflags &= ~PD_LOCKED;
2215         error = osd_jail_call(pr, PR_METHOD_GET, opts);
2216         if (error)
2217                 goto done;
2218         prison_deref(pr, drflags);
2219         pr = NULL;
2220         drflags = 0;
2221
2222         /* By now, all parameters should have been noted. */
2223         TAILQ_FOREACH(opt, opts, link) {
2224                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
2225                         error = EINVAL;
2226                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
2227                         goto done;
2228                 }
2229         }
2230
2231         /* Write the fetched parameters back to userspace. */
2232         error = 0;
2233         TAILQ_FOREACH(opt, opts, link) {
2234                 if (opt->pos >= 0 && opt->pos != errmsg_pos) {
2235                         pos = 2 * opt->pos + 1;
2236                         optuio->uio_iov[pos].iov_len = opt->len;
2237                         if (opt->value != NULL) {
2238                                 if (optuio->uio_segflg == UIO_SYSSPACE) {
2239                                         bcopy(opt->value,
2240                                             optuio->uio_iov[pos].iov_base,
2241                                             opt->len);
2242                                 } else {
2243                                         error = copyout(opt->value,
2244                                             optuio->uio_iov[pos].iov_base,
2245                                             opt->len);
2246                                         if (error)
2247                                                 break;
2248                                 }
2249                         }
2250                 }
2251         }
2252
2253  done:
2254         /* Release any temporary prison holds and/or locks. */
2255         if (pr != NULL)
2256                 prison_deref(pr, drflags);
2257         else if (drflags & PD_LIST_SLOCKED)
2258                 sx_sunlock(&allprison_lock);
2259         if (error && errmsg_pos >= 0) {
2260                 /* Write the error message back to userspace. */
2261                 vfs_getopt(opts, "errmsg", (void **)&errmsg, &errmsg_len);
2262                 errmsg_pos = 2 * errmsg_pos + 1;
2263                 if (errmsg_len > 0) {
2264                         if (optuio->uio_segflg == UIO_SYSSPACE)
2265                                 bcopy(errmsg,
2266                                     optuio->uio_iov[errmsg_pos].iov_base,
2267                                     errmsg_len);
2268                         else
2269                                 copyout(errmsg,
2270                                     optuio->uio_iov[errmsg_pos].iov_base,
2271                                     errmsg_len);
2272                 }
2273         }
2274         vfs_freeopts(opts);
2275         return (error);
2276 }
2277
2278 /*
2279  * struct jail_remove_args {
2280  *      int jid;
2281  * };
2282  */
2283 int
2284 sys_jail_remove(struct thread *td, struct jail_remove_args *uap)
2285 {
2286         struct prison *pr, *cpr, *lpr;
2287         int descend, error;
2288
2289         error = priv_check(td, PRIV_JAIL_REMOVE);
2290         if (error)
2291                 return (error);
2292
2293         sx_xlock(&allprison_lock);
2294         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2295         if (pr == NULL) {
2296                 sx_xunlock(&allprison_lock);
2297                 return (EINVAL);
2298         }
2299
2300         /* Remove all descendants of this prison, then remove this prison. */
2301         prison_hold(pr);
2302         if (!LIST_EMPTY(&pr->pr_children)) {
2303                 mtx_unlock(&pr->pr_mtx);
2304                 lpr = NULL;
2305                 FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
2306                         prison_hold(cpr);
2307                         if (lpr != NULL) {
2308                                 mtx_lock(&lpr->pr_mtx);
2309                                 prison_remove_one(lpr);
2310                                 sx_xlock(&allprison_lock);
2311                         }
2312                         lpr = cpr;
2313                 }
2314                 if (lpr != NULL) {
2315                         mtx_lock(&lpr->pr_mtx);
2316                         prison_remove_one(lpr);
2317                         sx_xlock(&allprison_lock);
2318                 }
2319                 mtx_lock(&pr->pr_mtx);
2320         }
2321         prison_remove_one(pr);
2322         return (0);
2323 }
2324
2325 static void
2326 prison_remove_one(struct prison *pr)
2327 {
2328         struct proc *p;
2329         int was_alive, drflags;
2330
2331         drflags = PD_DEREF | PD_LOCKED | PD_LIST_XLOCKED;
2332
2333         /*
2334          * Mark the prison as doomed, so it doesn't accidentally come back
2335          * to life.  It may still be explicitly brought back by jail_set(2).
2336          */
2337         was_alive = pr->pr_state == PRISON_STATE_ALIVE;
2338         pr->pr_state = PRISON_STATE_DYING;
2339
2340         /* If the prison was persistent, it is not anymore. */
2341         if (pr->pr_flags & PR_PERSIST) {
2342                 drflags |= PD_DEUREF;
2343                 prison_free_not_last(pr);
2344                 pr->pr_flags &= ~PR_PERSIST;
2345         }
2346
2347         /*
2348          * jail_remove added a reference.  If that's the only one, remove
2349          * the prison now.  refcount(9) doesn't guarantee the cache coherence
2350          * of non-zero counters, so force it here.
2351          */
2352         KASSERT(refcount_load(&pr->pr_ref) > 0,
2353             ("prison_remove_one removing a dead prison (jid=%d)", pr->pr_id));
2354         if (atomic_load_acq_int(&pr->pr_ref) == 1) {
2355                 prison_deref(pr, drflags);
2356                 return;
2357         }
2358
2359         /* Tell modules this prison has died. */
2360         mtx_unlock(&pr->pr_mtx);
2361         drflags &= ~PD_LOCKED;
2362         if (was_alive)
2363                 (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
2364
2365         sx_xunlock(&allprison_lock);
2366         drflags &= ~PD_LIST_XLOCKED;
2367         /*
2368          * Kill all processes unfortunate enough to be attached to this prison.
2369          */
2370         sx_slock(&allproc_lock);
2371         FOREACH_PROC_IN_SYSTEM(p) {
2372                 PROC_LOCK(p);
2373                 if (p->p_state != PRS_NEW && p->p_ucred &&
2374                     p->p_ucred->cr_prison == pr)
2375                         kern_psignal(p, SIGKILL);
2376                 PROC_UNLOCK(p);
2377         }
2378         sx_sunlock(&allproc_lock);
2379         /* Remove the temporary reference added by jail_remove. */
2380         prison_deref(pr, drflags);
2381 }
2382
2383 /*
2384  * struct jail_attach_args {
2385  *      int jid;
2386  * };
2387  */
2388 int
2389 sys_jail_attach(struct thread *td, struct jail_attach_args *uap)
2390 {
2391         struct prison *pr;
2392         int error;
2393
2394         error = priv_check(td, PRIV_JAIL_ATTACH);
2395         if (error)
2396                 return (error);
2397
2398         sx_slock(&allprison_lock);
2399         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2400         if (pr == NULL) {
2401                 sx_sunlock(&allprison_lock);
2402                 return (EINVAL);
2403         }
2404
2405         /* Do not allow a process to attach to a prison that is not alive. */
2406         if (!prison_isalive(pr)) {
2407                 mtx_unlock(&pr->pr_mtx);
2408                 sx_sunlock(&allprison_lock);
2409                 return (EINVAL);
2410         }
2411
2412         return (do_jail_attach(td, pr, PD_LOCKED | PD_LIST_SLOCKED));
2413 }
2414
2415 static int
2416 do_jail_attach(struct thread *td, struct prison *pr, int drflags)
2417 {
2418         struct proc *p;
2419         struct ucred *newcred, *oldcred;
2420         int error;
2421
2422         mtx_assert(&pr->pr_mtx, MA_OWNED);
2423         sx_assert(&allprison_lock, SX_LOCKED);
2424         /*
2425          * XXX: Note that there is a slight race here if two threads
2426          * in the same privileged process attempt to attach to two
2427          * different jails at the same time.  It is important for
2428          * user processes not to do this, or they might end up with
2429          * a process root from one prison, but attached to the jail
2430          * of another.
2431          */
2432         prison_hold(pr);
2433         refcount_acquire(&pr->pr_uref);
2434         drflags |= PD_DEREF | PD_DEUREF;
2435         mtx_unlock(&pr->pr_mtx);
2436         drflags &= ~PD_LOCKED;
2437
2438         /* Let modules do whatever they need to prepare for attaching. */
2439         error = osd_jail_call(pr, PR_METHOD_ATTACH, td);
2440         if (error) {
2441                 prison_deref(pr, drflags);
2442                 return (error);
2443         }
2444         sx_unlock(&allprison_lock);
2445         drflags &= ~(PD_LIST_SLOCKED | PD_LIST_XLOCKED);
2446
2447         /*
2448          * Reparent the newly attached process to this jail.
2449          */
2450         p = td->td_proc;
2451         error = cpuset_setproc_update_set(p, pr->pr_cpuset);
2452         if (error)
2453                 goto e_revert_osd;
2454
2455         vn_lock(pr->pr_root, LK_EXCLUSIVE | LK_RETRY);
2456         if ((error = change_dir(pr->pr_root, td)) != 0)
2457                 goto e_unlock;
2458 #ifdef MAC
2459         if ((error = mac_vnode_check_chroot(td->td_ucred, pr->pr_root)))
2460                 goto e_unlock;
2461 #endif
2462         VOP_UNLOCK(pr->pr_root);
2463         if ((error = pwd_chroot_chdir(td, pr->pr_root)))
2464                 goto e_revert_osd;
2465
2466         newcred = crget();
2467         PROC_LOCK(p);
2468         oldcred = crcopysafe(p, newcred);
2469         newcred->cr_prison = pr;
2470         proc_set_cred(p, newcred);
2471         setsugid(p);
2472 #ifdef RACCT
2473         racct_proc_ucred_changed(p, oldcred, newcred);
2474         crhold(newcred);
2475 #endif
2476         PROC_UNLOCK(p);
2477 #ifdef RCTL
2478         rctl_proc_ucred_changed(p, newcred);
2479         crfree(newcred);
2480 #endif
2481         prison_deref(oldcred->cr_prison, drflags);
2482         crfree(oldcred);
2483
2484         /*
2485          * If the prison was killed while changing credentials, die along
2486          * with it.
2487          */
2488         if (!prison_isalive(pr)) {
2489                 PROC_LOCK(p);
2490                 kern_psignal(p, SIGKILL);
2491                 PROC_UNLOCK(p);
2492         }
2493
2494         return (0);
2495
2496  e_unlock:
2497         VOP_UNLOCK(pr->pr_root);
2498  e_revert_osd:
2499         /* Tell modules this thread is still in its old jail after all. */
2500         sx_slock(&allprison_lock);
2501         drflags |= PD_LIST_SLOCKED;
2502         (void)osd_jail_call(td->td_ucred->cr_prison, PR_METHOD_ATTACH, td);
2503         prison_deref(pr, drflags);
2504         return (error);
2505 }
2506
2507 /*
2508  * Returns a locked prison instance, or NULL on failure.
2509  */
2510 struct prison *
2511 prison_find(int prid)
2512 {
2513         struct prison *pr;
2514
2515         sx_assert(&allprison_lock, SX_LOCKED);
2516         TAILQ_FOREACH(pr, &allprison, pr_list) {
2517                 if (pr->pr_id < prid)
2518                         continue;
2519                 if (pr->pr_id > prid)
2520                         break;
2521                 KASSERT(prison_isvalid(pr), ("Found invalid prison %p", pr));
2522                 mtx_lock(&pr->pr_mtx);
2523                 return (pr);
2524         }
2525         return (NULL);
2526 }
2527
2528 /*
2529  * Find a prison that is a descendant of mypr.  Returns a locked prison or NULL.
2530  */
2531 struct prison *
2532 prison_find_child(struct prison *mypr, int prid)
2533 {
2534         struct prison *pr;
2535         int descend;
2536
2537         sx_assert(&allprison_lock, SX_LOCKED);
2538         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2539                 if (pr->pr_id == prid) {
2540                         KASSERT(prison_isvalid(pr),
2541                             ("Found invalid prison %p", pr));
2542                         mtx_lock(&pr->pr_mtx);
2543                         return (pr);
2544                 }
2545         }
2546         return (NULL);
2547 }
2548
2549 /*
2550  * Look for the name relative to mypr.  Returns a locked prison or NULL.
2551  */
2552 struct prison *
2553 prison_find_name(struct prison *mypr, const char *name)
2554 {
2555         struct prison *pr, *deadpr;
2556         size_t mylen;
2557         int descend;
2558
2559         sx_assert(&allprison_lock, SX_LOCKED);
2560         mylen = (mypr == &prison0) ? 0 : strlen(mypr->pr_name) + 1;
2561         deadpr = NULL;
2562         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2563                 if (!strcmp(pr->pr_name + mylen, name)) {
2564                         KASSERT(prison_isvalid(pr),
2565                             ("Found invalid prison %p", pr));
2566                         if (prison_isalive(pr)) {
2567                                 mtx_lock(&pr->pr_mtx);
2568                                 return (pr);
2569                         }
2570                         deadpr = pr;
2571                 }
2572         }
2573         /* There was no valid prison - perhaps there was a dying one. */
2574         if (deadpr != NULL)
2575                 mtx_lock(&deadpr->pr_mtx);
2576         return (deadpr);
2577 }
2578
2579 /*
2580  * See if a prison has the specific flag set.  The prison should be locked,
2581  * unless checking for flags that are only set at jail creation (such as
2582  * PR_IP4 and PR_IP6), or only the single bit is examined, without regard
2583  * to any other prison data.
2584  */
2585 int
2586 prison_flag(struct ucred *cred, unsigned flag)
2587 {
2588
2589         return (cred->cr_prison->pr_flags & flag);
2590 }
2591
2592 int
2593 prison_allow(struct ucred *cred, unsigned flag)
2594 {
2595
2596         return ((cred->cr_prison->pr_allow & flag) != 0);
2597 }
2598
2599 /*
2600  * Hold a prison reference, by incrementing pr_ref.  It is generally
2601  * an error to hold a prison that does not already have a reference.
2602  * A prison record will remain valid as long as it has at least one
2603  * reference, and will not be removed as long as either the prison
2604  * mutex or the allprison lock is held (allprison_lock may be shared).
2605  */
2606 void
2607 prison_hold_locked(struct prison *pr)
2608 {
2609
2610         /* Locking is no longer required. */
2611         prison_hold(pr);
2612 }
2613
2614 void
2615 prison_hold(struct prison *pr)
2616 {
2617 #ifdef INVARIANTS
2618         int was_valid = refcount_acquire_if_not_zero(&pr->pr_ref);
2619
2620         KASSERT(was_valid,
2621             ("Trying to hold dead prison %p (jid=%d).", pr, pr->pr_id));
2622 #else
2623         refcount_acquire(&pr->pr_ref);
2624 #endif
2625 }
2626
2627 /*
2628  * Remove a prison reference.  If that was the last reference, the
2629  * prison will be removed (at a later time).
2630  */
2631 void
2632 prison_free_locked(struct prison *pr)
2633 {
2634
2635         mtx_assert(&pr->pr_mtx, MA_OWNED);
2636         /*
2637          * Locking is no longer required, but unlock because the caller
2638          * expects it.
2639          */
2640         mtx_unlock(&pr->pr_mtx);
2641         prison_free(pr);
2642 }
2643
2644 void
2645 prison_free(struct prison *pr)
2646 {
2647
2648         KASSERT(refcount_load(&pr->pr_ref) > 0,
2649             ("Trying to free dead prison %p (jid=%d).",
2650              pr, pr->pr_id));
2651         if (!refcount_release_if_not_last(&pr->pr_ref)) {
2652                 /*
2653                  * Don't remove the last reference in this context,
2654                  * in case there are locks held.
2655                  */
2656                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2657         }
2658 }
2659
2660 static void
2661 prison_free_not_last(struct prison *pr)
2662 {
2663 #ifdef INVARIANTS
2664         int lastref;
2665
2666         KASSERT(refcount_load(&pr->pr_ref) > 0,
2667             ("Trying to free dead prison %p (jid=%d).",
2668              pr, pr->pr_id));
2669         lastref = refcount_release(&pr->pr_ref);
2670         KASSERT(!lastref,
2671             ("prison_free_not_last freed last ref on prison %p (jid=%d).",
2672              pr, pr->pr_id));
2673 #else
2674         refcount_release(&pr->pr_ref);
2675 #endif
2676 }
2677
2678 /*
2679  * Hold a a prison for user visibility, by incrementing pr_uref.
2680  * It is generally an error to hold a prison that isn't already
2681  * user-visible, except through the the jail system calls.  It is also
2682  * an error to hold an invalid prison.  A prison record will remain
2683  * alive as long as it has at least one user reference, and will not
2684  * be set to the dying state until the prison mutex and allprison_lock
2685  * are both freed.
2686  */
2687 void
2688 prison_proc_hold(struct prison *pr)
2689 {
2690 #ifdef INVARIANTS
2691         int was_alive = refcount_acquire_if_not_zero(&pr->pr_uref);
2692
2693         KASSERT(was_alive,
2694             ("Cannot add a process to a non-alive prison (jid=%d)", pr->pr_id));
2695 #else
2696         refcount_acquire(&pr->pr_uref);
2697 #endif
2698 }
2699
2700 /*
2701  * Remove a prison user reference.  If it was the last reference, the
2702  * prison will be considered "dying", and may be removed once all of
2703  * its references are dropped.
2704  */
2705 void
2706 prison_proc_free(struct prison *pr)
2707 {
2708
2709         /*
2710          * Locking is only required when releasing the last reference.
2711          * This allows assurance that a locked prison will remain alive
2712          * until it is unlocked.
2713          */
2714         KASSERT(refcount_load(&pr->pr_uref) > 0,
2715             ("Trying to kill a process in a dead prison (jid=%d)", pr->pr_id));
2716         if (!refcount_release_if_not_last(&pr->pr_uref)) {
2717                 /*
2718                  * Don't remove the last user reference in this context,
2719                  * which is expected to be a process that is not only locked,
2720                  * but also half dead.  Add a reference so any calls to
2721                  * prison_free() won't re-submit the task.
2722                  */
2723                 prison_hold(pr);
2724                 mtx_lock(&pr->pr_mtx);
2725                 KASSERT(!(pr->pr_flags & PR_COMPLETE_PROC),
2726                     ("Redundant last reference in prison_proc_free (jid=%d)",
2727                      pr->pr_id));
2728                 pr->pr_flags |= PR_COMPLETE_PROC;
2729                 mtx_unlock(&pr->pr_mtx);
2730                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2731         }
2732 }
2733
2734 /*
2735  * Complete a call to either prison_free or prison_proc_free.
2736  */
2737 static void
2738 prison_complete(void *context, int pending)
2739 {
2740         struct prison *pr = context;
2741         int drflags;
2742
2743         /*
2744          * This could be called to release the last reference, or the last
2745          * user reference (plus the reference held in prison_proc_free).
2746          */
2747         drflags = prison_lock_xlock(pr, PD_DEREF);
2748         if (pr->pr_flags & PR_COMPLETE_PROC) {
2749                 pr->pr_flags &= ~PR_COMPLETE_PROC;
2750                 drflags |= PD_DEUREF;
2751         }
2752         prison_deref(pr, drflags);
2753 }
2754
2755 /*
2756  * Remove a prison reference and/or user reference (usually).
2757  * This assumes context that allows sleeping (for allprison_lock),
2758  * with no non-sleeping locks held, except perhaps the prison itself.
2759  * If there are no more references, release and delist the prison.
2760  * On completion, the prison lock and the allprison lock are both
2761  * unlocked.
2762  */
2763 static void
2764 prison_deref(struct prison *pr, int flags)
2765 {
2766         struct prisonlist freeprison;
2767         struct prison *rpr, *ppr, *tpr;
2768
2769         TAILQ_INIT(&freeprison);
2770         /*
2771          * Release this prison as requested, which may cause its parent
2772          * to be released, and then maybe its grandparent, etc.
2773          */
2774         for (;;) {
2775                 if (flags & PD_DEUREF) {
2776                         /* Drop a user reference. */
2777                         KASSERT(refcount_load(&pr->pr_uref) > 0,
2778                             ("prison_deref PD_DEUREF on a dead prison (jid=%d)",
2779                              pr->pr_id));
2780                         if (!refcount_release_if_not_last(&pr->pr_uref)) {
2781                                 if (!(flags & PD_DEREF)) {
2782                                         prison_hold(pr);
2783                                         flags |= PD_DEREF;
2784                                 }
2785                                 flags = prison_lock_xlock(pr, flags);
2786                                 if (refcount_release(&pr->pr_uref) &&
2787                                     pr->pr_state == PRISON_STATE_ALIVE) {
2788                                         /*
2789                                          * When the last user references goes,
2790                                          * this becomes a dying prison.
2791                                          */
2792                                         KASSERT(
2793                                             refcount_load(&prison0.pr_uref) > 0,
2794                                             ("prison0 pr_uref=0"));
2795                                         pr->pr_state = PRISON_STATE_DYING;
2796                                         mtx_unlock(&pr->pr_mtx);
2797                                         flags &= ~PD_LOCKED;
2798                                         (void)osd_jail_call(pr,
2799                                             PR_METHOD_REMOVE, NULL);
2800                                 }
2801                         }
2802                 }
2803                 if (flags & PD_DEREF) {
2804                         /* Drop a reference. */
2805                         KASSERT(refcount_load(&pr->pr_ref) > 0,
2806                             ("prison_deref PD_DEREF on a dead prison (jid=%d)",
2807                              pr->pr_id));
2808                         if (!refcount_release_if_not_last(&pr->pr_ref)) {
2809                                 flags = prison_lock_xlock(pr, flags);
2810                                 if (refcount_release(&pr->pr_ref)) {
2811                                         /*
2812                                          * When the last reference goes,
2813                                          * unlink the prison and set it aside.
2814                                          */
2815                                         KASSERT(
2816                                             refcount_load(&pr->pr_uref) == 0,
2817                                             ("prison_deref: last ref, "
2818                                              "but still has %d urefs (jid=%d)",
2819                                              pr->pr_uref, pr->pr_id));
2820                                         KASSERT(
2821                                             refcount_load(&prison0.pr_ref) != 0,
2822                                             ("prison0 pr_ref=0"));
2823                                         pr->pr_state = PRISON_STATE_INVALID;
2824                                         TAILQ_REMOVE(&allprison, pr, pr_list);
2825                                         LIST_REMOVE(pr, pr_sibling);
2826                                         TAILQ_INSERT_TAIL(&freeprison, pr,
2827                                             pr_list);
2828                                         for (ppr = pr->pr_parent;
2829                                              ppr != NULL;
2830                                              ppr = ppr->pr_parent)
2831                                                 ppr->pr_childcount--;
2832                                         /*
2833                                          * Removing a prison frees references
2834                                          * from its parent.
2835                                          */
2836                                         mtx_unlock(&pr->pr_mtx);
2837                                         flags &= ~PD_LOCKED;
2838                                         pr = pr->pr_parent;
2839                                         flags |= PD_DEREF | PD_DEUREF;
2840                                         continue;
2841                                 }
2842                         }
2843                 }
2844                 break;
2845         }
2846
2847         /* Release all the prison locks. */
2848         if (flags & PD_LOCKED)
2849                 mtx_unlock(&pr->pr_mtx);
2850         if (flags & PD_LIST_SLOCKED)
2851                 sx_sunlock(&allprison_lock);
2852         else if (flags & PD_LIST_XLOCKED)
2853                 sx_xunlock(&allprison_lock);
2854
2855         /*
2856          * Finish removing any unreferenced prisons, which couldn't happen
2857          * while allprison_lock was held (to avoid a LOR on vrele).
2858          */
2859         TAILQ_FOREACH_SAFE(rpr, &freeprison, pr_list, tpr) {
2860 #ifdef VIMAGE
2861                 if (rpr->pr_vnet != rpr->pr_parent->pr_vnet)
2862                         vnet_destroy(rpr->pr_vnet);
2863 #endif
2864                 if (rpr->pr_root != NULL)
2865                         vrele(rpr->pr_root);
2866                 mtx_destroy(&rpr->pr_mtx);
2867 #ifdef INET
2868                 free(rpr->pr_ip4, M_PRISON);
2869 #endif
2870 #ifdef INET6
2871                 free(rpr->pr_ip6, M_PRISON);
2872 #endif
2873                 if (rpr->pr_cpuset != NULL)
2874                         cpuset_rel(rpr->pr_cpuset);
2875                 osd_jail_exit(rpr);
2876 #ifdef RACCT
2877                 if (racct_enable)
2878                         prison_racct_detach(rpr);
2879 #endif
2880                 TAILQ_REMOVE(&freeprison, rpr, pr_list);
2881                 free(rpr, M_PRISON);
2882         }
2883 }
2884
2885 /*
2886  * Given the current locking state in the flags, make sure allprison_lock
2887  * is held exclusive, and the prison is locked.  Return flags indicating
2888  * the new state.
2889  */
2890 static int
2891 prison_lock_xlock(struct prison *pr, int flags)
2892 {
2893
2894         if (!(flags & PD_LIST_XLOCKED)) {
2895                 /*
2896                  * Get allprison_lock, which may be an upgrade,
2897                  * and may require unlocking the prison.
2898                  */
2899                 if (flags & PD_LOCKED) {
2900                         mtx_unlock(&pr->pr_mtx);
2901                         flags &= ~PD_LOCKED;
2902                 }
2903                 if (flags & PD_LIST_SLOCKED) {
2904                         if (!sx_try_upgrade(&allprison_lock)) {
2905                                 sx_sunlock(&allprison_lock);
2906                                 sx_xlock(&allprison_lock);
2907                         }
2908                         flags &= ~PD_LIST_SLOCKED;
2909                 } else
2910                         sx_xlock(&allprison_lock);
2911                 flags |= PD_LIST_XLOCKED;
2912         }
2913         if (!(flags & PD_LOCKED)) {
2914                 /* Lock the prison mutex. */
2915                 mtx_lock(&pr->pr_mtx);
2916                 flags |= PD_LOCKED;
2917         }
2918         return flags;
2919 }
2920
2921 /*
2922  * Set or clear a permission bit in the pr_allow field, passing restrictions
2923  * (cleared permission) down to child jails.
2924  */
2925 void
2926 prison_set_allow(struct ucred *cred, unsigned flag, int enable)
2927 {
2928         struct prison *pr;
2929
2930         pr = cred->cr_prison;
2931         sx_slock(&allprison_lock);
2932         mtx_lock(&pr->pr_mtx);
2933         prison_set_allow_locked(pr, flag, enable);
2934         mtx_unlock(&pr->pr_mtx);
2935         sx_sunlock(&allprison_lock);
2936 }
2937
2938 static void
2939 prison_set_allow_locked(struct prison *pr, unsigned flag, int enable)
2940 {
2941         struct prison *cpr;
2942         int descend;
2943
2944         if (enable != 0)
2945                 pr->pr_allow |= flag;
2946         else {
2947                 pr->pr_allow &= ~flag;
2948                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, cpr, descend)
2949                         cpr->pr_allow &= ~flag;
2950         }
2951 }
2952
2953 /*
2954  * Check if a jail supports the given address family.
2955  *
2956  * Returns 0 if not jailed or the address family is supported, EAFNOSUPPORT
2957  * if not.
2958  */
2959 int
2960 prison_check_af(struct ucred *cred, int af)
2961 {
2962         struct prison *pr;
2963         int error;
2964
2965         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2966
2967         pr = cred->cr_prison;
2968 #ifdef VIMAGE
2969         /* Prisons with their own network stack are not limited. */
2970         if (prison_owns_vnet(cred))
2971                 return (0);
2972 #endif
2973
2974         error = 0;
2975         switch (af)
2976         {
2977 #ifdef INET
2978         case AF_INET:
2979                 if (pr->pr_flags & PR_IP4)
2980                 {
2981                         mtx_lock(&pr->pr_mtx);
2982                         if ((pr->pr_flags & PR_IP4) && pr->pr_ip4 == NULL)
2983                                 error = EAFNOSUPPORT;
2984                         mtx_unlock(&pr->pr_mtx);
2985                 }
2986                 break;
2987 #endif
2988 #ifdef INET6
2989         case AF_INET6:
2990                 if (pr->pr_flags & PR_IP6)
2991                 {
2992                         mtx_lock(&pr->pr_mtx);
2993                         if ((pr->pr_flags & PR_IP6) && pr->pr_ip6 == NULL)
2994                                 error = EAFNOSUPPORT;
2995                         mtx_unlock(&pr->pr_mtx);
2996                 }
2997                 break;
2998 #endif
2999         case AF_LOCAL:
3000         case AF_ROUTE:
3001                 break;
3002         default:
3003                 if (!(pr->pr_allow & PR_ALLOW_SOCKET_AF))
3004                         error = EAFNOSUPPORT;
3005         }
3006         return (error);
3007 }
3008
3009 /*
3010  * Check if given address belongs to the jail referenced by cred (wrapper to
3011  * prison_check_ip[46]).
3012  *
3013  * Returns 0 if jail doesn't restrict the address family or if address belongs
3014  * to jail, EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if
3015  * the jail doesn't allow the address family.  IPv4 Address passed in in NBO.
3016  */
3017 int
3018 prison_if(struct ucred *cred, const struct sockaddr *sa)
3019 {
3020 #ifdef INET
3021         const struct sockaddr_in *sai;
3022 #endif
3023 #ifdef INET6
3024         const struct sockaddr_in6 *sai6;
3025 #endif
3026         int error;
3027
3028         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3029         KASSERT(sa != NULL, ("%s: sa is NULL", __func__));
3030
3031 #ifdef VIMAGE
3032         if (prison_owns_vnet(cred))
3033                 return (0);
3034 #endif
3035
3036         error = 0;
3037         switch (sa->sa_family)
3038         {
3039 #ifdef INET
3040         case AF_INET:
3041                 sai = (const struct sockaddr_in *)sa;
3042                 error = prison_check_ip4(cred, &sai->sin_addr);
3043                 break;
3044 #endif
3045 #ifdef INET6
3046         case AF_INET6:
3047                 sai6 = (const struct sockaddr_in6 *)sa;
3048                 error = prison_check_ip6(cred, &sai6->sin6_addr);
3049                 break;
3050 #endif
3051         default:
3052                 if (!(cred->cr_prison->pr_allow & PR_ALLOW_SOCKET_AF))
3053                         error = EAFNOSUPPORT;
3054         }
3055         return (error);
3056 }
3057
3058 /*
3059  * Return 0 if jails permit p1 to frob p2, otherwise ESRCH.
3060  */
3061 int
3062 prison_check(struct ucred *cred1, struct ucred *cred2)
3063 {
3064
3065         return ((cred1->cr_prison == cred2->cr_prison ||
3066             prison_ischild(cred1->cr_prison, cred2->cr_prison)) ? 0 : ESRCH);
3067 }
3068
3069 /*
3070  * Return 1 if p2 is a child of p1, otherwise 0.
3071  */
3072 int
3073 prison_ischild(struct prison *pr1, struct prison *pr2)
3074 {
3075
3076         for (pr2 = pr2->pr_parent; pr2 != NULL; pr2 = pr2->pr_parent)
3077                 if (pr1 == pr2)
3078                         return (1);
3079         return (0);
3080 }
3081
3082 /*
3083  * Return true if the prison is currently alive.  A prison is alive if it
3084  * holds user references and it isn't being removed.
3085  */
3086 bool
3087 prison_isalive(struct prison *pr)
3088 {
3089
3090         if (__predict_false(pr->pr_state != PRISON_STATE_ALIVE))
3091                 return (false);
3092         return (true);
3093 }
3094
3095 /*
3096  * Return true if the prison is currently valid.  A prison is valid if it has
3097  * been fully created, and is not being destroyed.  Note that dying prisons
3098  * are still considered valid.  Invalid prisons won't be found under normal
3099  * circumstances, as they're only put in that state by functions that have
3100  * an exclusive hold on allprison_lock.
3101  */
3102 bool
3103 prison_isvalid(struct prison *pr)
3104 {
3105
3106         if (__predict_false(pr->pr_state == PRISON_STATE_INVALID))
3107                 return (false);
3108         if (__predict_false(refcount_load(&pr->pr_ref) == 0))
3109                 return (false);
3110         return (true);
3111 }
3112
3113 /*
3114  * Return 1 if the passed credential is in a jail and that jail does not
3115  * have its own virtual network stack, otherwise 0.
3116  */
3117 int
3118 jailed_without_vnet(struct ucred *cred)
3119 {
3120
3121         if (!jailed(cred))
3122                 return (0);
3123 #ifdef VIMAGE
3124         if (prison_owns_vnet(cred))
3125                 return (0);
3126 #endif
3127
3128         return (1);
3129 }
3130
3131 /*
3132  * Return the correct hostname (domainname, et al) for the passed credential.
3133  */
3134 void
3135 getcredhostname(struct ucred *cred, char *buf, size_t size)
3136 {
3137         struct prison *pr;
3138
3139         /*
3140          * A NULL credential can be used to shortcut to the physical
3141          * system's hostname.
3142          */
3143         pr = (cred != NULL) ? cred->cr_prison : &prison0;
3144         mtx_lock(&pr->pr_mtx);
3145         strlcpy(buf, pr->pr_hostname, size);
3146         mtx_unlock(&pr->pr_mtx);
3147 }
3148
3149 void
3150 getcreddomainname(struct ucred *cred, char *buf, size_t size)
3151 {
3152
3153         mtx_lock(&cred->cr_prison->pr_mtx);
3154         strlcpy(buf, cred->cr_prison->pr_domainname, size);
3155         mtx_unlock(&cred->cr_prison->pr_mtx);
3156 }
3157
3158 void
3159 getcredhostuuid(struct ucred *cred, char *buf, size_t size)
3160 {
3161
3162         mtx_lock(&cred->cr_prison->pr_mtx);
3163         strlcpy(buf, cred->cr_prison->pr_hostuuid, size);
3164         mtx_unlock(&cred->cr_prison->pr_mtx);
3165 }
3166
3167 void
3168 getcredhostid(struct ucred *cred, unsigned long *hostid)
3169 {
3170
3171         mtx_lock(&cred->cr_prison->pr_mtx);
3172         *hostid = cred->cr_prison->pr_hostid;
3173         mtx_unlock(&cred->cr_prison->pr_mtx);
3174 }
3175
3176 void
3177 getjailname(struct ucred *cred, char *name, size_t len)
3178 {
3179
3180         mtx_lock(&cred->cr_prison->pr_mtx);
3181         strlcpy(name, cred->cr_prison->pr_name, len);
3182         mtx_unlock(&cred->cr_prison->pr_mtx);
3183 }
3184
3185 #ifdef VIMAGE
3186 /*
3187  * Determine whether the prison represented by cred owns
3188  * its vnet rather than having it inherited.
3189  *
3190  * Returns 1 in case the prison owns the vnet, 0 otherwise.
3191  */
3192 int
3193 prison_owns_vnet(struct ucred *cred)
3194 {
3195
3196         /*
3197          * vnets cannot be added/removed after jail creation,
3198          * so no need to lock here.
3199          */
3200         return (cred->cr_prison->pr_flags & PR_VNET ? 1 : 0);
3201 }
3202 #endif
3203
3204 /*
3205  * Determine whether the subject represented by cred can "see"
3206  * status of a mount point.
3207  * Returns: 0 for permitted, ENOENT otherwise.
3208  * XXX: This function should be called cr_canseemount() and should be
3209  *      placed in kern_prot.c.
3210  */
3211 int
3212 prison_canseemount(struct ucred *cred, struct mount *mp)
3213 {
3214         struct prison *pr;
3215         struct statfs *sp;
3216         size_t len;
3217
3218         pr = cred->cr_prison;
3219         if (pr->pr_enforce_statfs == 0)
3220                 return (0);
3221         if (pr->pr_root->v_mount == mp)
3222                 return (0);
3223         if (pr->pr_enforce_statfs == 2)
3224                 return (ENOENT);
3225         /*
3226          * If jail's chroot directory is set to "/" we should be able to see
3227          * all mount-points from inside a jail.
3228          * This is ugly check, but this is the only situation when jail's
3229          * directory ends with '/'.
3230          */
3231         if (strcmp(pr->pr_path, "/") == 0)
3232                 return (0);
3233         len = strlen(pr->pr_path);
3234         sp = &mp->mnt_stat;
3235         if (strncmp(pr->pr_path, sp->f_mntonname, len) != 0)
3236                 return (ENOENT);
3237         /*
3238          * Be sure that we don't have situation where jail's root directory
3239          * is "/some/path" and mount point is "/some/pathpath".
3240          */
3241         if (sp->f_mntonname[len] != '\0' && sp->f_mntonname[len] != '/')
3242                 return (ENOENT);
3243         return (0);
3244 }
3245
3246 void
3247 prison_enforce_statfs(struct ucred *cred, struct mount *mp, struct statfs *sp)
3248 {
3249         char jpath[MAXPATHLEN];
3250         struct prison *pr;
3251         size_t len;
3252
3253         pr = cred->cr_prison;
3254         if (pr->pr_enforce_statfs == 0)
3255                 return;
3256         if (prison_canseemount(cred, mp) != 0) {
3257                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3258                 strlcpy(sp->f_mntonname, "[restricted]",
3259                     sizeof(sp->f_mntonname));
3260                 return;
3261         }
3262         if (pr->pr_root->v_mount == mp) {
3263                 /*
3264                  * Clear current buffer data, so we are sure nothing from
3265                  * the valid path left there.
3266                  */
3267                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3268                 *sp->f_mntonname = '/';
3269                 return;
3270         }
3271         /*
3272          * If jail's chroot directory is set to "/" we should be able to see
3273          * all mount-points from inside a jail.
3274          */
3275         if (strcmp(pr->pr_path, "/") == 0)
3276                 return;
3277         len = strlen(pr->pr_path);
3278         strlcpy(jpath, sp->f_mntonname + len, sizeof(jpath));
3279         /*
3280          * Clear current buffer data, so we are sure nothing from
3281          * the valid path left there.
3282          */
3283         bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3284         if (*jpath == '\0') {
3285                 /* Should never happen. */
3286                 *sp->f_mntonname = '/';
3287         } else {
3288                 strlcpy(sp->f_mntonname, jpath, sizeof(sp->f_mntonname));
3289         }
3290 }
3291
3292 /*
3293  * Check with permission for a specific privilege is granted within jail.  We
3294  * have a specific list of accepted privileges; the rest are denied.
3295  */
3296 int
3297 prison_priv_check(struct ucred *cred, int priv)
3298 {
3299         struct prison *pr;
3300         int error;
3301
3302         /*
3303          * Some policies have custom handlers. This routine should not be
3304          * called for them. See priv_check_cred().
3305          */
3306         switch (priv) {
3307         case PRIV_VFS_LOOKUP:
3308         case PRIV_VFS_GENERATION:
3309                 KASSERT(0, ("prison_priv_check instead of a custom handler "
3310                     "called for %d\n", priv));
3311         }
3312
3313         if (!jailed(cred))
3314                 return (0);
3315
3316 #ifdef VIMAGE
3317         /*
3318          * Privileges specific to prisons with a virtual network stack.
3319          * There might be a duplicate entry here in case the privilege
3320          * is only granted conditionally in the legacy jail case.
3321          */
3322         switch (priv) {
3323 #ifdef notyet
3324                 /*
3325                  * NFS-specific privileges.
3326                  */
3327         case PRIV_NFS_DAEMON:
3328         case PRIV_NFS_LOCKD:
3329 #endif
3330                 /*
3331                  * Network stack privileges.
3332                  */
3333         case PRIV_NET_BRIDGE:
3334         case PRIV_NET_GRE:
3335         case PRIV_NET_BPF:
3336         case PRIV_NET_RAW:              /* Dup, cond. in legacy jail case. */
3337         case PRIV_NET_ROUTE:
3338         case PRIV_NET_TAP:
3339         case PRIV_NET_SETIFMTU:
3340         case PRIV_NET_SETIFFLAGS:
3341         case PRIV_NET_SETIFCAP:
3342         case PRIV_NET_SETIFDESCR:
3343         case PRIV_NET_SETIFNAME :
3344         case PRIV_NET_SETIFMETRIC:
3345         case PRIV_NET_SETIFPHYS:
3346         case PRIV_NET_SETIFMAC:
3347         case PRIV_NET_SETLANPCP:
3348         case PRIV_NET_ADDMULTI:
3349         case PRIV_NET_DELMULTI:
3350         case PRIV_NET_HWIOCTL:
3351         case PRIV_NET_SETLLADDR:
3352         case PRIV_NET_ADDIFGROUP:
3353         case PRIV_NET_DELIFGROUP:
3354         case PRIV_NET_IFCREATE:
3355         case PRIV_NET_IFDESTROY:
3356         case PRIV_NET_ADDIFADDR:
3357         case PRIV_NET_DELIFADDR:
3358         case PRIV_NET_LAGG:
3359         case PRIV_NET_GIF:
3360         case PRIV_NET_SETIFVNET:
3361         case PRIV_NET_SETIFFIB:
3362
3363                 /*
3364                  * 802.11-related privileges.
3365                  */
3366         case PRIV_NET80211_VAP_GETKEY:
3367         case PRIV_NET80211_VAP_MANAGE:
3368
3369 #ifdef notyet
3370                 /*
3371                  * ATM privileges.
3372                  */
3373         case PRIV_NETATM_CFG:
3374         case PRIV_NETATM_ADD:
3375         case PRIV_NETATM_DEL:
3376         case PRIV_NETATM_SET:
3377
3378                 /*
3379                  * Bluetooth privileges.
3380                  */
3381         case PRIV_NETBLUETOOTH_RAW:
3382 #endif
3383
3384                 /*
3385                  * Netgraph and netgraph module privileges.
3386                  */
3387         case PRIV_NETGRAPH_CONTROL:
3388 #ifdef notyet
3389         case PRIV_NETGRAPH_TTY:
3390 #endif
3391
3392                 /*
3393                  * IPv4 and IPv6 privileges.
3394                  */
3395         case PRIV_NETINET_IPFW:
3396         case PRIV_NETINET_DIVERT:
3397         case PRIV_NETINET_PF:
3398         case PRIV_NETINET_DUMMYNET:
3399         case PRIV_NETINET_CARP:
3400         case PRIV_NETINET_MROUTE:
3401         case PRIV_NETINET_RAW:
3402         case PRIV_NETINET_ADDRCTRL6:
3403         case PRIV_NETINET_ND6:
3404         case PRIV_NETINET_SCOPE6:
3405         case PRIV_NETINET_ALIFETIME6:
3406         case PRIV_NETINET_IPSEC:
3407         case PRIV_NETINET_BINDANY:
3408
3409 #ifdef notyet
3410                 /*
3411                  * NCP privileges.
3412                  */
3413         case PRIV_NETNCP:
3414
3415                 /*
3416                  * SMB privileges.
3417                  */
3418         case PRIV_NETSMB:
3419 #endif
3420
3421         /*
3422          * No default: or deny here.
3423          * In case of no permit fall through to next switch().
3424          */
3425                 if (cred->cr_prison->pr_flags & PR_VNET)
3426                         return (0);
3427         }
3428 #endif /* VIMAGE */
3429
3430         switch (priv) {
3431                 /*
3432                  * Allow ktrace privileges for root in jail.
3433                  */
3434         case PRIV_KTRACE:
3435
3436 #if 0
3437                 /*
3438                  * Allow jailed processes to configure audit identity and
3439                  * submit audit records (login, etc).  In the future we may
3440                  * want to further refine the relationship between audit and
3441                  * jail.
3442                  */
3443         case PRIV_AUDIT_GETAUDIT:
3444         case PRIV_AUDIT_SETAUDIT:
3445         case PRIV_AUDIT_SUBMIT:
3446 #endif
3447
3448                 /*
3449                  * Allow jailed processes to manipulate process UNIX
3450                  * credentials in any way they see fit.
3451                  */
3452         case PRIV_CRED_SETUID:
3453         case PRIV_CRED_SETEUID:
3454         case PRIV_CRED_SETGID:
3455         case PRIV_CRED_SETEGID:
3456         case PRIV_CRED_SETGROUPS:
3457         case PRIV_CRED_SETREUID:
3458         case PRIV_CRED_SETREGID:
3459         case PRIV_CRED_SETRESUID:
3460         case PRIV_CRED_SETRESGID:
3461
3462                 /*
3463                  * Jail implements visibility constraints already, so allow
3464                  * jailed root to override uid/gid-based constraints.
3465                  */
3466         case PRIV_SEEOTHERGIDS:
3467         case PRIV_SEEOTHERUIDS:
3468
3469                 /*
3470                  * Jail implements inter-process debugging limits already, so
3471                  * allow jailed root various debugging privileges.
3472                  */
3473         case PRIV_DEBUG_DIFFCRED:
3474         case PRIV_DEBUG_SUGID:
3475         case PRIV_DEBUG_UNPRIV:
3476
3477                 /*
3478                  * Allow jail to set various resource limits and login
3479                  * properties, and for now, exceed process resource limits.
3480                  */
3481         case PRIV_PROC_LIMIT:
3482         case PRIV_PROC_SETLOGIN:
3483         case PRIV_PROC_SETRLIMIT:
3484
3485                 /*
3486                  * System V and POSIX IPC privileges are granted in jail.
3487                  */
3488         case PRIV_IPC_READ:
3489         case PRIV_IPC_WRITE:
3490         case PRIV_IPC_ADMIN:
3491         case PRIV_IPC_MSGSIZE:
3492         case PRIV_MQ_ADMIN:
3493
3494                 /*
3495                  * Jail operations within a jail work on child jails.
3496                  */
3497         case PRIV_JAIL_ATTACH:
3498         case PRIV_JAIL_SET:
3499         case PRIV_JAIL_REMOVE:
3500
3501                 /*
3502                  * Jail implements its own inter-process limits, so allow
3503                  * root processes in jail to change scheduling on other
3504                  * processes in the same jail.  Likewise for signalling.
3505                  */
3506         case PRIV_SCHED_DIFFCRED:
3507         case PRIV_SCHED_CPUSET:
3508         case PRIV_SIGNAL_DIFFCRED:
3509         case PRIV_SIGNAL_SUGID:
3510
3511                 /*
3512                  * Allow jailed processes to write to sysctls marked as jail
3513                  * writable.
3514                  */
3515         case PRIV_SYSCTL_WRITEJAIL:
3516
3517                 /*
3518                  * Allow root in jail to manage a variety of quota
3519                  * properties.  These should likely be conditional on a
3520                  * configuration option.
3521                  */
3522         case PRIV_VFS_GETQUOTA:
3523         case PRIV_VFS_SETQUOTA:
3524
3525                 /*
3526                  * Since Jail relies on chroot() to implement file system
3527                  * protections, grant many VFS privileges to root in jail.
3528                  * Be careful to exclude mount-related and NFS-related
3529                  * privileges.
3530                  */
3531         case PRIV_VFS_READ:
3532         case PRIV_VFS_WRITE:
3533         case PRIV_VFS_ADMIN:
3534         case PRIV_VFS_EXEC:
3535         case PRIV_VFS_BLOCKRESERVE:     /* XXXRW: Slightly surprising. */
3536         case PRIV_VFS_CHFLAGS_DEV:
3537         case PRIV_VFS_CHOWN:
3538         case PRIV_VFS_CHROOT:
3539         case PRIV_VFS_RETAINSUGID:
3540         case PRIV_VFS_FCHROOT:
3541         case PRIV_VFS_LINK:
3542         case PRIV_VFS_SETGID:
3543         case PRIV_VFS_STAT:
3544         case PRIV_VFS_STICKYFILE:
3545
3546                 /*
3547                  * As in the non-jail case, non-root users are expected to be
3548                  * able to read kernel/phyiscal memory (provided /dev/[k]mem
3549                  * exists in the jail and they have permission to access it).
3550                  */
3551         case PRIV_KMEM_READ:
3552                 return (0);
3553
3554                 /*
3555                  * Depending on the global setting, allow privilege of
3556                  * setting system flags.
3557                  */
3558         case PRIV_VFS_SYSFLAGS:
3559                 if (cred->cr_prison->pr_allow & PR_ALLOW_CHFLAGS)
3560                         return (0);
3561                 else
3562                         return (EPERM);
3563
3564                 /*
3565                  * Depending on the global setting, allow privilege of
3566                  * mounting/unmounting file systems.
3567                  */
3568         case PRIV_VFS_MOUNT:
3569         case PRIV_VFS_UNMOUNT:
3570         case PRIV_VFS_MOUNT_NONUSER:
3571         case PRIV_VFS_MOUNT_OWNER:
3572                 pr = cred->cr_prison;
3573                 prison_lock(pr);
3574                 if (pr->pr_allow & PR_ALLOW_MOUNT && pr->pr_enforce_statfs < 2)
3575                         error = 0;
3576                 else
3577                         error = EPERM;
3578                 prison_unlock(pr);
3579                 return (error);
3580
3581                 /*
3582                  * Jails should hold no disposition on the PRIV_VFS_READ_DIR
3583                  * policy.  priv_check_cred will not specifically allow it, and
3584                  * we may want a MAC policy to allow it.
3585                  */
3586         case PRIV_VFS_READ_DIR:
3587                 return (0);
3588
3589                 /*
3590                  * Conditionnaly allow locking (unlocking) physical pages
3591                  * in memory.
3592                  */
3593         case PRIV_VM_MLOCK:
3594         case PRIV_VM_MUNLOCK:
3595                 if (cred->cr_prison->pr_allow & PR_ALLOW_MLOCK)
3596                         return (0);
3597                 else
3598                         return (EPERM);
3599
3600                 /*
3601                  * Conditionally allow jailed root to bind reserved ports.
3602                  */
3603         case PRIV_NETINET_RESERVEDPORT:
3604                 if (cred->cr_prison->pr_allow & PR_ALLOW_RESERVED_PORTS)
3605                         return (0);
3606                 else
3607                         return (EPERM);
3608
3609                 /*
3610                  * Allow jailed root to reuse in-use ports.
3611                  */
3612         case PRIV_NETINET_REUSEPORT:
3613                 return (0);
3614
3615                 /*
3616                  * Allow jailed root to set certain IPv4/6 (option) headers.
3617                  */
3618         case PRIV_NETINET_SETHDROPTS:
3619                 return (0);
3620
3621                 /*
3622                  * Conditionally allow creating raw sockets in jail.
3623                  */
3624         case PRIV_NETINET_RAW:
3625                 if (cred->cr_prison->pr_allow & PR_ALLOW_RAW_SOCKETS)
3626                         return (0);
3627                 else
3628                         return (EPERM);
3629
3630                 /*
3631                  * Since jail implements its own visibility limits on netstat
3632                  * sysctls, allow getcred.  This allows identd to work in
3633                  * jail.
3634                  */
3635         case PRIV_NETINET_GETCRED:
3636                 return (0);
3637
3638                 /*
3639                  * Allow jailed root to set loginclass.
3640                  */
3641         case PRIV_PROC_SETLOGINCLASS:
3642                 return (0);
3643
3644                 /*
3645                  * Do not allow a process inside a jail to read the kernel
3646                  * message buffer unless explicitly permitted.
3647                  */
3648         case PRIV_MSGBUF:
3649                 if (cred->cr_prison->pr_allow & PR_ALLOW_READ_MSGBUF)
3650                         return (0);
3651                 return (EPERM);
3652
3653         default:
3654                 /*
3655                  * In all remaining cases, deny the privilege request.  This
3656                  * includes almost all network privileges, many system
3657                  * configuration privileges.
3658                  */
3659                 return (EPERM);
3660         }
3661 }
3662
3663 /*
3664  * Return the part of pr2's name that is relative to pr1, or the whole name
3665  * if it does not directly follow.
3666  */
3667
3668 char *
3669 prison_name(struct prison *pr1, struct prison *pr2)
3670 {
3671         char *name;
3672
3673         /* Jails see themselves as "0" (if they see themselves at all). */
3674         if (pr1 == pr2)
3675                 return "0";
3676         name = pr2->pr_name;
3677         if (prison_ischild(pr1, pr2)) {
3678                 /*
3679                  * pr1 isn't locked (and allprison_lock may not be either)
3680                  * so its length can't be counted on.  But the number of dots
3681                  * can be counted on - and counted.
3682                  */
3683                 for (; pr1 != &prison0; pr1 = pr1->pr_parent)
3684                         name = strchr(name, '.') + 1;
3685         }
3686         return (name);
3687 }
3688
3689 /*
3690  * Return the part of pr2's path that is relative to pr1, or the whole path
3691  * if it does not directly follow.
3692  */
3693 static char *
3694 prison_path(struct prison *pr1, struct prison *pr2)
3695 {
3696         char *path1, *path2;
3697         int len1;
3698
3699         path1 = pr1->pr_path;
3700         path2 = pr2->pr_path;
3701         if (!strcmp(path1, "/"))
3702                 return (path2);
3703         len1 = strlen(path1);
3704         if (strncmp(path1, path2, len1))
3705                 return (path2);
3706         if (path2[len1] == '\0')
3707                 return "/";
3708         if (path2[len1] == '/')
3709                 return (path2 + len1);
3710         return (path2);
3711 }
3712
3713 /*
3714  * Jail-related sysctls.
3715  */
3716 static SYSCTL_NODE(_security, OID_AUTO, jail, CTLFLAG_RW | CTLFLAG_MPSAFE, 0,
3717     "Jails");
3718
3719 static int
3720 sysctl_jail_list(SYSCTL_HANDLER_ARGS)
3721 {
3722         struct xprison *xp;
3723         struct prison *pr, *cpr;
3724 #ifdef INET
3725         struct in_addr *ip4 = NULL;
3726         int ip4s = 0;
3727 #endif
3728 #ifdef INET6
3729         struct in6_addr *ip6 = NULL;
3730         int ip6s = 0;
3731 #endif
3732         int descend, error;
3733
3734         xp = malloc(sizeof(*xp), M_TEMP, M_WAITOK);
3735         pr = req->td->td_ucred->cr_prison;
3736         error = 0;
3737         sx_slock(&allprison_lock);
3738         FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
3739 #if defined(INET) || defined(INET6)
3740  again:
3741 #endif
3742                 mtx_lock(&cpr->pr_mtx);
3743 #ifdef INET
3744                 if (cpr->pr_ip4s > 0) {
3745                         if (ip4s < cpr->pr_ip4s) {
3746                                 ip4s = cpr->pr_ip4s;
3747                                 mtx_unlock(&cpr->pr_mtx);
3748                                 ip4 = realloc(ip4, ip4s *
3749                                     sizeof(struct in_addr), M_TEMP, M_WAITOK);
3750                                 goto again;
3751                         }
3752                         bcopy(cpr->pr_ip4, ip4,
3753                             cpr->pr_ip4s * sizeof(struct in_addr));
3754                 }
3755 #endif
3756 #ifdef INET6
3757                 if (cpr->pr_ip6s > 0) {
3758                         if (ip6s < cpr->pr_ip6s) {
3759                                 ip6s = cpr->pr_ip6s;
3760                                 mtx_unlock(&cpr->pr_mtx);
3761                                 ip6 = realloc(ip6, ip6s *
3762                                     sizeof(struct in6_addr), M_TEMP, M_WAITOK);
3763                                 goto again;
3764                         }
3765                         bcopy(cpr->pr_ip6, ip6,
3766                             cpr->pr_ip6s * sizeof(struct in6_addr));
3767                 }
3768 #endif
3769                 bzero(xp, sizeof(*xp));
3770                 xp->pr_version = XPRISON_VERSION;
3771                 xp->pr_id = cpr->pr_id;
3772                 xp->pr_state = cpr->pr_state;
3773                 strlcpy(xp->pr_path, prison_path(pr, cpr), sizeof(xp->pr_path));
3774                 strlcpy(xp->pr_host, cpr->pr_hostname, sizeof(xp->pr_host));
3775                 strlcpy(xp->pr_name, prison_name(pr, cpr), sizeof(xp->pr_name));
3776 #ifdef INET
3777                 xp->pr_ip4s = cpr->pr_ip4s;
3778 #endif
3779 #ifdef INET6
3780                 xp->pr_ip6s = cpr->pr_ip6s;
3781 #endif
3782                 mtx_unlock(&cpr->pr_mtx);
3783                 error = SYSCTL_OUT(req, xp, sizeof(*xp));
3784                 if (error)
3785                         break;
3786 #ifdef INET
3787                 if (xp->pr_ip4s > 0) {
3788                         error = SYSCTL_OUT(req, ip4,
3789                             xp->pr_ip4s * sizeof(struct in_addr));
3790                         if (error)
3791                                 break;
3792                 }
3793 #endif
3794 #ifdef INET6
3795                 if (xp->pr_ip6s > 0) {
3796                         error = SYSCTL_OUT(req, ip6,
3797                             xp->pr_ip6s * sizeof(struct in6_addr));
3798                         if (error)
3799                                 break;
3800                 }
3801 #endif
3802         }
3803         sx_sunlock(&allprison_lock);
3804         free(xp, M_TEMP);
3805 #ifdef INET
3806         free(ip4, M_TEMP);
3807 #endif
3808 #ifdef INET6
3809         free(ip6, M_TEMP);
3810 #endif
3811         return (error);
3812 }
3813
3814 SYSCTL_OID(_security_jail, OID_AUTO, list,
3815     CTLTYPE_STRUCT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
3816     sysctl_jail_list, "S", "List of active jails");
3817
3818 static int
3819 sysctl_jail_jailed(SYSCTL_HANDLER_ARGS)
3820 {
3821         int error, injail;
3822
3823         injail = jailed(req->td->td_ucred);
3824         error = SYSCTL_OUT(req, &injail, sizeof(injail));
3825
3826         return (error);
3827 }
3828
3829 SYSCTL_PROC(_security_jail, OID_AUTO, jailed,
3830     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
3831     sysctl_jail_jailed, "I", "Process in jail?");
3832
3833 static int
3834 sysctl_jail_vnet(SYSCTL_HANDLER_ARGS)
3835 {
3836         int error, havevnet;
3837 #ifdef VIMAGE
3838         struct ucred *cred = req->td->td_ucred;
3839
3840         havevnet = jailed(cred) && prison_owns_vnet(cred);
3841 #else
3842         havevnet = 0;
3843 #endif
3844         error = SYSCTL_OUT(req, &havevnet, sizeof(havevnet));
3845
3846         return (error);
3847 }
3848
3849 SYSCTL_PROC(_security_jail, OID_AUTO, vnet,
3850     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
3851     sysctl_jail_vnet, "I", "Jail owns vnet?");
3852
3853 #if defined(INET) || defined(INET6)
3854 SYSCTL_UINT(_security_jail, OID_AUTO, jail_max_af_ips, CTLFLAG_RW,
3855     &jail_max_af_ips, 0,
3856     "Number of IP addresses a jail may have at most per address family (deprecated)");
3857 #endif
3858
3859 /*
3860  * Default parameters for jail(2) compatibility.  For historical reasons,
3861  * the sysctl names have varying similarity to the parameter names.  Prisons
3862  * just see their own parameters, and can't change them.
3863  */
3864 static int
3865 sysctl_jail_default_allow(SYSCTL_HANDLER_ARGS)
3866 {
3867         int error, i;
3868
3869         /* Get the current flag value, and convert it to a boolean. */
3870         if (req->td->td_ucred->cr_prison == &prison0) {
3871                 mtx_lock(&prison0.pr_mtx);
3872                 i = (jail_default_allow & arg2) != 0;
3873                 mtx_unlock(&prison0.pr_mtx);
3874         } else
3875                 i = prison_allow(req->td->td_ucred, arg2);
3876
3877         if (arg1 != NULL)
3878                 i = !i;
3879         error = sysctl_handle_int(oidp, &i, 0, req);
3880         if (error || !req->newptr)
3881                 return (error);
3882         i = i ? arg2 : 0;
3883         if (arg1 != NULL)
3884                 i ^= arg2;
3885         /*
3886          * The sysctls don't have CTLFLAGS_PRISON, so assume prison0
3887          * for writing.
3888          */
3889         mtx_lock(&prison0.pr_mtx);
3890         jail_default_allow = (jail_default_allow & ~arg2) | i;
3891         mtx_unlock(&prison0.pr_mtx);
3892         return (0);
3893 }
3894
3895 SYSCTL_PROC(_security_jail, OID_AUTO, set_hostname_allowed,
3896     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3897     NULL, PR_ALLOW_SET_HOSTNAME, sysctl_jail_default_allow, "I",
3898     "Processes in jail can set their hostnames (deprecated)");
3899 SYSCTL_PROC(_security_jail, OID_AUTO, socket_unixiproute_only,
3900     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3901     (void *)1, PR_ALLOW_SOCKET_AF, sysctl_jail_default_allow, "I",
3902     "Processes in jail are limited to creating UNIX/IP/route sockets only (deprecated)");
3903 SYSCTL_PROC(_security_jail, OID_AUTO, sysvipc_allowed,
3904     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3905     NULL, PR_ALLOW_SYSVIPC, sysctl_jail_default_allow, "I",
3906     "Processes in jail can use System V IPC primitives (deprecated)");
3907 SYSCTL_PROC(_security_jail, OID_AUTO, allow_raw_sockets,
3908     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3909     NULL, PR_ALLOW_RAW_SOCKETS, sysctl_jail_default_allow, "I",
3910     "Prison root can create raw sockets (deprecated)");
3911 SYSCTL_PROC(_security_jail, OID_AUTO, chflags_allowed,
3912     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3913     NULL, PR_ALLOW_CHFLAGS, sysctl_jail_default_allow, "I",
3914     "Processes in jail can alter system file flags (deprecated)");
3915 SYSCTL_PROC(_security_jail, OID_AUTO, mount_allowed,
3916     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3917     NULL, PR_ALLOW_MOUNT, sysctl_jail_default_allow, "I",
3918     "Processes in jail can mount/unmount jail-friendly file systems (deprecated)");
3919
3920 static int
3921 sysctl_jail_default_level(SYSCTL_HANDLER_ARGS)
3922 {
3923         struct prison *pr;
3924         int level, error;
3925
3926         pr = req->td->td_ucred->cr_prison;
3927         level = (pr == &prison0) ? *(int *)arg1 : *(int *)((char *)pr + arg2);
3928         error = sysctl_handle_int(oidp, &level, 0, req);
3929         if (error || !req->newptr)
3930                 return (error);
3931         *(int *)arg1 = level;
3932         return (0);
3933 }
3934
3935 SYSCTL_PROC(_security_jail, OID_AUTO, enforce_statfs,
3936     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
3937     &jail_default_enforce_statfs, offsetof(struct prison, pr_enforce_statfs),
3938     sysctl_jail_default_level, "I",
3939     "Processes in jail cannot see all mounted file systems (deprecated)");
3940
3941 SYSCTL_PROC(_security_jail, OID_AUTO, devfs_ruleset,
3942     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE,
3943     &jail_default_devfs_rsnum, offsetof(struct prison, pr_devfs_rsnum),
3944     sysctl_jail_default_level, "I",
3945     "Ruleset for the devfs filesystem in jail (deprecated)");
3946
3947 /*
3948  * Nodes to describe jail parameters.  Maximum length of string parameters
3949  * is returned in the string itself, and the other parameters exist merely
3950  * to make themselves and their types known.
3951  */
3952 SYSCTL_NODE(_security_jail, OID_AUTO, param, CTLFLAG_RW | CTLFLAG_MPSAFE, 0,
3953     "Jail parameters");
3954
3955 int
3956 sysctl_jail_param(SYSCTL_HANDLER_ARGS)
3957 {
3958         int i;
3959         long l;
3960         size_t s;
3961         char numbuf[12];
3962
3963         switch (oidp->oid_kind & CTLTYPE)
3964         {
3965         case CTLTYPE_LONG:
3966         case CTLTYPE_ULONG:
3967                 l = 0;
3968 #ifdef SCTL_MASK32
3969                 if (!(req->flags & SCTL_MASK32))
3970 #endif
3971                         return (SYSCTL_OUT(req, &l, sizeof(l)));
3972         case CTLTYPE_INT:
3973         case CTLTYPE_UINT:
3974                 i = 0;
3975                 return (SYSCTL_OUT(req, &i, sizeof(i)));
3976         case CTLTYPE_STRING:
3977                 snprintf(numbuf, sizeof(numbuf), "%jd", (intmax_t)arg2);
3978                 return
3979                     (sysctl_handle_string(oidp, numbuf, sizeof(numbuf), req));
3980         case CTLTYPE_STRUCT:
3981                 s = (size_t)arg2;
3982                 return (SYSCTL_OUT(req, &s, sizeof(s)));
3983         }
3984         return (0);
3985 }
3986
3987 /*
3988  * CTLFLAG_RDTUN in the following indicates jail parameters that can be set at
3989  * jail creation time but cannot be changed in an existing jail.
3990  */
3991 SYSCTL_JAIL_PARAM(, jid, CTLTYPE_INT | CTLFLAG_RDTUN, "I", "Jail ID");
3992 SYSCTL_JAIL_PARAM(, parent, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail parent ID");
3993 SYSCTL_JAIL_PARAM_STRING(, name, CTLFLAG_RW, MAXHOSTNAMELEN, "Jail name");
3994 SYSCTL_JAIL_PARAM_STRING(, path, CTLFLAG_RDTUN, MAXPATHLEN, "Jail root path");
3995 SYSCTL_JAIL_PARAM(, securelevel, CTLTYPE_INT | CTLFLAG_RW,
3996     "I", "Jail secure level");
3997 SYSCTL_JAIL_PARAM(, osreldate, CTLTYPE_INT | CTLFLAG_RDTUN, "I",
3998     "Jail value for kern.osreldate and uname -K");
3999 SYSCTL_JAIL_PARAM_STRING(, osrelease, CTLFLAG_RDTUN, OSRELEASELEN,
4000     "Jail value for kern.osrelease and uname -r");
4001 SYSCTL_JAIL_PARAM(, enforce_statfs, CTLTYPE_INT | CTLFLAG_RW,
4002     "I", "Jail cannot see all mounted file systems");
4003 SYSCTL_JAIL_PARAM(, devfs_ruleset, CTLTYPE_INT | CTLFLAG_RW,
4004     "I", "Ruleset for in-jail devfs mounts");
4005 SYSCTL_JAIL_PARAM(, persist, CTLTYPE_INT | CTLFLAG_RW,
4006     "B", "Jail persistence");
4007 #ifdef VIMAGE
4008 SYSCTL_JAIL_PARAM(, vnet, CTLTYPE_INT | CTLFLAG_RDTUN,
4009     "E,jailsys", "Virtual network stack");
4010 #endif
4011 SYSCTL_JAIL_PARAM(, dying, CTLTYPE_INT | CTLFLAG_RD,
4012     "B", "Jail is in the process of shutting down");
4013
4014 SYSCTL_JAIL_PARAM_NODE(children, "Number of child jails");
4015 SYSCTL_JAIL_PARAM(_children, cur, CTLTYPE_INT | CTLFLAG_RD,
4016     "I", "Current number of child jails");
4017 SYSCTL_JAIL_PARAM(_children, max, CTLTYPE_INT | CTLFLAG_RW,
4018     "I", "Maximum number of child jails");
4019
4020 SYSCTL_JAIL_PARAM_SYS_NODE(host, CTLFLAG_RW, "Jail host info");
4021 SYSCTL_JAIL_PARAM_STRING(_host, hostname, CTLFLAG_RW, MAXHOSTNAMELEN,
4022     "Jail hostname");
4023 SYSCTL_JAIL_PARAM_STRING(_host, domainname, CTLFLAG_RW, MAXHOSTNAMELEN,
4024     "Jail NIS domainname");
4025 SYSCTL_JAIL_PARAM_STRING(_host, hostuuid, CTLFLAG_RW, HOSTUUIDLEN,
4026     "Jail host UUID");
4027 SYSCTL_JAIL_PARAM(_host, hostid, CTLTYPE_ULONG | CTLFLAG_RW,
4028     "LU", "Jail host ID");
4029
4030 SYSCTL_JAIL_PARAM_NODE(cpuset, "Jail cpuset");
4031 SYSCTL_JAIL_PARAM(_cpuset, id, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail cpuset ID");
4032
4033 #ifdef INET
4034 SYSCTL_JAIL_PARAM_SYS_NODE(ip4, CTLFLAG_RDTUN,
4035     "Jail IPv4 address virtualization");
4036 SYSCTL_JAIL_PARAM_STRUCT(_ip4, addr, CTLFLAG_RW, sizeof(struct in_addr),
4037     "S,in_addr,a", "Jail IPv4 addresses");
4038 SYSCTL_JAIL_PARAM(_ip4, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4039     "B", "Do (not) use IPv4 source address selection rather than the "
4040     "primary jail IPv4 address.");
4041 #endif
4042 #ifdef INET6
4043 SYSCTL_JAIL_PARAM_SYS_NODE(ip6, CTLFLAG_RDTUN,
4044     "Jail IPv6 address virtualization");
4045 SYSCTL_JAIL_PARAM_STRUCT(_ip6, addr, CTLFLAG_RW, sizeof(struct in6_addr),
4046     "S,in6_addr,a", "Jail IPv6 addresses");
4047 SYSCTL_JAIL_PARAM(_ip6, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4048     "B", "Do (not) use IPv6 source address selection rather than the "
4049     "primary jail IPv6 address.");
4050 #endif
4051
4052 SYSCTL_JAIL_PARAM_NODE(allow, "Jail permission flags");
4053 SYSCTL_JAIL_PARAM(_allow, set_hostname, CTLTYPE_INT | CTLFLAG_RW,
4054     "B", "Jail may set hostname");
4055 SYSCTL_JAIL_PARAM(_allow, sysvipc, CTLTYPE_INT | CTLFLAG_RW,
4056     "B", "Jail may use SYSV IPC");
4057 SYSCTL_JAIL_PARAM(_allow, raw_sockets, CTLTYPE_INT | CTLFLAG_RW,
4058     "B", "Jail may create raw sockets");
4059 SYSCTL_JAIL_PARAM(_allow, chflags, CTLTYPE_INT | CTLFLAG_RW,
4060     "B", "Jail may alter system file flags");
4061 SYSCTL_JAIL_PARAM(_allow, quotas, CTLTYPE_INT | CTLFLAG_RW,
4062     "B", "Jail may set file quotas");
4063 SYSCTL_JAIL_PARAM(_allow, socket_af, CTLTYPE_INT | CTLFLAG_RW,
4064     "B", "Jail may create sockets other than just UNIX/IPv4/IPv6/route");
4065 SYSCTL_JAIL_PARAM(_allow, mlock, CTLTYPE_INT | CTLFLAG_RW,
4066     "B", "Jail may lock (unlock) physical pages in memory");
4067 SYSCTL_JAIL_PARAM(_allow, reserved_ports, CTLTYPE_INT | CTLFLAG_RW,
4068     "B", "Jail may bind sockets to reserved ports");
4069 SYSCTL_JAIL_PARAM(_allow, read_msgbuf, CTLTYPE_INT | CTLFLAG_RW,
4070     "B", "Jail may read the kernel message buffer");
4071 SYSCTL_JAIL_PARAM(_allow, unprivileged_proc_debug, CTLTYPE_INT | CTLFLAG_RW,
4072     "B", "Unprivileged processes may use process debugging facilities");
4073 SYSCTL_JAIL_PARAM(_allow, suser, CTLTYPE_INT | CTLFLAG_RW,
4074     "B", "Processes in jail with uid 0 have privilege");
4075
4076 SYSCTL_JAIL_PARAM_SUBNODE(allow, mount, "Jail mount/unmount permission flags");
4077 SYSCTL_JAIL_PARAM(_allow_mount, , CTLTYPE_INT | CTLFLAG_RW,
4078     "B", "Jail may mount/unmount jail-friendly file systems in general");
4079
4080 /*
4081  * Add a dynamic parameter allow.<name>, or allow.<prefix>.<name>.  Return
4082  * its associated bit in the pr_allow bitmask, or zero if the parameter was
4083  * not created.
4084  */
4085 unsigned
4086 prison_add_allow(const char *prefix, const char *name, const char *prefix_descr,
4087     const char *descr)
4088 {
4089         struct bool_flags *bf;
4090         struct sysctl_oid *parent;
4091         char *allow_name, *allow_noname, *allowed;
4092 #ifndef NO_SYSCTL_DESCR
4093         char *descr_deprecated;
4094 #endif
4095         u_int allow_flag;
4096
4097         if (prefix
4098             ? asprintf(&allow_name, M_PRISON, "allow.%s.%s", prefix, name)
4099                 < 0 ||
4100               asprintf(&allow_noname, M_PRISON, "allow.%s.no%s", prefix, name)
4101                 < 0
4102             : asprintf(&allow_name, M_PRISON, "allow.%s", name) < 0 ||
4103               asprintf(&allow_noname, M_PRISON, "allow.no%s", name) < 0) {
4104                 free(allow_name, M_PRISON);
4105                 return 0;
4106         }
4107
4108         /*
4109          * See if this parameter has already beed added, i.e. a module was
4110          * previously loaded/unloaded.
4111          */
4112         mtx_lock(&prison0.pr_mtx);
4113         for (bf = pr_flag_allow;
4114              bf < pr_flag_allow + nitems(pr_flag_allow) &&
4115                 atomic_load_int(&bf->flag) != 0;
4116              bf++) {
4117                 if (strcmp(bf->name, allow_name) == 0) {
4118                         allow_flag = bf->flag;
4119                         goto no_add;
4120                 }
4121         }
4122
4123         /*
4124          * Find a free bit in pr_allow_all, failing if there are none
4125          * (which shouldn't happen as long as we keep track of how many
4126          * potential dynamic flags exist).
4127          */
4128         for (allow_flag = 1;; allow_flag <<= 1) {
4129                 if (allow_flag == 0)
4130                         goto no_add;
4131                 if ((pr_allow_all & allow_flag) == 0)
4132                         break;
4133         }
4134
4135         /* Note the parameter in the next open slot in pr_flag_allow. */
4136         for (bf = pr_flag_allow; ; bf++) {
4137                 if (bf == pr_flag_allow + nitems(pr_flag_allow)) {
4138                         /* This should never happen, but is not fatal. */
4139                         allow_flag = 0;
4140                         goto no_add;
4141                 }
4142                 if (atomic_load_int(&bf->flag) == 0)
4143                         break;
4144         }
4145         bf->name = allow_name;
4146         bf->noname = allow_noname;
4147         pr_allow_all |= allow_flag;
4148         /*
4149          * prison0 always has permission for the new parameter.
4150          * Other jails must have it granted to them.
4151          */
4152         prison0.pr_allow |= allow_flag;
4153         /* The flag indicates a valid entry, so make sure it is set last. */
4154         atomic_store_rel_int(&bf->flag, allow_flag);
4155         mtx_unlock(&prison0.pr_mtx);
4156
4157         /*
4158          * Create sysctls for the paramter, and the back-compat global
4159          * permission.
4160          */
4161         parent = prefix
4162             ? SYSCTL_ADD_NODE(NULL,
4163                   SYSCTL_CHILDREN(&sysctl___security_jail_param_allow),
4164                   OID_AUTO, prefix, CTLFLAG_MPSAFE, 0, prefix_descr)
4165             : &sysctl___security_jail_param_allow;
4166         (void)SYSCTL_ADD_PROC(NULL, SYSCTL_CHILDREN(parent), OID_AUTO,
4167             name, CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4168             NULL, 0, sysctl_jail_param, "B", descr);
4169         if ((prefix
4170              ? asprintf(&allowed, M_TEMP, "%s_%s_allowed", prefix, name)
4171              : asprintf(&allowed, M_TEMP, "%s_allowed", name)) >= 0) {
4172 #ifndef NO_SYSCTL_DESCR
4173                 (void)asprintf(&descr_deprecated, M_TEMP, "%s (deprecated)",
4174                     descr);
4175 #endif
4176                 (void)SYSCTL_ADD_PROC(NULL,
4177                     SYSCTL_CHILDREN(&sysctl___security_jail), OID_AUTO, allowed,
4178                     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE, NULL, allow_flag,
4179                     sysctl_jail_default_allow, "I", descr_deprecated);
4180 #ifndef NO_SYSCTL_DESCR
4181                 free(descr_deprecated, M_TEMP);
4182 #endif
4183                 free(allowed, M_TEMP);
4184         }
4185         return allow_flag;
4186
4187  no_add:
4188         mtx_unlock(&prison0.pr_mtx);
4189         free(allow_name, M_PRISON);
4190         free(allow_noname, M_PRISON);
4191         return allow_flag;
4192 }
4193
4194 /*
4195  * The VFS system will register jail-aware filesystems here.  They each get
4196  * a parameter allow.mount.xxxfs and a flag to check when a jailed user
4197  * attempts to mount.
4198  */
4199 void
4200 prison_add_vfs(struct vfsconf *vfsp)
4201 {
4202 #ifdef NO_SYSCTL_DESCR
4203
4204         vfsp->vfc_prison_flag = prison_add_allow("mount", vfsp->vfc_name,
4205             NULL, NULL);
4206 #else
4207         char *descr;
4208
4209         (void)asprintf(&descr, M_TEMP, "Jail may mount the %s file system",
4210             vfsp->vfc_name);
4211         vfsp->vfc_prison_flag = prison_add_allow("mount", vfsp->vfc_name,
4212             NULL, descr);
4213         free(descr, M_TEMP);
4214 #endif
4215 }
4216
4217 #ifdef RACCT
4218 void
4219 prison_racct_foreach(void (*callback)(struct racct *racct,
4220     void *arg2, void *arg3), void (*pre)(void), void (*post)(void),
4221     void *arg2, void *arg3)
4222 {
4223         struct prison_racct *prr;
4224
4225         ASSERT_RACCT_ENABLED();
4226
4227         sx_slock(&allprison_lock);
4228         if (pre != NULL)
4229                 (pre)();
4230         LIST_FOREACH(prr, &allprison_racct, prr_next)
4231                 (callback)(prr->prr_racct, arg2, arg3);
4232         if (post != NULL)
4233                 (post)();
4234         sx_sunlock(&allprison_lock);
4235 }
4236
4237 static struct prison_racct *
4238 prison_racct_find_locked(const char *name)
4239 {
4240         struct prison_racct *prr;
4241
4242         ASSERT_RACCT_ENABLED();
4243         sx_assert(&allprison_lock, SA_XLOCKED);
4244
4245         if (name[0] == '\0' || strlen(name) >= MAXHOSTNAMELEN)
4246                 return (NULL);
4247
4248         LIST_FOREACH(prr, &allprison_racct, prr_next) {
4249                 if (strcmp(name, prr->prr_name) != 0)
4250                         continue;
4251
4252                 /* Found prison_racct with a matching name? */
4253                 prison_racct_hold(prr);
4254                 return (prr);
4255         }
4256
4257         /* Add new prison_racct. */
4258         prr = malloc(sizeof(*prr), M_PRISON_RACCT, M_ZERO | M_WAITOK);
4259         racct_create(&prr->prr_racct);
4260
4261         strcpy(prr->prr_name, name);
4262         refcount_init(&prr->prr_refcount, 1);
4263         LIST_INSERT_HEAD(&allprison_racct, prr, prr_next);
4264
4265         return (prr);
4266 }
4267
4268 struct prison_racct *
4269 prison_racct_find(const char *name)
4270 {
4271         struct prison_racct *prr;
4272
4273         ASSERT_RACCT_ENABLED();
4274
4275         sx_xlock(&allprison_lock);
4276         prr = prison_racct_find_locked(name);
4277         sx_xunlock(&allprison_lock);
4278         return (prr);
4279 }
4280
4281 void
4282 prison_racct_hold(struct prison_racct *prr)
4283 {
4284
4285         ASSERT_RACCT_ENABLED();
4286
4287         refcount_acquire(&prr->prr_refcount);
4288 }
4289
4290 static void
4291 prison_racct_free_locked(struct prison_racct *prr)
4292 {
4293
4294         ASSERT_RACCT_ENABLED();
4295         sx_assert(&allprison_lock, SA_XLOCKED);
4296
4297         if (refcount_release(&prr->prr_refcount)) {
4298                 racct_destroy(&prr->prr_racct);
4299                 LIST_REMOVE(prr, prr_next);
4300                 free(prr, M_PRISON_RACCT);
4301         }
4302 }
4303
4304 void
4305 prison_racct_free(struct prison_racct *prr)
4306 {
4307
4308         ASSERT_RACCT_ENABLED();
4309         sx_assert(&allprison_lock, SA_UNLOCKED);
4310
4311         if (refcount_release_if_not_last(&prr->prr_refcount))
4312                 return;
4313
4314         sx_xlock(&allprison_lock);
4315         prison_racct_free_locked(prr);
4316         sx_xunlock(&allprison_lock);
4317 }
4318
4319 static void
4320 prison_racct_attach(struct prison *pr)
4321 {
4322         struct prison_racct *prr;
4323
4324         ASSERT_RACCT_ENABLED();
4325         sx_assert(&allprison_lock, SA_XLOCKED);
4326
4327         prr = prison_racct_find_locked(pr->pr_name);
4328         KASSERT(prr != NULL, ("cannot find prison_racct"));
4329
4330         pr->pr_prison_racct = prr;
4331 }
4332
4333 /*
4334  * Handle jail renaming.  From the racct point of view, renaming means
4335  * moving from one prison_racct to another.
4336  */
4337 static void
4338 prison_racct_modify(struct prison *pr)
4339 {
4340 #ifdef RCTL
4341         struct proc *p;
4342         struct ucred *cred;
4343 #endif
4344         struct prison_racct *oldprr;
4345
4346         ASSERT_RACCT_ENABLED();
4347
4348         sx_slock(&allproc_lock);
4349         sx_xlock(&allprison_lock);
4350
4351         if (strcmp(pr->pr_name, pr->pr_prison_racct->prr_name) == 0) {
4352                 sx_xunlock(&allprison_lock);
4353                 sx_sunlock(&allproc_lock);
4354                 return;
4355         }
4356
4357         oldprr = pr->pr_prison_racct;
4358         pr->pr_prison_racct = NULL;
4359
4360         prison_racct_attach(pr);
4361
4362         /*
4363          * Move resource utilisation records.
4364          */
4365         racct_move(pr->pr_prison_racct->prr_racct, oldprr->prr_racct);
4366
4367 #ifdef RCTL
4368         /*
4369          * Force rctl to reattach rules to processes.
4370          */
4371         FOREACH_PROC_IN_SYSTEM(p) {
4372                 PROC_LOCK(p);
4373                 cred = crhold(p->p_ucred);
4374                 PROC_UNLOCK(p);
4375                 rctl_proc_ucred_changed(p, cred);
4376                 crfree(cred);
4377         }
4378 #endif
4379
4380         sx_sunlock(&allproc_lock);
4381         prison_racct_free_locked(oldprr);
4382         sx_xunlock(&allprison_lock);
4383 }
4384
4385 static void
4386 prison_racct_detach(struct prison *pr)
4387 {
4388
4389         ASSERT_RACCT_ENABLED();
4390         sx_assert(&allprison_lock, SA_UNLOCKED);
4391
4392         if (pr->pr_prison_racct == NULL)
4393                 return;
4394         prison_racct_free(pr->pr_prison_racct);
4395         pr->pr_prison_racct = NULL;
4396 }
4397 #endif /* RACCT */
4398
4399 #ifdef DDB
4400
4401 static void
4402 db_show_prison(struct prison *pr)
4403 {
4404         struct bool_flags *bf;
4405         struct jailsys_flags *jsf;
4406 #if defined(INET) || defined(INET6)
4407         int ii;
4408 #endif
4409         unsigned f;
4410 #ifdef INET
4411         char ip4buf[INET_ADDRSTRLEN];
4412 #endif
4413 #ifdef INET6
4414         char ip6buf[INET6_ADDRSTRLEN];
4415 #endif
4416
4417         db_printf("prison %p:\n", pr);
4418         db_printf(" jid             = %d\n", pr->pr_id);
4419         db_printf(" name            = %s\n", pr->pr_name);
4420         db_printf(" parent          = %p\n", pr->pr_parent);
4421         db_printf(" ref             = %d\n", pr->pr_ref);
4422         db_printf(" uref            = %d\n", pr->pr_uref);
4423         db_printf(" state           = %s\n",
4424             pr->pr_state == PRISON_STATE_ALIVE ? "alive" :
4425             pr->pr_state == PRISON_STATE_DYING ? "dying" :
4426             "invalid");
4427         db_printf(" path            = %s\n", pr->pr_path);
4428         db_printf(" cpuset          = %d\n", pr->pr_cpuset
4429             ? pr->pr_cpuset->cs_id : -1);
4430 #ifdef VIMAGE
4431         db_printf(" vnet            = %p\n", pr->pr_vnet);
4432 #endif
4433         db_printf(" root            = %p\n", pr->pr_root);
4434         db_printf(" securelevel     = %d\n", pr->pr_securelevel);
4435         db_printf(" devfs_rsnum     = %d\n", pr->pr_devfs_rsnum);
4436         db_printf(" children.max    = %d\n", pr->pr_childmax);
4437         db_printf(" children.cur    = %d\n", pr->pr_childcount);
4438         db_printf(" child           = %p\n", LIST_FIRST(&pr->pr_children));
4439         db_printf(" sibling         = %p\n", LIST_NEXT(pr, pr_sibling));
4440         db_printf(" flags           = 0x%x", pr->pr_flags);
4441         for (bf = pr_flag_bool; bf < pr_flag_bool + nitems(pr_flag_bool); bf++)
4442                 if (pr->pr_flags & bf->flag)
4443                         db_printf(" %s", bf->name);
4444         for (jsf = pr_flag_jailsys;
4445              jsf < pr_flag_jailsys + nitems(pr_flag_jailsys);
4446              jsf++) {
4447                 f = pr->pr_flags & (jsf->disable | jsf->new);
4448                 db_printf(" %-16s= %s\n", jsf->name,
4449                     (f != 0 && f == jsf->disable) ? "disable"
4450                     : (f == jsf->new) ? "new"
4451                     : "inherit");
4452         }
4453         db_printf(" allow           = 0x%x", pr->pr_allow);
4454         for (bf = pr_flag_allow;
4455              bf < pr_flag_allow + nitems(pr_flag_allow) &&
4456                 atomic_load_int(&bf->flag) != 0;
4457              bf++)
4458                 if (pr->pr_allow & bf->flag)
4459                         db_printf(" %s", bf->name);
4460         db_printf("\n");
4461         db_printf(" enforce_statfs  = %d\n", pr->pr_enforce_statfs);
4462         db_printf(" host.hostname   = %s\n", pr->pr_hostname);
4463         db_printf(" host.domainname = %s\n", pr->pr_domainname);
4464         db_printf(" host.hostuuid   = %s\n", pr->pr_hostuuid);
4465         db_printf(" host.hostid     = %lu\n", pr->pr_hostid);
4466 #ifdef INET
4467         db_printf(" ip4s            = %d\n", pr->pr_ip4s);
4468         for (ii = 0; ii < pr->pr_ip4s; ii++)
4469                 db_printf(" %s %s\n",
4470                     ii == 0 ? "ip4.addr        =" : "                 ",
4471                     inet_ntoa_r(pr->pr_ip4[ii], ip4buf));
4472 #endif
4473 #ifdef INET6
4474         db_printf(" ip6s            = %d\n", pr->pr_ip6s);
4475         for (ii = 0; ii < pr->pr_ip6s; ii++)
4476                 db_printf(" %s %s\n",
4477                     ii == 0 ? "ip6.addr        =" : "                 ",
4478                     ip6_sprintf(ip6buf, &pr->pr_ip6[ii]));
4479 #endif
4480 }
4481
4482 DB_SHOW_COMMAND(prison, db_show_prison_command)
4483 {
4484         struct prison *pr;
4485
4486         if (!have_addr) {
4487                 /*
4488                  * Show all prisons in the list, and prison0 which is not
4489                  * listed.
4490                  */
4491                 db_show_prison(&prison0);
4492                 if (!db_pager_quit) {
4493                         TAILQ_FOREACH(pr, &allprison, pr_list) {
4494                                 db_show_prison(pr);
4495                                 if (db_pager_quit)
4496                                         break;
4497                         }
4498                 }
4499                 return;
4500         }
4501
4502         if (addr == 0)
4503                 pr = &prison0;
4504         else {
4505                 /* Look for a prison with the ID and with references. */
4506                 TAILQ_FOREACH(pr, &allprison, pr_list)
4507                         if (pr->pr_id == addr && pr->pr_ref > 0)
4508                                 break;
4509                 if (pr == NULL)
4510                         /* Look again, without requiring a reference. */
4511                         TAILQ_FOREACH(pr, &allprison, pr_list)
4512                                 if (pr->pr_id == addr)
4513                                         break;
4514                 if (pr == NULL)
4515                         /* Assume address points to a valid prison. */
4516                         pr = (struct prison *)addr;
4517         }
4518         db_show_prison(pr);
4519 }
4520
4521 #endif /* DDB */