sys/kern/kern_jail.c

   1 /*-
   2  * Copyright (c) 1999 Poul-Henning Kamp.
   3  * Copyright (c) 2008 Bjoern A. Zeeb.
   4  * Copyright (c) 2009 James Gritton.
   5  * All rights reserved.
   6  *
   7  * Redistribution and use in source and binary forms, with or without
   8  * modification, are permitted provided that the following conditions
   9  * are met:
  10  * 1. Redistributions of source code must retain the above copyright
  11  *    notice, this list of conditions and the following disclaimer.
  12  * 2. Redistributions in binary form must reproduce the above copyright
  13  *    notice, this list of conditions and the following disclaimer in the
  14  *    documentation and/or other materials provided with the distribution.
  15  *
  16  * THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
  17  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  18  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  19  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  20  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  21  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  22  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  23  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  24  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  25  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  26  * SUCH DAMAGE.
  27  */
  28
  29 #include <sys/cdefs.h>
  30 __FBSDID("$FreeBSD$");
  31
  32 #include "opt_compat.h"
  33 #include "opt_ddb.h"
  34 #include "opt_inet.h"
  35 #include "opt_inet6.h"
  36
  37 #include <sys/param.h>
  38 #include <sys/types.h>
  39 #include <sys/kernel.h>
  40 #include <sys/systm.h>
  41 #include <sys/errno.h>
  42 #include <sys/sysproto.h>
  43 #include <sys/malloc.h>
  44 #include <sys/osd.h>
  45 #include <sys/priv.h>
  46 #include <sys/proc.h>
  47 #include <sys/taskqueue.h>
  48 #include <sys/fcntl.h>
  49 #include <sys/jail.h>
  50 #include <sys/lock.h>
  51 #include <sys/mutex.h>
  52 #include <sys/racct.h>
  53 #include <sys/refcount.h>
  54 #include <sys/sx.h>
  55 #include <sys/sysent.h>
  56 #include <sys/namei.h>
  57 #include <sys/mount.h>
  58 #include <sys/queue.h>
  59 #include <sys/socket.h>
  60 #include <sys/syscallsubr.h>
  61 #include <sys/sysctl.h>
  62 #include <sys/vnode.h>
  63
  64 #include <net/if.h>
  65 #include <net/vnet.h>
  66
  67 #include <netinet/in.h>
  68
  69 #ifdef DDB
  70 #include <ddb/ddb.h>
  71 #endif /* DDB */
  72
  73 #include <security/mac/mac_framework.h>
  74
  75 #define DEFAULT_HOSTUUID        "00000000-0000-0000-0000-000000000000"
  76
  77 MALLOC_DEFINE(M_PRISON, "prison", "Prison structures");
  78 static MALLOC_DEFINE(M_PRISON_RACCT, "prison_racct", "Prison racct structures");
  79
  80 /* Keep struct prison prison0 and some code in kern_jail_set() readable. */
  81 #ifdef INET
  82 #ifdef INET6
  83 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL|PR_IP6_SADDRSEL
  84 #else
  85 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL
  86 #endif
  87 #else /* !INET */
  88 #ifdef INET6
  89 #define _PR_IP_SADDRSEL PR_IP6_SADDRSEL
  90 #else
  91 #define _PR_IP_SADDRSEL 0
  92 #endif
  93 #endif
  94
  95 /* prison0 describes what is "real" about the system. */
  96 struct prison prison0 = {
  97         .pr_id          = 0,
  98         .pr_name        = "0",
  99         .pr_ref         = 1,
 100         .pr_uref        = 1,
 101         .pr_path        = "/",
 102         .pr_securelevel = -1,
 103         .pr_devfs_rsnum = 0,
 104         .pr_childmax    = JAIL_MAX,
 105         .pr_hostuuid    = DEFAULT_HOSTUUID,
 106         .pr_children    = LIST_HEAD_INITIALIZER(prison0.pr_children),
 107 #ifdef VIMAGE
 108         .pr_flags       = PR_HOST|PR_VNET|_PR_IP_SADDRSEL,
 109 #else
 110         .pr_flags       = PR_HOST|_PR_IP_SADDRSEL,
 111 #endif
 112         .pr_allow       = PR_ALLOW_ALL,
 113 };
 114 MTX_SYSINIT(prison0, &prison0.pr_mtx, "jail mutex", MTX_DEF);
 115
 116 /* allprison, allprison_racct and lastprid are protected by allprison_lock. */
 117 struct  sx allprison_lock;
 118 SX_SYSINIT(allprison_lock, &allprison_lock, "allprison");
 119 struct  prisonlist allprison = TAILQ_HEAD_INITIALIZER(allprison);
 120 LIST_HEAD(, prison_racct) allprison_racct;
 121 int     lastprid = 0;
 122
 123 static int do_jail_attach(struct thread *td, struct prison *pr);
 124 static void prison_complete(void *context, int pending);
 125 static void prison_deref(struct prison *pr, int flags);
 126 static char *prison_path(struct prison *pr1, struct prison *pr2);
 127 static void prison_remove_one(struct prison *pr);
 128 #ifdef RACCT
 129 static void prison_racct_attach(struct prison *pr);
 130 static void prison_racct_modify(struct prison *pr);
 131 static void prison_racct_detach(struct prison *pr);
 132 #endif
 133 #ifdef INET
 134 static int _prison_check_ip4(const struct prison *, const struct in_addr *);
 135 static int prison_restrict_ip4(struct prison *pr, struct in_addr *newip4);
 136 #endif
 137 #ifdef INET6
 138 static int _prison_check_ip6(struct prison *pr, struct in6_addr *ia6);
 139 static int prison_restrict_ip6(struct prison *pr, struct in6_addr *newip6);
 140 #endif
 141
 142 /* Flags for prison_deref */
 143 #define PD_DEREF        0x01
 144 #define PD_DEUREF       0x02
 145 #define PD_LOCKED       0x04
 146 #define PD_LIST_SLOCKED 0x08
 147 #define PD_LIST_XLOCKED 0x10
 148
 149 /*
 150  * Parameter names corresponding to PR_* flag values.  Size values are for kvm
 151  * as we cannot figure out the size of a sparse array, or an array without a
 152  * terminating entry.
 153  */
 154 static char *pr_flag_names[] = {
 155         [0] = "persist",
 156 #ifdef INET
 157         [7] = "ip4.saddrsel",
 158 #endif
 159 #ifdef INET6
 160         [8] = "ip6.saddrsel",
 161 #endif
 162 };
 163 const size_t pr_flag_names_size = sizeof(pr_flag_names);
 164
 165 static char *pr_flag_nonames[] = {
 166         [0] = "nopersist",
 167 #ifdef INET
 168         [7] = "ip4.nosaddrsel",
 169 #endif
 170 #ifdef INET6
 171         [8] = "ip6.nosaddrsel",
 172 #endif
 173 };
 174 const size_t pr_flag_nonames_size = sizeof(pr_flag_nonames);
 175
 176 struct jailsys_flags {
 177         const char      *name;
 178         unsigned         disable;
 179         unsigned         new;
 180 } pr_flag_jailsys[] = {
 181         { "host", 0, PR_HOST },
 182 #ifdef VIMAGE
 183         { "vnet", 0, PR_VNET },
 184 #endif
 185 #ifdef INET
 186         { "ip4", PR_IP4_USER, PR_IP4_USER },
 187 #endif
 188 #ifdef INET6
 189         { "ip6", PR_IP6_USER, PR_IP6_USER },
 190 #endif
 191 };
 192 const size_t pr_flag_jailsys_size = sizeof(pr_flag_jailsys);
 193
 194 static char *pr_allow_names[] = {
 195         "allow.set_hostname",
 196         "allow.sysvipc",
 197         "allow.raw_sockets",
 198         "allow.chflags",
 199         "allow.mount",
 200         "allow.quotas",
 201         "allow.socket_af",
 202         "allow.mount.devfs",
 203         "allow.mount.nullfs",
 204         "allow.mount.zfs",
 205         "allow.mount.procfs",
 206         "allow.mount.tmpfs",
 207         "allow.mount.fdescfs",
 208         "allow.mount.linprocfs",
 209         "allow.mount.linsysfs",
 210 };
 211 const size_t pr_allow_names_size = sizeof(pr_allow_names);
 212
 213 static char *pr_allow_nonames[] = {
 214         "allow.noset_hostname",
 215         "allow.nosysvipc",
 216         "allow.noraw_sockets",
 217         "allow.nochflags",
 218         "allow.nomount",
 219         "allow.noquotas",
 220         "allow.nosocket_af",
 221         "allow.mount.nodevfs",
 222         "allow.mount.nonullfs",
 223         "allow.mount.nozfs",
 224         "allow.mount.noprocfs",
 225         "allow.mount.notmpfs",
 226         "allow.mount.nofdescfs",
 227         "allow.mount.nolinprocfs",
 228         "allow.mount.nolinsysfs",
 229 };
 230 const size_t pr_allow_nonames_size = sizeof(pr_allow_nonames);
 231
 232 #define JAIL_DEFAULT_ALLOW              PR_ALLOW_SET_HOSTNAME
 233 #define JAIL_DEFAULT_ENFORCE_STATFS     2
 234 #define JAIL_DEFAULT_DEVFS_RSNUM        0
 235 static unsigned jail_default_allow = JAIL_DEFAULT_ALLOW;
 236 static int jail_default_enforce_statfs = JAIL_DEFAULT_ENFORCE_STATFS;
 237 static int jail_default_devfs_rsnum = JAIL_DEFAULT_DEVFS_RSNUM;
 238 #if defined(INET) || defined(INET6)
 239 static unsigned jail_max_af_ips = 255;
 240 #endif
 241
 242 /*
 243  * Initialize the parts of prison0 that can't be static-initialized with
 244  * constants.  This is called from proc0_init() after creating thread0 cpuset.
 245  */
 246 void
 247 prison0_init(void)
 248 {
 249
 250         prison0.pr_cpuset = cpuset_ref(thread0.td_cpuset);
 251         prison0.pr_osreldate = osreldate;
 252         strlcpy(prison0.pr_osrelease, osrelease, sizeof(prison0.pr_osrelease));
 253 }
 254
 255 #ifdef INET
 256 static int
 257 qcmp_v4(const void *ip1, const void *ip2)
 258 {
 259         in_addr_t iaa, iab;
 260
 261         /*
 262          * We need to compare in HBO here to get the list sorted as expected
 263          * by the result of the code.  Sorting NBO addresses gives you
 264          * interesting results.  If you do not understand, do not try.
 265          */
 266         iaa = ntohl(((const struct in_addr *)ip1)->s_addr);
 267         iab = ntohl(((const struct in_addr *)ip2)->s_addr);
 268
 269         /*
 270          * Do not simply return the difference of the two numbers, the int is
 271          * not wide enough.
 272          */
 273         if (iaa > iab)
 274                 return (1);
 275         else if (iaa < iab)
 276                 return (-1);
 277         else
 278                 return (0);
 279 }
 280 #endif
 281
 282 #ifdef INET6
 283 static int
 284 qcmp_v6(const void *ip1, const void *ip2)
 285 {
 286         const struct in6_addr *ia6a, *ia6b;
 287         int i, rc;
 288
 289         ia6a = (const struct in6_addr *)ip1;
 290         ia6b = (const struct in6_addr *)ip2;
 291
 292         rc = 0;
 293         for (i = 0; rc == 0 && i < sizeof(struct in6_addr); i++) {
 294                 if (ia6a->s6_addr[i] > ia6b->s6_addr[i])
 295                         rc = 1;
 296                 else if (ia6a->s6_addr[i] < ia6b->s6_addr[i])
 297                         rc = -1;
 298         }
 299         return (rc);
 300 }
 301 #endif
 302
 303 /*
 304  * struct jail_args {
 305  *      struct jail *jail;
 306  * };
 307  */
 308 int
 309 sys_jail(struct thread *td, struct jail_args *uap)
 310 {
 311         uint32_t version;
 312         int error;
 313         struct jail j;
 314
 315         error = copyin(uap->jail, &version, sizeof(uint32_t));
 316         if (error)
 317                 return (error);
 318
 319         switch (version) {
 320         case 0:
 321         {
 322                 struct jail_v0 j0;
 323
 324                 /* FreeBSD single IPv4 jails. */
 325                 bzero(&j, sizeof(struct jail));
 326                 error = copyin(uap->jail, &j0, sizeof(struct jail_v0));
 327                 if (error)
 328                         return (error);
 329                 j.version = j0.version;
 330                 j.path = j0.path;
 331                 j.hostname = j0.hostname;
 332                 j.ip4s = htonl(j0.ip_number);   /* jail_v0 is host order */
 333                 break;
 334         }
 335
 336         case 1:
 337                 /*
 338                  * Version 1 was used by multi-IPv4 jail implementations
 339                  * that never made it into the official kernel.
 340                  */
 341                 return (EINVAL);
 342
 343         case 2: /* JAIL_API_VERSION */
 344                 /* FreeBSD multi-IPv4/IPv6,noIP jails. */
 345                 error = copyin(uap->jail, &j, sizeof(struct jail));
 346                 if (error)
 347                         return (error);
 348                 break;
 349
 350         default:
 351                 /* Sci-Fi jails are not supported, sorry. */
 352                 return (EINVAL);
 353         }
 354         return (kern_jail(td, &j));
 355 }
 356
 357 int
 358 kern_jail(struct thread *td, struct jail *j)
 359 {
 360         struct iovec optiov[2 * (4 + nitems(pr_allow_names)
 361 #ifdef INET
 362                             + 1
 363 #endif
 364 #ifdef INET6
 365                             + 1
 366 #endif
 367                             )];
 368         struct uio opt;
 369         char *u_path, *u_hostname, *u_name;
 370 #ifdef INET
 371         uint32_t ip4s;
 372         struct in_addr *u_ip4;
 373 #endif
 374 #ifdef INET6
 375         struct in6_addr *u_ip6;
 376 #endif
 377         size_t tmplen;
 378         int error, enforce_statfs, fi;
 379
 380         bzero(&optiov, sizeof(optiov));
 381         opt.uio_iov = optiov;
 382         opt.uio_iovcnt = 0;
 383         opt.uio_offset = -1;
 384         opt.uio_resid = -1;
 385         opt.uio_segflg = UIO_SYSSPACE;
 386         opt.uio_rw = UIO_READ;
 387         opt.uio_td = td;
 388
 389         /* Set permissions for top-level jails from sysctls. */
 390         if (!jailed(td->td_ucred)) {
 391                 for (fi = 0; fi < nitems(pr_allow_names); fi++) {
 392                         optiov[opt.uio_iovcnt].iov_base =
 393                             (jail_default_allow & (1 << fi))
 394                             ? pr_allow_names[fi] : pr_allow_nonames[fi];
 395                         optiov[opt.uio_iovcnt].iov_len =
 396                             strlen(optiov[opt.uio_iovcnt].iov_base) + 1;
 397                         opt.uio_iovcnt += 2;
 398                 }
 399                 optiov[opt.uio_iovcnt].iov_base = "enforce_statfs";
 400                 optiov[opt.uio_iovcnt].iov_len = sizeof("enforce_statfs");
 401                 opt.uio_iovcnt++;
 402                 enforce_statfs = jail_default_enforce_statfs;
 403                 optiov[opt.uio_iovcnt].iov_base = &enforce_statfs;
 404                 optiov[opt.uio_iovcnt].iov_len = sizeof(enforce_statfs);
 405                 opt.uio_iovcnt++;
 406         }
 407
 408         tmplen = MAXPATHLEN + MAXHOSTNAMELEN + MAXHOSTNAMELEN;
 409 #ifdef INET
 410         ip4s = (j->version == 0) ? 1 : j->ip4s;
 411         if (ip4s > jail_max_af_ips)
 412                 return (EINVAL);
 413         tmplen += ip4s * sizeof(struct in_addr);
 414 #else
 415         if (j->ip4s > 0)
 416                 return (EINVAL);
 417 #endif
 418 #ifdef INET6
 419         if (j->ip6s > jail_max_af_ips)
 420                 return (EINVAL);
 421         tmplen += j->ip6s * sizeof(struct in6_addr);
 422 #else
 423         if (j->ip6s > 0)
 424                 return (EINVAL);
 425 #endif
 426         u_path = malloc(tmplen, M_TEMP, M_WAITOK);
 427         u_hostname = u_path + MAXPATHLEN;
 428         u_name = u_hostname + MAXHOSTNAMELEN;
 429 #ifdef INET
 430         u_ip4 = (struct in_addr *)(u_name + MAXHOSTNAMELEN);
 431 #endif
 432 #ifdef INET6
 433 #ifdef INET
 434         u_ip6 = (struct in6_addr *)(u_ip4 + ip4s);
 435 #else
 436         u_ip6 = (struct in6_addr *)(u_name + MAXHOSTNAMELEN);
 437 #endif
 438 #endif
 439         optiov[opt.uio_iovcnt].iov_base = "path";
 440         optiov[opt.uio_iovcnt].iov_len = sizeof("path");
 441         opt.uio_iovcnt++;
 442         optiov[opt.uio_iovcnt].iov_base = u_path;
 443         error = copyinstr(j->path, u_path, MAXPATHLEN,
 444             &optiov[opt.uio_iovcnt].iov_len);
 445         if (error) {
 446                 free(u_path, M_TEMP);
 447                 return (error);
 448         }
 449         opt.uio_iovcnt++;
 450         optiov[opt.uio_iovcnt].iov_base = "host.hostname";
 451         optiov[opt.uio_iovcnt].iov_len = sizeof("host.hostname");
 452         opt.uio_iovcnt++;
 453         optiov[opt.uio_iovcnt].iov_base = u_hostname;
 454         error = copyinstr(j->hostname, u_hostname, MAXHOSTNAMELEN,
 455             &optiov[opt.uio_iovcnt].iov_len);
 456         if (error) {
 457                 free(u_path, M_TEMP);
 458                 return (error);
 459         }
 460         opt.uio_iovcnt++;
 461         if (j->jailname != NULL) {
 462                 optiov[opt.uio_iovcnt].iov_base = "name";
 463                 optiov[opt.uio_iovcnt].iov_len = sizeof("name");
 464                 opt.uio_iovcnt++;
 465                 optiov[opt.uio_iovcnt].iov_base = u_name;
 466                 error = copyinstr(j->jailname, u_name, MAXHOSTNAMELEN,
 467                     &optiov[opt.uio_iovcnt].iov_len);
 468                 if (error) {
 469                         free(u_path, M_TEMP);
 470                         return (error);
 471                 }
 472                 opt.uio_iovcnt++;
 473         }
 474 #ifdef INET
 475         optiov[opt.uio_iovcnt].iov_base = "ip4.addr";
 476         optiov[opt.uio_iovcnt].iov_len = sizeof("ip4.addr");
 477         opt.uio_iovcnt++;
 478         optiov[opt.uio_iovcnt].iov_base = u_ip4;
 479         optiov[opt.uio_iovcnt].iov_len = ip4s * sizeof(struct in_addr);
 480         if (j->version == 0)
 481                 u_ip4->s_addr = j->ip4s;
 482         else {
 483                 error = copyin(j->ip4, u_ip4, optiov[opt.uio_iovcnt].iov_len);
 484                 if (error) {
 485                         free(u_path, M_TEMP);
 486                         return (error);
 487                 }
 488         }
 489         opt.uio_iovcnt++;
 490 #endif
 491 #ifdef INET6
 492         optiov[opt.uio_iovcnt].iov_base = "ip6.addr";
 493         optiov[opt.uio_iovcnt].iov_len = sizeof("ip6.addr");
 494         opt.uio_iovcnt++;
 495         optiov[opt.uio_iovcnt].iov_base = u_ip6;
 496         optiov[opt.uio_iovcnt].iov_len = j->ip6s * sizeof(struct in6_addr);
 497         error = copyin(j->ip6, u_ip6, optiov[opt.uio_iovcnt].iov_len);
 498         if (error) {
 499                 free(u_path, M_TEMP);
 500                 return (error);
 501         }
 502         opt.uio_iovcnt++;
 503 #endif
 504         KASSERT(opt.uio_iovcnt <= nitems(optiov),
 505                 ("kern_jail: too many iovecs (%d)", opt.uio_iovcnt));
 506         error = kern_jail_set(td, &opt, JAIL_CREATE | JAIL_ATTACH);
 507         free(u_path, M_TEMP);
 508         return (error);
 509 }
 510
 511
 512 /*
 513  * struct jail_set_args {
 514  *      struct iovec *iovp;
 515  *      unsigned int iovcnt;
 516  *      int flags;
 517  * };
 518  */
 519 int
 520 sys_jail_set(struct thread *td, struct jail_set_args *uap)
 521 {
 522         struct uio *auio;
 523         int error;
 524
 525         /* Check that we have an even number of iovecs. */
 526         if (uap->iovcnt & 1)
 527                 return (EINVAL);
 528
 529         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
 530         if (error)
 531                 return (error);
 532         error = kern_jail_set(td, auio, uap->flags);
 533         free(auio, M_IOV);
 534         return (error);
 535 }
 536
 537 int
 538 kern_jail_set(struct thread *td, struct uio *optuio, int flags)
 539 {
 540         struct nameidata nd;
 541 #ifdef INET
 542         struct in_addr *ip4;
 543 #endif
 544 #ifdef INET6
 545         struct in6_addr *ip6;
 546 #endif
 547         struct vfsopt *opt;
 548         struct vfsoptlist *opts;
 549         struct prison *pr, *deadpr, *mypr, *ppr, *tpr;
 550         struct vnode *root;
 551         char *domain, *errmsg, *host, *name, *namelc, *p, *path, *uuid;
 552         char *g_path, *osrelstr;
 553 #if defined(INET) || defined(INET6)
 554         struct prison *tppr;
 555         void *op;
 556 #endif
 557         unsigned long hid;
 558         size_t namelen, onamelen, pnamelen;
 559         int born, created, cuflags, descend, enforce;
 560         int error, errmsg_len, errmsg_pos;
 561         int gotchildmax, gotenforce, gothid, gotrsnum, gotslevel;
 562         int fi, jid, jsys, len, level;
 563         int childmax, osreldt, rsnum, slevel;
 564         int fullpath_disabled;
 565 #if defined(INET) || defined(INET6)
 566         int ii, ij;
 567 #endif
 568 #ifdef INET
 569         int ip4s, redo_ip4;
 570 #endif
 571 #ifdef INET6
 572         int ip6s, redo_ip6;
 573 #endif
 574         uint64_t pr_allow, ch_allow, pr_flags, ch_flags;
 575         unsigned tallow;
 576         char numbuf[12];
 577
 578         error = priv_check(td, PRIV_JAIL_SET);
 579         if (!error && (flags & JAIL_ATTACH))
 580                 error = priv_check(td, PRIV_JAIL_ATTACH);
 581         if (error)
 582                 return (error);
 583         mypr = td->td_ucred->cr_prison;
 584         if ((flags & JAIL_CREATE) && mypr->pr_childmax == 0)
 585                 return (EPERM);
 586         if (flags & ~JAIL_SET_MASK)
 587                 return (EINVAL);
 588
 589         /*
 590          * Check all the parameters before committing to anything.  Not all
 591          * errors can be caught early, but we may as well try.  Also, this
 592          * takes care of some expensive stuff (path lookup) before getting
 593          * the allprison lock.
 594          *
 595          * XXX Jails are not filesystems, and jail parameters are not mount
 596          *     options.  But it makes more sense to re-use the vfsopt code
 597          *     than duplicate it under a different name.
 598          */
 599         error = vfs_buildopts(optuio, &opts);
 600         if (error)
 601                 return (error);
 602 #ifdef INET
 603         ip4 = NULL;
 604 #endif
 605 #ifdef INET6
 606         ip6 = NULL;
 607 #endif
 608         g_path = NULL;
 609
 610         cuflags = flags & (JAIL_CREATE | JAIL_UPDATE);
 611         if (!cuflags) {
 612                 error = EINVAL;
 613                 vfs_opterror(opts, "no valid operation (create or update)");
 614                 goto done_errmsg;
 615         }
 616
 617         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
 618         if (error == ENOENT)
 619                 jid = 0;
 620         else if (error != 0)
 621                 goto done_free;
 622
 623         error = vfs_copyopt(opts, "securelevel", &slevel, sizeof(slevel));
 624         if (error == ENOENT)
 625                 gotslevel = 0;
 626         else if (error != 0)
 627                 goto done_free;
 628         else
 629                 gotslevel = 1;
 630
 631         error =
 632             vfs_copyopt(opts, "children.max", &childmax, sizeof(childmax));
 633         if (error == ENOENT)
 634                 gotchildmax = 0;
 635         else if (error != 0)
 636                 goto done_free;
 637         else
 638                 gotchildmax = 1;
 639
 640         error = vfs_copyopt(opts, "enforce_statfs", &enforce, sizeof(enforce));
 641         if (error == ENOENT)
 642                 gotenforce = 0;
 643         else if (error != 0)
 644                 goto done_free;
 645         else if (enforce < 0 || enforce > 2) {
 646                 error = EINVAL;
 647                 goto done_free;
 648         } else
 649                 gotenforce = 1;
 650
 651         error = vfs_copyopt(opts, "devfs_ruleset", &rsnum, sizeof(rsnum));
 652         if (error == ENOENT)
 653                 gotrsnum = 0;
 654         else if (error != 0)
 655                 goto done_free;
 656         else
 657                 gotrsnum = 1;
 658
 659         pr_flags = ch_flags = 0;
 660         for (fi = 0; fi < nitems(pr_flag_names); fi++) {
 661                 if (pr_flag_names[fi] == NULL)
 662                         continue;
 663                 vfs_flagopt(opts, pr_flag_names[fi], &pr_flags, 1 << fi);
 664                 vfs_flagopt(opts, pr_flag_nonames[fi], &ch_flags, 1 << fi);
 665         }
 666         ch_flags |= pr_flags;
 667         for (fi = 0; fi < nitems(pr_flag_jailsys); fi++) {
 668                 error = vfs_copyopt(opts, pr_flag_jailsys[fi].name, &jsys,
 669                     sizeof(jsys));
 670                 if (error == ENOENT)
 671                         continue;
 672                 if (error != 0)
 673                         goto done_free;
 674                 switch (jsys) {
 675                 case JAIL_SYS_DISABLE:
 676                         if (!pr_flag_jailsys[fi].disable) {
 677                                 error = EINVAL;
 678                                 goto done_free;
 679                         }
 680                         pr_flags |= pr_flag_jailsys[fi].disable;
 681                         break;
 682                 case JAIL_SYS_NEW:
 683                         pr_flags |= pr_flag_jailsys[fi].new;
 684                         break;
 685                 case JAIL_SYS_INHERIT:
 686                         break;
 687                 default:
 688                         error = EINVAL;
 689                         goto done_free;
 690                 }
 691                 ch_flags |=
 692                     pr_flag_jailsys[fi].new | pr_flag_jailsys[fi].disable;
 693         }
 694         if ((flags & (JAIL_CREATE | JAIL_UPDATE | JAIL_ATTACH)) == JAIL_CREATE
 695             && !(pr_flags & PR_PERSIST)) {
 696                 error = EINVAL;
 697                 vfs_opterror(opts, "new jail must persist or attach");
 698                 goto done_errmsg;
 699         }
 700 #ifdef VIMAGE
 701         if ((flags & JAIL_UPDATE) && (ch_flags & PR_VNET)) {
 702                 error = EINVAL;
 703                 vfs_opterror(opts, "vnet cannot be changed after creation");
 704                 goto done_errmsg;
 705         }
 706 #endif
 707 #ifdef INET
 708         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP4_USER)) {
 709                 error = EINVAL;
 710                 vfs_opterror(opts, "ip4 cannot be changed after creation");
 711                 goto done_errmsg;
 712         }
 713 #endif
 714 #ifdef INET6
 715         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP6_USER)) {
 716                 error = EINVAL;
 717                 vfs_opterror(opts, "ip6 cannot be changed after creation");
 718                 goto done_errmsg;
 719         }
 720 #endif
 721
 722         pr_allow = ch_allow = 0;
 723         for (fi = 0; fi < nitems(pr_allow_names); fi++) {
 724                 vfs_flagopt(opts, pr_allow_names[fi], &pr_allow, 1 << fi);
 725                 vfs_flagopt(opts, pr_allow_nonames[fi], &ch_allow, 1 << fi);
 726         }
 727         ch_allow |= pr_allow;
 728
 729         error = vfs_getopt(opts, "name", (void **)&name, &len);
 730         if (error == ENOENT)
 731                 name = NULL;
 732         else if (error != 0)
 733                 goto done_free;
 734         else {
 735                 if (len == 0 || name[len - 1] != '\0') {
 736                         error = EINVAL;
 737                         goto done_free;
 738                 }
 739                 if (len > MAXHOSTNAMELEN) {
 740                         error = ENAMETOOLONG;
 741                         goto done_free;
 742                 }
 743         }
 744
 745         error = vfs_getopt(opts, "host.hostname", (void **)&host, &len);
 746         if (error == ENOENT)
 747                 host = NULL;
 748         else if (error != 0)
 749                 goto done_free;
 750         else {
 751                 ch_flags |= PR_HOST;
 752                 pr_flags |= PR_HOST;
 753                 if (len == 0 || host[len - 1] != '\0') {
 754                         error = EINVAL;
 755                         goto done_free;
 756                 }
 757                 if (len > MAXHOSTNAMELEN) {
 758                         error = ENAMETOOLONG;
 759                         goto done_free;
 760                 }
 761         }
 762
 763         error = vfs_getopt(opts, "host.domainname", (void **)&domain, &len);
 764         if (error == ENOENT)
 765                 domain = NULL;
 766         else if (error != 0)
 767                 goto done_free;
 768         else {
 769                 ch_flags |= PR_HOST;
 770                 pr_flags |= PR_HOST;
 771                 if (len == 0 || domain[len - 1] != '\0') {
 772                         error = EINVAL;
 773                         goto done_free;
 774                 }
 775                 if (len > MAXHOSTNAMELEN) {
 776                         error = ENAMETOOLONG;
 777                         goto done_free;
 778                 }
 779         }
 780
 781         error = vfs_getopt(opts, "host.hostuuid", (void **)&uuid, &len);
 782         if (error == ENOENT)
 783                 uuid = NULL;
 784         else if (error != 0)
 785                 goto done_free;
 786         else {
 787                 ch_flags |= PR_HOST;
 788                 pr_flags |= PR_HOST;
 789                 if (len == 0 || uuid[len - 1] != '\0') {
 790                         error = EINVAL;
 791                         goto done_free;
 792                 }
 793                 if (len > HOSTUUIDLEN) {
 794                         error = ENAMETOOLONG;
 795                         goto done_free;
 796                 }
 797         }
 798
 799 #ifdef COMPAT_FREEBSD32
 800         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
 801                 uint32_t hid32;
 802
 803                 error = vfs_copyopt(opts, "host.hostid", &hid32, sizeof(hid32));
 804                 hid = hid32;
 805         } else
 806 #endif
 807                 error = vfs_copyopt(opts, "host.hostid", &hid, sizeof(hid));
 808         if (error == ENOENT)
 809                 gothid = 0;
 810         else if (error != 0)
 811                 goto done_free;
 812         else {
 813                 gothid = 1;
 814                 ch_flags |= PR_HOST;
 815                 pr_flags |= PR_HOST;
 816         }
 817
 818 #ifdef INET
 819         error = vfs_getopt(opts, "ip4.addr", &op, &ip4s);
 820         if (error == ENOENT)
 821                 ip4s = 0;
 822         else if (error != 0)
 823                 goto done_free;
 824         else if (ip4s & (sizeof(*ip4) - 1)) {
 825                 error = EINVAL;
 826                 goto done_free;
 827         } else {
 828                 ch_flags |= PR_IP4_USER;
 829                 pr_flags |= PR_IP4_USER;
 830                 if (ip4s > 0) {
 831                         ip4s /= sizeof(*ip4);
 832                         if (ip4s > jail_max_af_ips) {
 833                                 error = EINVAL;
 834                                 vfs_opterror(opts, "too many IPv4 addresses");
 835                                 goto done_errmsg;
 836                         }
 837                         ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
 838                         bcopy(op, ip4, ip4s * sizeof(*ip4));
 839                         /*
 840                          * IP addresses are all sorted but ip[0] to preserve
 841                          * the primary IP address as given from userland.
 842                          * This special IP is used for unbound outgoing
 843                          * connections as well for "loopback" traffic in case
 844                          * source address selection cannot find any more fitting
 845                          * address to connect from.
 846                          */
 847                         if (ip4s > 1)
 848                                 qsort(ip4 + 1, ip4s - 1, sizeof(*ip4), qcmp_v4);
 849                         /*
 850                          * Check for duplicate addresses and do some simple
 851                          * zero and broadcast checks. If users give other bogus
 852                          * addresses it is their problem.
 853                          *
 854                          * We do not have to care about byte order for these
 855                          * checks so we will do them in NBO.
 856                          */
 857                         for (ii = 0; ii < ip4s; ii++) {
 858                                 if (ip4[ii].s_addr == INADDR_ANY ||
 859                                     ip4[ii].s_addr == INADDR_BROADCAST) {
 860                                         error = EINVAL;
 861                                         goto done_free;
 862                                 }
 863                                 if ((ii+1) < ip4s &&
 864                                     (ip4[0].s_addr == ip4[ii+1].s_addr ||
 865                                      ip4[ii].s_addr == ip4[ii+1].s_addr)) {
 866                                         error = EINVAL;
 867                                         goto done_free;
 868                                 }
 869                         }
 870                 }
 871         }
 872 #endif
 873
 874 #ifdef INET6
 875         error = vfs_getopt(opts, "ip6.addr", &op, &ip6s);
 876         if (error == ENOENT)
 877                 ip6s = 0;
 878         else if (error != 0)
 879                 goto done_free;
 880         else if (ip6s & (sizeof(*ip6) - 1)) {
 881                 error = EINVAL;
 882                 goto done_free;
 883         } else {
 884                 ch_flags |= PR_IP6_USER;
 885                 pr_flags |= PR_IP6_USER;
 886                 if (ip6s > 0) {
 887                         ip6s /= sizeof(*ip6);
 888                         if (ip6s > jail_max_af_ips) {
 889                                 error = EINVAL;
 890                                 vfs_opterror(opts, "too many IPv6 addresses");
 891                                 goto done_errmsg;
 892                         }
 893                         ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
 894                         bcopy(op, ip6, ip6s * sizeof(*ip6));
 895                         if (ip6s > 1)
 896                                 qsort(ip6 + 1, ip6s - 1, sizeof(*ip6), qcmp_v6);
 897                         for (ii = 0; ii < ip6s; ii++) {
 898                                 if (IN6_IS_ADDR_UNSPECIFIED(&ip6[ii])) {
 899                                         error = EINVAL;
 900                                         goto done_free;
 901                                 }
 902                                 if ((ii+1) < ip6s &&
 903                                     (IN6_ARE_ADDR_EQUAL(&ip6[0], &ip6[ii+1]) ||
 904                                      IN6_ARE_ADDR_EQUAL(&ip6[ii], &ip6[ii+1])))
 905                                 {
 906                                         error = EINVAL;
 907                                         goto done_free;
 908                                 }
 909                         }
 910                 }
 911         }
 912 #endif
 913
 914 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
 915         if ((ch_flags & PR_VNET) && (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
 916                 error = EINVAL;
 917                 vfs_opterror(opts,
 918                     "vnet jails cannot have IP address restrictions");
 919                 goto done_errmsg;
 920         }
 921 #endif
 922
 923         fullpath_disabled = 0;
 924         root = NULL;
 925         error = vfs_getopt(opts, "path", (void **)&path, &len);
 926         if (error == ENOENT)
 927                 path = NULL;
 928         else if (error != 0)
 929                 goto done_free;
 930         else {
 931                 if (flags & JAIL_UPDATE) {
 932                         error = EINVAL;
 933                         vfs_opterror(opts,
 934                             "path cannot be changed after creation");
 935                         goto done_errmsg;
 936                 }
 937                 if (len == 0 || path[len - 1] != '\0') {
 938                         error = EINVAL;
 939                         goto done_free;
 940                 }
 941                 NDINIT(&nd, LOOKUP, FOLLOW | LOCKLEAF, UIO_SYSSPACE,
 942                     path, td);
 943                 error = namei(&nd);
 944                 if (error)
 945                         goto done_free;
 946                 root = nd.ni_vp;
 947                 NDFREE(&nd, NDF_ONLY_PNBUF);
 948                 g_path = malloc(MAXPATHLEN, M_TEMP, M_WAITOK);
 949                 strlcpy(g_path, path, MAXPATHLEN);
 950                 error = vn_path_to_global_path(td, root, g_path, MAXPATHLEN);
 951                 if (error == 0)
 952                         path = g_path;
 953                 else if (error == ENODEV) {
 954                         /* proceed if sysctl debug.disablefullpath == 1 */
 955                         fullpath_disabled = 1;
 956                         if (len < 2 || (len == 2 && path[0] == '/'))
 957                                 path = NULL;
 958                 } else {
 959                         /* exit on other errors */
 960                         goto done_free;
 961                 }
 962                 if (root->v_type != VDIR) {
 963                         error = ENOTDIR;
 964                         vput(root);
 965                         goto done_free;
 966                 }
 967                 VOP_UNLOCK(root, 0);
 968                 if (fullpath_disabled) {
 969                         /* Leave room for a real-root full pathname. */
 970                         if (len + (path[0] == '/' && strcmp(mypr->pr_path, "/")
 971                             ? strlen(mypr->pr_path) : 0) > MAXPATHLEN) {
 972                                 error = ENAMETOOLONG;
 973                                 goto done_free;
 974                         }
 975                 }
 976         }
 977
 978         error = vfs_getopt(opts, "osrelease", (void **)&osrelstr, &len);
 979         if (error == ENOENT)
 980                 osrelstr = NULL;
 981         else if (error != 0)
 982                 goto done_free;
 983         else {
 984                 if (flags & JAIL_UPDATE) {
 985                         error = EINVAL;
 986                         vfs_opterror(opts,
 987                             "osrelease cannot be changed after creation");
 988                         goto done_errmsg;
 989                 }
 990                 if (len == 0 || len >= OSRELEASELEN) {
 991                         error = EINVAL;
 992                         vfs_opterror(opts,
 993                             "osrelease string must be 1-%d bytes long",
 994                             OSRELEASELEN - 1);
 995                         goto done_errmsg;
 996                 }
 997         }
 998
 999         error = vfs_copyopt(opts, "osreldate", &osreldt, sizeof(osreldt));
1000         if (error == ENOENT)
1001                 osreldt = 0;
1002         else if (error != 0)
1003                 goto done_free;
1004         else {
1005                 if (flags & JAIL_UPDATE) {
1006                         error = EINVAL;
1007                         vfs_opterror(opts,
1008                             "osreldate cannot be changed after creation");
1009                         goto done_errmsg;
1010                 }
1011                 if (osreldt == 0) {
1012                         error = EINVAL;
1013                         vfs_opterror(opts, "osreldate cannot be 0");
1014                         goto done_errmsg;
1015                 }
1016         }
1017
1018         /*
1019          * Find the specified jail, or at least its parent.
1020          * This abuses the file error codes ENOENT and EEXIST.
1021          */
1022         pr = NULL;
1023         ppr = mypr;
1024         if (cuflags == JAIL_CREATE && jid == 0 && name != NULL) {
1025                 namelc = strrchr(name, '.');
1026                 jid = strtoul(namelc != NULL ? namelc + 1 : name, &p, 10);
1027                 if (*p != '\0')
1028                         jid = 0;
1029         }
1030         sx_xlock(&allprison_lock);
1031         if (jid != 0) {
1032                 /*
1033                  * See if a requested jid already exists.  There is an
1034                  * information leak here if the jid exists but is not within
1035                  * the caller's jail hierarchy.  Jail creators will get EEXIST
1036                  * even though they cannot see the jail, and CREATE | UPDATE
1037                  * will return ENOENT which is not normally a valid error.
1038                  */
1039                 if (jid < 0) {
1040                         error = EINVAL;
1041                         vfs_opterror(opts, "negative jid");
1042                         goto done_unlock_list;
1043                 }
1044                 pr = prison_find(jid);
1045                 if (pr != NULL) {
1046                         ppr = pr->pr_parent;
1047                         /* Create: jid must not exist. */
1048                         if (cuflags == JAIL_CREATE) {
1049                                 mtx_unlock(&pr->pr_mtx);
1050                                 error = EEXIST;
1051                                 vfs_opterror(opts, "jail %d already exists",
1052                                     jid);
1053                                 goto done_unlock_list;
1054                         }
1055                         if (!prison_ischild(mypr, pr)) {
1056                                 mtx_unlock(&pr->pr_mtx);
1057                                 pr = NULL;
1058                         } else if (pr->pr_uref == 0) {
1059                                 if (!(flags & JAIL_DYING)) {
1060                                         mtx_unlock(&pr->pr_mtx);
1061                                         error = ENOENT;
1062                                         vfs_opterror(opts, "jail %d is dying",
1063                                             jid);
1064                                         goto done_unlock_list;
1065                                 } else if ((flags & JAIL_ATTACH) ||
1066                                     (pr_flags & PR_PERSIST)) {
1067                                         /*
1068                                          * A dying jail might be resurrected
1069                                          * (via attach or persist), but first
1070                                          * it must determine if another jail
1071                                          * has claimed its name.  Accomplish
1072                                          * this by implicitly re-setting the
1073                                          * name.
1074                                          */
1075                                         if (name == NULL)
1076                                                 name = prison_name(mypr, pr);
1077                                 }
1078                         }
1079                 }
1080                 if (pr == NULL) {
1081                         /* Update: jid must exist. */
1082                         if (cuflags == JAIL_UPDATE) {
1083                                 error = ENOENT;
1084                                 vfs_opterror(opts, "jail %d not found", jid);
1085                                 goto done_unlock_list;
1086                         }
1087                 }
1088         }
1089         /*
1090          * If the caller provided a name, look for a jail by that name.
1091          * This has different semantics for creates and updates keyed by jid
1092          * (where the name must not already exist in a different jail),
1093          * and updates keyed by the name itself (where the name must exist
1094          * because that is the jail being updated).
1095          */
1096         namelc = NULL;
1097         if (name != NULL) {
1098                 namelc = strrchr(name, '.');
1099                 if (namelc == NULL)
1100                         namelc = name;
1101                 else {
1102                         /*
1103                          * This is a hierarchical name.  Split it into the
1104                          * parent and child names, and make sure the parent
1105                          * exists or matches an already found jail.
1106                          */
1107                         if (pr != NULL) {
1108                                 if (strncmp(name, ppr->pr_name, namelc - name)
1109                                     || ppr->pr_name[namelc - name] != '\0') {
1110                                         mtx_unlock(&pr->pr_mtx);
1111                                         error = EINVAL;
1112                                         vfs_opterror(opts,
1113                                             "cannot change jail's parent");
1114                                         goto done_unlock_list;
1115                                 }
1116                         } else {
1117                                 *namelc = '\0';
1118                                 ppr = prison_find_name(mypr, name);
1119                                 if (ppr == NULL) {
1120                                         error = ENOENT;
1121                                         vfs_opterror(opts,
1122                                             "jail \"%s\" not found", name);
1123                                         goto done_unlock_list;
1124                                 }
1125                                 mtx_unlock(&ppr->pr_mtx);
1126                                 *namelc = '.';
1127                         }
1128                         namelc++;
1129                 }
1130                 if (namelc[0] != '\0') {
1131                         pnamelen =
1132                             (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1133  name_again:
1134                         deadpr = NULL;
1135                         FOREACH_PRISON_CHILD(ppr, tpr) {
1136                                 if (tpr != pr && tpr->pr_ref > 0 &&
1137                                     !strcmp(tpr->pr_name + pnamelen, namelc)) {
1138                                         if (pr == NULL &&
1139                                             cuflags != JAIL_CREATE) {
1140                                                 mtx_lock(&tpr->pr_mtx);
1141                                                 if (tpr->pr_ref > 0) {
1142                                                         /*
1143                                                          * Use this jail
1144                                                          * for updates.
1145                                                          */
1146                                                         if (tpr->pr_uref > 0) {
1147                                                                 pr = tpr;
1148                                                                 break;
1149                                                         }
1150                                                         deadpr = tpr;
1151                                                 }
1152                                                 mtx_unlock(&tpr->pr_mtx);
1153                                         } else if (tpr->pr_uref > 0) {
1154                                                 /*
1155                                                  * Create, or update(jid):
1156                                                  * name must not exist in an
1157                                                  * active sibling jail.
1158                                                  */
1159                                                 error = EEXIST;
1160                                                 if (pr != NULL)
1161                                                         mtx_unlock(&pr->pr_mtx);
1162                                                 vfs_opterror(opts,
1163                                                    "jail \"%s\" already exists",
1164                                                    name);
1165                                                 goto done_unlock_list;
1166                                         }
1167                                 }
1168                         }
1169                         /* If no active jail is found, use a dying one. */
1170                         if (deadpr != NULL && pr == NULL) {
1171                                 if (flags & JAIL_DYING) {
1172                                         mtx_lock(&deadpr->pr_mtx);
1173                                         if (deadpr->pr_ref == 0) {
1174                                                 mtx_unlock(&deadpr->pr_mtx);
1175                                                 goto name_again;
1176                                         }
1177                                         pr = deadpr;
1178                                 } else if (cuflags == JAIL_UPDATE) {
1179                                         error = ENOENT;
1180                                         vfs_opterror(opts,
1181                                             "jail \"%s\" is dying", name);
1182                                         goto done_unlock_list;
1183                                 }
1184                         }
1185                         /* Update: name must exist if no jid. */
1186                         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1187                                 error = ENOENT;
1188                                 vfs_opterror(opts, "jail \"%s\" not found",
1189                                     name);
1190                                 goto done_unlock_list;
1191                         }
1192                 }
1193         }
1194         /* Update: must provide a jid or name. */
1195         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1196                 error = ENOENT;
1197                 vfs_opterror(opts, "update specified no jail");
1198                 goto done_unlock_list;
1199         }
1200
1201         /* If there's no prison to update, create a new one and link it in. */
1202         if (pr == NULL) {
1203                 for (tpr = mypr; tpr != NULL; tpr = tpr->pr_parent)
1204                         if (tpr->pr_childcount >= tpr->pr_childmax) {
1205                                 error = EPERM;
1206                                 vfs_opterror(opts, "prison limit exceeded");
1207                                 goto done_unlock_list;
1208                         }
1209                 created = 1;
1210                 mtx_lock(&ppr->pr_mtx);
1211                 if (ppr->pr_ref == 0) {
1212                         mtx_unlock(&ppr->pr_mtx);
1213                         error = ENOENT;
1214                         vfs_opterror(opts, "jail \"%s\" not found",
1215                             prison_name(mypr, ppr));
1216                         goto done_unlock_list;
1217                 }
1218                 ppr->pr_ref++;
1219                 ppr->pr_uref++;
1220                 mtx_unlock(&ppr->pr_mtx);
1221                 pr = malloc(sizeof(*pr), M_PRISON, M_WAITOK | M_ZERO);
1222                 if (jid == 0) {
1223                         /* Find the next free jid. */
1224                         jid = lastprid + 1;
1225  findnext:
1226                         if (jid == JAIL_MAX)
1227                                 jid = 1;
1228                         TAILQ_FOREACH(tpr, &allprison, pr_list) {
1229                                 if (tpr->pr_id < jid)
1230                                         continue;
1231                                 if (tpr->pr_id > jid || tpr->pr_ref == 0) {
1232                                         TAILQ_INSERT_BEFORE(tpr, pr, pr_list);
1233                                         break;
1234                                 }
1235                                 if (jid == lastprid) {
1236                                         error = EAGAIN;
1237                                         vfs_opterror(opts,
1238                                             "no available jail IDs");
1239                                         free(pr, M_PRISON);
1240                                         prison_deref(ppr, PD_DEREF |
1241                                             PD_DEUREF | PD_LIST_XLOCKED);
1242                                         goto done_releroot;
1243                                 }
1244                                 jid++;
1245                                 goto findnext;
1246                         }
1247                         lastprid = jid;
1248                 } else {
1249                         /*
1250                          * The jail already has a jid (that did not yet exist),
1251                          * so just find where to insert it.
1252                          */
1253                         TAILQ_FOREACH(tpr, &allprison, pr_list)
1254                                 if (tpr->pr_id >= jid) {
1255                                         TAILQ_INSERT_BEFORE(tpr, pr, pr_list);
1256                                         break;
1257                                 }
1258                 }
1259                 if (tpr == NULL)
1260                         TAILQ_INSERT_TAIL(&allprison, pr, pr_list);
1261                 LIST_INSERT_HEAD(&ppr->pr_children, pr, pr_sibling);
1262                 for (tpr = ppr; tpr != NULL; tpr = tpr->pr_parent)
1263                         tpr->pr_childcount++;
1264
1265                 pr->pr_parent = ppr;
1266                 pr->pr_id = jid;
1267
1268                 /* Set some default values, and inherit some from the parent. */
1269                 if (namelc == NULL)
1270                         namelc = "";
1271                 if (path == NULL) {
1272                         path = "/";
1273                         root = mypr->pr_root;
1274                         vref(root);
1275                 }
1276                 strlcpy(pr->pr_hostuuid, DEFAULT_HOSTUUID, HOSTUUIDLEN);
1277                 pr->pr_flags |= PR_HOST;
1278 #if defined(INET) || defined(INET6)
1279 #ifdef VIMAGE
1280                 if (!(pr_flags & PR_VNET))
1281 #endif
1282                 {
1283 #ifdef INET
1284                         if (!(ch_flags & PR_IP4_USER))
1285                                 pr->pr_flags |= PR_IP4 | PR_IP4_USER;
1286                         else if (!(pr_flags & PR_IP4_USER)) {
1287                                 pr->pr_flags |= ppr->pr_flags & PR_IP4;
1288                                 if (ppr->pr_ip4 != NULL) {
1289                                         pr->pr_ip4s = ppr->pr_ip4s;
1290                                         pr->pr_ip4 = malloc(pr->pr_ip4s *
1291                                             sizeof(struct in_addr), M_PRISON,
1292                                             M_WAITOK);
1293                                         bcopy(ppr->pr_ip4, pr->pr_ip4,
1294                                             pr->pr_ip4s * sizeof(*pr->pr_ip4));
1295                                 }
1296                         }
1297 #endif
1298 #ifdef INET6
1299                         if (!(ch_flags & PR_IP6_USER))
1300                                 pr->pr_flags |= PR_IP6 | PR_IP6_USER;
1301                         else if (!(pr_flags & PR_IP6_USER)) {
1302                                 pr->pr_flags |= ppr->pr_flags & PR_IP6;
1303                                 if (ppr->pr_ip6 != NULL) {
1304                                         pr->pr_ip6s = ppr->pr_ip6s;
1305                                         pr->pr_ip6 = malloc(pr->pr_ip6s *
1306                                             sizeof(struct in6_addr), M_PRISON,
1307                                             M_WAITOK);
1308                                         bcopy(ppr->pr_ip6, pr->pr_ip6,
1309                                             pr->pr_ip6s * sizeof(*pr->pr_ip6));
1310                                 }
1311                         }
1312 #endif
1313                 }
1314 #endif
1315                 /* Source address selection is always on by default. */
1316                 pr->pr_flags |= _PR_IP_SADDRSEL;
1317
1318                 pr->pr_securelevel = ppr->pr_securelevel;
1319                 pr->pr_allow = JAIL_DEFAULT_ALLOW & ppr->pr_allow;
1320                 pr->pr_enforce_statfs = jail_default_enforce_statfs;
1321                 pr->pr_devfs_rsnum = ppr->pr_devfs_rsnum;
1322
1323                 pr->pr_osreldate = osreldt ? osreldt : ppr->pr_osreldate;
1324                 if (osrelstr == NULL)
1325                     strcpy(pr->pr_osrelease, ppr->pr_osrelease);
1326                 else
1327                     strcpy(pr->pr_osrelease, osrelstr);
1328
1329                 LIST_INIT(&pr->pr_children);
1330                 mtx_init(&pr->pr_mtx, "jail mutex", NULL, MTX_DEF | MTX_DUPOK);
1331                 TASK_INIT(&pr->pr_task, 0, prison_complete, pr);
1332
1333 #ifdef VIMAGE
1334                 /* Allocate a new vnet if specified. */
1335                 pr->pr_vnet = (pr_flags & PR_VNET)
1336                     ? vnet_alloc() : ppr->pr_vnet;
1337 #endif
1338                 /*
1339                  * Allocate a dedicated cpuset for each jail.
1340                  * Unlike other initial settings, this may return an erorr.
1341                  */
1342                 error = cpuset_create_root(ppr, &pr->pr_cpuset);
1343                 if (error) {
1344                         prison_deref(pr, PD_LIST_XLOCKED);
1345                         goto done_releroot;
1346                 }
1347
1348                 mtx_lock(&pr->pr_mtx);
1349                 /*
1350                  * New prisons do not yet have a reference, because we do not
1351                  * want others to see the incomplete prison once the
1352                  * allprison_lock is downgraded.
1353                  */
1354         } else {
1355                 created = 0;
1356                 /*
1357                  * Grab a reference for existing prisons, to ensure they
1358                  * continue to exist for the duration of the call.
1359                  */
1360                 pr->pr_ref++;
1361 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
1362                 if ((pr->pr_flags & PR_VNET) &&
1363                     (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
1364                         error = EINVAL;
1365                         vfs_opterror(opts,
1366                             "vnet jails cannot have IP address restrictions");
1367                         goto done_deref_locked;
1368                 }
1369 #endif
1370 #ifdef INET
1371                 if (PR_IP4_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1372                         error = EINVAL;
1373                         vfs_opterror(opts,
1374                             "ip4 cannot be changed after creation");
1375                         goto done_deref_locked;
1376                 }
1377 #endif
1378 #ifdef INET6
1379                 if (PR_IP6_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1380                         error = EINVAL;
1381                         vfs_opterror(opts,
1382                             "ip6 cannot be changed after creation");
1383                         goto done_deref_locked;
1384                 }
1385 #endif
1386         }
1387
1388         /* Do final error checking before setting anything. */
1389         if (gotslevel) {
1390                 if (slevel < ppr->pr_securelevel) {
1391                         error = EPERM;
1392                         goto done_deref_locked;
1393                 }
1394         }
1395         if (gotchildmax) {
1396                 if (childmax >= ppr->pr_childmax) {
1397                         error = EPERM;
1398                         goto done_deref_locked;
1399                 }
1400         }
1401         if (gotenforce) {
1402                 if (enforce < ppr->pr_enforce_statfs) {
1403                         error = EPERM;
1404                         goto done_deref_locked;
1405                 }
1406         }
1407         if (gotrsnum) {
1408                 /*
1409                  * devfs_rsnum is a uint16_t
1410                  */
1411                 if (rsnum < 0 || rsnum > 65535) {
1412                         error = EINVAL;
1413                         goto done_deref_locked;
1414                 }
1415                 /*
1416                  * Nested jails always inherit parent's devfs ruleset
1417                  */
1418                 if (jailed(td->td_ucred)) {
1419                         if (rsnum > 0 && rsnum != ppr->pr_devfs_rsnum) {
1420                                 error = EPERM;
1421                                 goto done_deref_locked;
1422                         } else
1423                                 rsnum = ppr->pr_devfs_rsnum;
1424                 }
1425         }
1426 #ifdef INET
1427         if (ip4s > 0) {
1428                 if (ppr->pr_flags & PR_IP4) {
1429                         /*
1430                          * Make sure the new set of IP addresses is a
1431                          * subset of the parent's list.  Don't worry
1432                          * about the parent being unlocked, as any
1433                          * setting is done with allprison_lock held.
1434                          */
1435                         for (ij = 0; ij < ppr->pr_ip4s; ij++)
1436                                 if (ip4[0].s_addr == ppr->pr_ip4[ij].s_addr)
1437                                         break;
1438                         if (ij == ppr->pr_ip4s) {
1439                                 error = EPERM;
1440                                 goto done_deref_locked;
1441                         }
1442                         if (ip4s > 1) {
1443                                 for (ii = ij = 1; ii < ip4s; ii++) {
1444                                         if (ip4[ii].s_addr ==
1445                                             ppr->pr_ip4[0].s_addr)
1446                                                 continue;
1447                                         for (; ij < ppr->pr_ip4s; ij++)
1448                                                 if (ip4[ii].s_addr ==
1449                                                     ppr->pr_ip4[ij].s_addr)
1450                                                         break;
1451                                         if (ij == ppr->pr_ip4s)
1452                                                 break;
1453                                 }
1454                                 if (ij == ppr->pr_ip4s) {
1455                                         error = EPERM;
1456                                         goto done_deref_locked;
1457                                 }
1458                         }
1459                 }
1460                 /*
1461                  * Check for conflicting IP addresses.  We permit them
1462                  * if there is no more than one IP on each jail.  If
1463                  * there is a duplicate on a jail with more than one
1464                  * IP stop checking and return error.
1465                  */
1466                 tppr = ppr;
1467 #ifdef VIMAGE
1468                 for (; tppr != &prison0; tppr = tppr->pr_parent)
1469                         if (tppr->pr_flags & PR_VNET)
1470                                 break;
1471 #endif
1472                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1473                         if (tpr == pr ||
1474 #ifdef VIMAGE
1475                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1476 #endif
1477                             tpr->pr_uref == 0) {
1478                                 descend = 0;
1479                                 continue;
1480                         }
1481                         if (!(tpr->pr_flags & PR_IP4_USER))
1482                                 continue;
1483                         descend = 0;
1484                         if (tpr->pr_ip4 == NULL ||
1485                             (ip4s == 1 && tpr->pr_ip4s == 1))
1486                                 continue;
1487                         for (ii = 0; ii < ip4s; ii++) {
1488                                 if (_prison_check_ip4(tpr, &ip4[ii]) == 0) {
1489                                         error = EADDRINUSE;
1490                                         vfs_opterror(opts,
1491                                             "IPv4 addresses clash");
1492                                         goto done_deref_locked;
1493                                 }
1494                         }
1495                 }
1496         }
1497 #endif
1498 #ifdef INET6
1499         if (ip6s > 0) {
1500                 if (ppr->pr_flags & PR_IP6) {
1501                         /*
1502                          * Make sure the new set of IP addresses is a
1503                          * subset of the parent's list.
1504                          */
1505                         for (ij = 0; ij < ppr->pr_ip6s; ij++)
1506                                 if (IN6_ARE_ADDR_EQUAL(&ip6[0],
1507                                     &ppr->pr_ip6[ij]))
1508                                         break;
1509                         if (ij == ppr->pr_ip6s) {
1510                                 error = EPERM;
1511                                 goto done_deref_locked;
1512                         }
1513                         if (ip6s > 1) {
1514                                 for (ii = ij = 1; ii < ip6s; ii++) {
1515                                         if (IN6_ARE_ADDR_EQUAL(&ip6[ii],
1516                                              &ppr->pr_ip6[0]))
1517                                                 continue;
1518                                         for (; ij < ppr->pr_ip6s; ij++)
1519                                                 if (IN6_ARE_ADDR_EQUAL(
1520                                                     &ip6[ii], &ppr->pr_ip6[ij]))
1521                                                         break;
1522                                         if (ij == ppr->pr_ip6s)
1523                                                 break;
1524                                 }
1525                                 if (ij == ppr->pr_ip6s) {
1526                                         error = EPERM;
1527                                         goto done_deref_locked;
1528                                 }
1529                         }
1530                 }
1531                 /* Check for conflicting IP addresses. */
1532                 tppr = ppr;
1533 #ifdef VIMAGE
1534                 for (; tppr != &prison0; tppr = tppr->pr_parent)
1535                         if (tppr->pr_flags & PR_VNET)
1536                                 break;
1537 #endif
1538                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1539                         if (tpr == pr ||
1540 #ifdef VIMAGE
1541                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1542 #endif
1543                             tpr->pr_uref == 0) {
1544                                 descend = 0;
1545                                 continue;
1546                         }
1547                         if (!(tpr->pr_flags & PR_IP6_USER))
1548                                 continue;
1549                         descend = 0;
1550                         if (tpr->pr_ip6 == NULL ||
1551                             (ip6s == 1 && tpr->pr_ip6s == 1))
1552                                 continue;
1553                         for (ii = 0; ii < ip6s; ii++) {
1554                                 if (_prison_check_ip6(tpr, &ip6[ii]) == 0) {
1555                                         error = EADDRINUSE;
1556                                         vfs_opterror(opts,
1557                                             "IPv6 addresses clash");
1558                                         goto done_deref_locked;
1559                                 }
1560                         }
1561                 }
1562         }
1563 #endif
1564         onamelen = namelen = 0;
1565         if (namelc != NULL) {
1566                 /* Give a default name of the jid.  Also allow the name to be
1567                  * explicitly the jid - but not any other number, and only in
1568                  * normal form (no leading zero/etc).
1569                  */
1570                 if (namelc[0] == '\0')
1571                         snprintf(namelc = numbuf, sizeof(numbuf), "%d", jid);
1572                 else if ((strtoul(namelc, &p, 10) != jid ||
1573                           namelc[0] < '1' || namelc[0] > '9') && *p == '\0') {
1574                         error = EINVAL;
1575                         vfs_opterror(opts,
1576                             "name cannot be numeric (unless it is the jid)");
1577                         goto done_deref_locked;
1578                 }
1579                 /*
1580                  * Make sure the name isn't too long for the prison or its
1581                  * children.
1582                  */
1583                 pnamelen = (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1584                 onamelen = strlen(pr->pr_name + pnamelen);
1585                 namelen = strlen(namelc);
1586                 if (pnamelen + namelen + 1 > sizeof(pr->pr_name)) {
1587                         error = ENAMETOOLONG;
1588                         goto done_deref_locked;
1589                 }
1590                 FOREACH_PRISON_DESCENDANT(pr, tpr, descend) {
1591                         if (strlen(tpr->pr_name) + (namelen - onamelen) >=
1592                             sizeof(pr->pr_name)) {
1593                                 error = ENAMETOOLONG;
1594                                 goto done_deref_locked;
1595                         }
1596                 }
1597         }
1598         if (pr_allow & ~ppr->pr_allow) {
1599                 error = EPERM;
1600                 goto done_deref_locked;
1601         }
1602
1603         /*
1604          * Let modules check their parameters.  This requires unlocking and
1605          * then re-locking the prison, but this is still a valid state as long
1606          * as allprison_lock remains xlocked.
1607          */
1608         mtx_unlock(&pr->pr_mtx);
1609         error = osd_jail_call(pr, PR_METHOD_CHECK, opts);
1610         if (error != 0) {
1611                 prison_deref(pr, created
1612                     ? PD_LIST_XLOCKED
1613                     : PD_DEREF | PD_LIST_XLOCKED);
1614                 goto done_releroot;
1615         }
1616         mtx_lock(&pr->pr_mtx);
1617
1618         /* At this point, all valid parameters should have been noted. */
1619         TAILQ_FOREACH(opt, opts, link) {
1620                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
1621                         error = EINVAL;
1622                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
1623                         goto done_deref_locked;
1624                 }
1625         }
1626
1627         /* Set the parameters of the prison. */
1628 #ifdef INET
1629         redo_ip4 = 0;
1630         if (pr_flags & PR_IP4_USER) {
1631                 pr->pr_flags |= PR_IP4;
1632                 free(pr->pr_ip4, M_PRISON);
1633                 pr->pr_ip4s = ip4s;
1634                 pr->pr_ip4 = ip4;
1635                 ip4 = NULL;
1636                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1637 #ifdef VIMAGE
1638                         if (tpr->pr_flags & PR_VNET) {
1639                                 descend = 0;
1640                                 continue;
1641                         }
1642 #endif
1643                         if (prison_restrict_ip4(tpr, NULL)) {
1644                                 redo_ip4 = 1;
1645                                 descend = 0;
1646                         }
1647                 }
1648         }
1649 #endif
1650 #ifdef INET6
1651         redo_ip6 = 0;
1652         if (pr_flags & PR_IP6_USER) {
1653                 pr->pr_flags |= PR_IP6;
1654                 free(pr->pr_ip6, M_PRISON);
1655                 pr->pr_ip6s = ip6s;
1656                 pr->pr_ip6 = ip6;
1657                 ip6 = NULL;
1658                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1659 #ifdef VIMAGE
1660                         if (tpr->pr_flags & PR_VNET) {
1661                                 descend = 0;
1662                                 continue;
1663                         }
1664 #endif
1665                         if (prison_restrict_ip6(tpr, NULL)) {
1666                                 redo_ip6 = 1;
1667                                 descend = 0;
1668                         }
1669                 }
1670         }
1671 #endif
1672         if (gotslevel) {
1673                 pr->pr_securelevel = slevel;
1674                 /* Set all child jails to be at least this level. */
1675                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1676                         if (tpr->pr_securelevel < slevel)
1677                                 tpr->pr_securelevel = slevel;
1678         }
1679         if (gotchildmax) {
1680                 pr->pr_childmax = childmax;
1681                 /* Set all child jails to under this limit. */
1682                 FOREACH_PRISON_DESCENDANT_LOCKED_LEVEL(pr, tpr, descend, level)
1683                         if (tpr->pr_childmax > childmax - level)
1684                                 tpr->pr_childmax = childmax > level
1685                                     ? childmax - level : 0;
1686         }
1687         if (gotenforce) {
1688                 pr->pr_enforce_statfs = enforce;
1689                 /* Pass this restriction on to the children. */
1690                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1691                         if (tpr->pr_enforce_statfs < enforce)
1692                                 tpr->pr_enforce_statfs = enforce;
1693         }
1694         if (gotrsnum) {
1695                 pr->pr_devfs_rsnum = rsnum;
1696                 /* Pass this restriction on to the children. */
1697                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1698                         tpr->pr_devfs_rsnum = rsnum;
1699         }
1700         if (namelc != NULL) {
1701                 if (ppr == &prison0)
1702                         strlcpy(pr->pr_name, namelc, sizeof(pr->pr_name));
1703                 else
1704                         snprintf(pr->pr_name, sizeof(pr->pr_name), "%s.%s",
1705                             ppr->pr_name, namelc);
1706                 /* Change this component of child names. */
1707                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1708                         bcopy(tpr->pr_name + onamelen, tpr->pr_name + namelen,
1709                             strlen(tpr->pr_name + onamelen) + 1);
1710                         bcopy(pr->pr_name, tpr->pr_name, namelen);
1711                 }
1712         }
1713         if (path != NULL) {
1714                 /* Try to keep a real-rooted full pathname. */
1715                 if (fullpath_disabled && path[0] == '/' &&
1716                     strcmp(mypr->pr_path, "/"))
1717                         snprintf(pr->pr_path, sizeof(pr->pr_path), "%s%s",
1718                             mypr->pr_path, path);
1719                 else
1720                         strlcpy(pr->pr_path, path, sizeof(pr->pr_path));
1721                 pr->pr_root = root;
1722         }
1723         if (PR_HOST & ch_flags & ~pr_flags) {
1724                 if (pr->pr_flags & PR_HOST) {
1725                         /*
1726                          * Copy the parent's host info.  As with pr_ip4 above,
1727                          * the lack of a lock on the parent is not a problem;
1728                          * it is always set with allprison_lock at least
1729                          * shared, and is held exclusively here.
1730                          */
1731                         strlcpy(pr->pr_hostname, pr->pr_parent->pr_hostname,
1732                             sizeof(pr->pr_hostname));
1733                         strlcpy(pr->pr_domainname, pr->pr_parent->pr_domainname,
1734                             sizeof(pr->pr_domainname));
1735                         strlcpy(pr->pr_hostuuid, pr->pr_parent->pr_hostuuid,
1736                             sizeof(pr->pr_hostuuid));
1737                         pr->pr_hostid = pr->pr_parent->pr_hostid;
1738                 }
1739         } else if (host != NULL || domain != NULL || uuid != NULL || gothid) {
1740                 /* Set this prison, and any descendants without PR_HOST. */
1741                 if (host != NULL)
1742                         strlcpy(pr->pr_hostname, host, sizeof(pr->pr_hostname));
1743                 if (domain != NULL)
1744                         strlcpy(pr->pr_domainname, domain,
1745                             sizeof(pr->pr_domainname));
1746                 if (uuid != NULL)
1747                         strlcpy(pr->pr_hostuuid, uuid, sizeof(pr->pr_hostuuid));
1748                 if (gothid)
1749                         pr->pr_hostid = hid;
1750                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1751                         if (tpr->pr_flags & PR_HOST)
1752                                 descend = 0;
1753                         else {
1754                                 if (host != NULL)
1755                                         strlcpy(tpr->pr_hostname,
1756                                             pr->pr_hostname,
1757                                             sizeof(tpr->pr_hostname));
1758                                 if (domain != NULL)
1759                                         strlcpy(tpr->pr_domainname,
1760                                             pr->pr_domainname,
1761                                             sizeof(tpr->pr_domainname));
1762                                 if (uuid != NULL)
1763                                         strlcpy(tpr->pr_hostuuid,
1764                                             pr->pr_hostuuid,
1765                                             sizeof(tpr->pr_hostuuid));
1766                                 if (gothid)
1767                                         tpr->pr_hostid = hid;
1768                         }
1769                 }
1770         }
1771         if ((tallow = ch_allow & ~pr_allow)) {
1772                 /* Clear allow bits in all children. */
1773                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1774                         tpr->pr_allow &= ~tallow;
1775         }
1776         pr->pr_allow = (pr->pr_allow & ~ch_allow) | pr_allow;
1777         /*
1778          * Persistent prisons get an extra reference, and prisons losing their
1779          * persist flag lose that reference.  Only do this for existing prisons
1780          * for now, so new ones will remain unseen until after the module
1781          * handlers have completed.
1782          */
1783         born = pr->pr_uref == 0;
1784         if (!created && (ch_flags & PR_PERSIST & (pr_flags ^ pr->pr_flags))) {
1785                 if (pr_flags & PR_PERSIST) {
1786                         pr->pr_ref++;
1787                         pr->pr_uref++;
1788                 } else {
1789                         pr->pr_ref--;
1790                         pr->pr_uref--;
1791                 }
1792         }
1793         pr->pr_flags = (pr->pr_flags & ~ch_flags) | pr_flags;
1794         mtx_unlock(&pr->pr_mtx);
1795
1796 #ifdef RACCT
1797         if (racct_enable && created)
1798                 prison_racct_attach(pr);
1799 #endif
1800
1801         /* Locks may have prevented a complete restriction of child IP
1802          * addresses.  If so, allocate some more memory and try again.
1803          */
1804 #ifdef INET
1805         while (redo_ip4) {
1806                 ip4s = pr->pr_ip4s;
1807                 ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
1808                 mtx_lock(&pr->pr_mtx);
1809                 redo_ip4 = 0;
1810                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1811 #ifdef VIMAGE
1812                         if (tpr->pr_flags & PR_VNET) {
1813                                 descend = 0;
1814                                 continue;
1815                         }
1816 #endif
1817                         if (prison_restrict_ip4(tpr, ip4)) {
1818                                 if (ip4 != NULL)
1819                                         ip4 = NULL;
1820                                 else
1821                                         redo_ip4 = 1;
1822                         }
1823                 }
1824                 mtx_unlock(&pr->pr_mtx);
1825         }
1826 #endif
1827 #ifdef INET6
1828         while (redo_ip6) {
1829                 ip6s = pr->pr_ip6s;
1830                 ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
1831                 mtx_lock(&pr->pr_mtx);
1832                 redo_ip6 = 0;
1833                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1834 #ifdef VIMAGE
1835                         if (tpr->pr_flags & PR_VNET) {
1836                                 descend = 0;
1837                                 continue;
1838                         }
1839 #endif
1840                         if (prison_restrict_ip6(tpr, ip6)) {
1841                                 if (ip6 != NULL)
1842                                         ip6 = NULL;
1843                                 else
1844                                         redo_ip6 = 1;
1845                         }
1846                 }
1847                 mtx_unlock(&pr->pr_mtx);
1848         }
1849 #endif
1850
1851         /* Let the modules do their work. */
1852         sx_downgrade(&allprison_lock);
1853         if (born) {
1854                 error = osd_jail_call(pr, PR_METHOD_CREATE, opts);
1855                 if (error) {
1856                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1857                         prison_deref(pr, created
1858                             ? PD_LIST_SLOCKED
1859                             : PD_DEREF | PD_LIST_SLOCKED);
1860                         goto done_errmsg;
1861                 }
1862         }
1863         error = osd_jail_call(pr, PR_METHOD_SET, opts);
1864         if (error) {
1865                 if (born)
1866                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1867                 prison_deref(pr, created
1868                     ? PD_LIST_SLOCKED
1869                     : PD_DEREF | PD_LIST_SLOCKED);
1870                 goto done_errmsg;
1871         }
1872
1873         /* Attach this process to the prison if requested. */
1874         if (flags & JAIL_ATTACH) {
1875                 mtx_lock(&pr->pr_mtx);
1876                 error = do_jail_attach(td, pr);
1877                 if (error) {
1878                         vfs_opterror(opts, "attach failed");
1879                         if (!created)
1880                                 prison_deref(pr, PD_DEREF);
1881                         goto done_errmsg;
1882                 }
1883         }
1884
1885 #ifdef RACCT
1886         if (racct_enable && !created) {
1887                 if (!(flags & JAIL_ATTACH))
1888                         sx_sunlock(&allprison_lock);
1889                 prison_racct_modify(pr);
1890                 if (!(flags & JAIL_ATTACH))
1891                         sx_slock(&allprison_lock);
1892         }
1893 #endif
1894
1895         td->td_retval[0] = pr->pr_id;
1896
1897         /*
1898          * Now that it is all there, drop the temporary reference from existing
1899          * prisons.  Or add a reference to newly created persistent prisons
1900          * (which was not done earlier so that the prison would not be publicly
1901          * visible).
1902          */
1903         if (!created) {
1904                 prison_deref(pr, (flags & JAIL_ATTACH)
1905                     ? PD_DEREF
1906                     : PD_DEREF | PD_LIST_SLOCKED);
1907         } else {
1908                 if (pr_flags & PR_PERSIST) {
1909                         mtx_lock(&pr->pr_mtx);
1910                         pr->pr_ref++;
1911                         pr->pr_uref++;
1912                         mtx_unlock(&pr->pr_mtx);
1913                 }
1914                 if (!(flags & JAIL_ATTACH))
1915                         sx_sunlock(&allprison_lock);
1916         }
1917
1918         goto done_free;
1919
1920  done_deref_locked:
1921         prison_deref(pr, created
1922             ? PD_LOCKED | PD_LIST_XLOCKED
1923             : PD_DEREF | PD_LOCKED | PD_LIST_XLOCKED);
1924         goto done_releroot;
1925  done_unlock_list:
1926         sx_xunlock(&allprison_lock);
1927  done_releroot:
1928         if (root != NULL)
1929                 vrele(root);
1930  done_errmsg:
1931         if (error) {
1932                 vfs_getopt(opts, "errmsg", (void **)&errmsg, &errmsg_len);
1933                 if (errmsg_len > 0) {
1934                         errmsg_pos = 2 * vfs_getopt_pos(opts, "errmsg") + 1;
1935                         if (errmsg_pos > 0) {
1936                                 if (optuio->uio_segflg == UIO_SYSSPACE)
1937                                         bcopy(errmsg,
1938                                            optuio->uio_iov[errmsg_pos].iov_base,
1939                                            errmsg_len);
1940                                 else
1941                                         copyout(errmsg,
1942                                            optuio->uio_iov[errmsg_pos].iov_base,
1943                                            errmsg_len);
1944                         }
1945                 }
1946         }
1947  done_free:
1948 #ifdef INET
1949         free(ip4, M_PRISON);
1950 #endif
1951 #ifdef INET6
1952         free(ip6, M_PRISON);
1953 #endif
1954         if (g_path != NULL)
1955                 free(g_path, M_TEMP);
1956         vfs_freeopts(opts);
1957         return (error);
1958 }
1959
1960
1961 /*
1962  * struct jail_get_args {
1963  *      struct iovec *iovp;
1964  *      unsigned int iovcnt;
1965  *      int flags;
1966  * };
1967  */
1968 int
1969 sys_jail_get(struct thread *td, struct jail_get_args *uap)
1970 {
1971         struct uio *auio;
1972         int error;
1973
1974         /* Check that we have an even number of iovecs. */
1975         if (uap->iovcnt & 1)
1976                 return (EINVAL);
1977
1978         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
1979         if (error)
1980                 return (error);
1981         error = kern_jail_get(td, auio, uap->flags);
1982         if (error == 0)
1983                 error = copyout(auio->uio_iov, uap->iovp,
1984                     uap->iovcnt * sizeof (struct iovec));
1985         free(auio, M_IOV);
1986         return (error);
1987 }
1988
1989 int
1990 kern_jail_get(struct thread *td, struct uio *optuio, int flags)
1991 {
1992         struct prison *pr, *mypr;
1993         struct vfsopt *opt;
1994         struct vfsoptlist *opts;
1995         char *errmsg, *name;
1996         int error, errmsg_len, errmsg_pos, fi, i, jid, len, locked, pos;
1997
1998         if (flags & ~JAIL_GET_MASK)
1999                 return (EINVAL);
2000
2001         /* Get the parameter list. */
2002         error = vfs_buildopts(optuio, &opts);
2003         if (error)
2004                 return (error);
2005         errmsg_pos = vfs_getopt_pos(opts, "errmsg");
2006         mypr = td->td_ucred->cr_prison;
2007
2008         /*
2009          * Find the prison specified by one of: lastjid, jid, name.
2010          */
2011         sx_slock(&allprison_lock);
2012         error = vfs_copyopt(opts, "lastjid", &jid, sizeof(jid));
2013         if (error == 0) {
2014                 TAILQ_FOREACH(pr, &allprison, pr_list) {
2015                         if (pr->pr_id > jid && prison_ischild(mypr, pr)) {
2016                                 mtx_lock(&pr->pr_mtx);
2017                                 if (pr->pr_ref > 0 &&
2018                                     (pr->pr_uref > 0 || (flags & JAIL_DYING)))
2019                                         break;
2020                                 mtx_unlock(&pr->pr_mtx);
2021                         }
2022                 }
2023                 if (pr != NULL)
2024                         goto found_prison;
2025                 error = ENOENT;
2026                 vfs_opterror(opts, "no jail after %d", jid);
2027                 goto done_unlock_list;
2028         } else if (error != ENOENT)
2029                 goto done_unlock_list;
2030
2031         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
2032         if (error == 0) {
2033                 if (jid != 0) {
2034                         pr = prison_find_child(mypr, jid);
2035                         if (pr != NULL) {
2036                                 if (pr->pr_uref == 0 && !(flags & JAIL_DYING)) {
2037                                         mtx_unlock(&pr->pr_mtx);
2038                                         error = ENOENT;
2039                                         vfs_opterror(opts, "jail %d is dying",
2040                                             jid);
2041                                         goto done_unlock_list;
2042                                 }
2043                                 goto found_prison;
2044                         }
2045                         error = ENOENT;
2046                         vfs_opterror(opts, "jail %d not found", jid);
2047                         goto done_unlock_list;
2048                 }
2049         } else if (error != ENOENT)
2050                 goto done_unlock_list;
2051
2052         error = vfs_getopt(opts, "name", (void **)&name, &len);
2053         if (error == 0) {
2054                 if (len == 0 || name[len - 1] != '\0') {
2055                         error = EINVAL;
2056                         goto done_unlock_list;
2057                 }
2058                 pr = prison_find_name(mypr, name);
2059                 if (pr != NULL) {
2060                         if (pr->pr_uref == 0 && !(flags & JAIL_DYING)) {
2061                                 mtx_unlock(&pr->pr_mtx);
2062                                 error = ENOENT;
2063                                 vfs_opterror(opts, "jail \"%s\" is dying",
2064                                     name);
2065                                 goto done_unlock_list;
2066                         }
2067                         goto found_prison;
2068                 }
2069                 error = ENOENT;
2070                 vfs_opterror(opts, "jail \"%s\" not found", name);
2071                 goto done_unlock_list;
2072         } else if (error != ENOENT)
2073                 goto done_unlock_list;
2074
2075         vfs_opterror(opts, "no jail specified");
2076         error = ENOENT;
2077         goto done_unlock_list;
2078
2079  found_prison:
2080         /* Get the parameters of the prison. */
2081         pr->pr_ref++;
2082         locked = PD_LOCKED;
2083         td->td_retval[0] = pr->pr_id;
2084         error = vfs_setopt(opts, "jid", &pr->pr_id, sizeof(pr->pr_id));
2085         if (error != 0 && error != ENOENT)
2086                 goto done_deref;
2087         i = (pr->pr_parent == mypr) ? 0 : pr->pr_parent->pr_id;
2088         error = vfs_setopt(opts, "parent", &i, sizeof(i));
2089         if (error != 0 && error != ENOENT)
2090                 goto done_deref;
2091         error = vfs_setopts(opts, "name", prison_name(mypr, pr));
2092         if (error != 0 && error != ENOENT)
2093                 goto done_deref;
2094         error = vfs_setopt(opts, "cpuset.id", &pr->pr_cpuset->cs_id,
2095             sizeof(pr->pr_cpuset->cs_id));
2096         if (error != 0 && error != ENOENT)
2097                 goto done_deref;
2098         error = vfs_setopts(opts, "path", prison_path(mypr, pr));
2099         if (error != 0 && error != ENOENT)
2100                 goto done_deref;
2101 #ifdef INET
2102         error = vfs_setopt_part(opts, "ip4.addr", pr->pr_ip4,
2103             pr->pr_ip4s * sizeof(*pr->pr_ip4));
2104         if (error != 0 && error != ENOENT)
2105                 goto done_deref;
2106 #endif
2107 #ifdef INET6
2108         error = vfs_setopt_part(opts, "ip6.addr", pr->pr_ip6,
2109             pr->pr_ip6s * sizeof(*pr->pr_ip6));
2110         if (error != 0 && error != ENOENT)
2111                 goto done_deref;
2112 #endif
2113         error = vfs_setopt(opts, "securelevel", &pr->pr_securelevel,
2114             sizeof(pr->pr_securelevel));
2115         if (error != 0 && error != ENOENT)
2116                 goto done_deref;
2117         error = vfs_setopt(opts, "children.cur", &pr->pr_childcount,
2118             sizeof(pr->pr_childcount));
2119         if (error != 0 && error != ENOENT)
2120                 goto done_deref;
2121         error = vfs_setopt(opts, "children.max", &pr->pr_childmax,
2122             sizeof(pr->pr_childmax));
2123         if (error != 0 && error != ENOENT)
2124                 goto done_deref;
2125         error = vfs_setopts(opts, "host.hostname", pr->pr_hostname);
2126         if (error != 0 && error != ENOENT)
2127                 goto done_deref;
2128         error = vfs_setopts(opts, "host.domainname", pr->pr_domainname);
2129         if (error != 0 && error != ENOENT)
2130                 goto done_deref;
2131         error = vfs_setopts(opts, "host.hostuuid", pr->pr_hostuuid);
2132         if (error != 0 && error != ENOENT)
2133                 goto done_deref;
2134 #ifdef COMPAT_FREEBSD32
2135         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
2136                 uint32_t hid32 = pr->pr_hostid;
2137
2138                 error = vfs_setopt(opts, "host.hostid", &hid32, sizeof(hid32));
2139         } else
2140 #endif
2141         error = vfs_setopt(opts, "host.hostid", &pr->pr_hostid,
2142             sizeof(pr->pr_hostid));
2143         if (error != 0 && error != ENOENT)
2144                 goto done_deref;
2145         error = vfs_setopt(opts, "enforce_statfs", &pr->pr_enforce_statfs,
2146             sizeof(pr->pr_enforce_statfs));
2147         if (error != 0 && error != ENOENT)
2148                 goto done_deref;
2149         error = vfs_setopt(opts, "devfs_ruleset", &pr->pr_devfs_rsnum,
2150             sizeof(pr->pr_devfs_rsnum));
2151         if (error != 0 && error != ENOENT)
2152                 goto done_deref;
2153         for (fi = 0; fi < nitems(pr_flag_names); fi++) {
2154                 if (pr_flag_names[fi] == NULL)
2155                         continue;
2156                 i = (pr->pr_flags & (1 << fi)) ? 1 : 0;
2157                 error = vfs_setopt(opts, pr_flag_names[fi], &i, sizeof(i));
2158                 if (error != 0 && error != ENOENT)
2159                         goto done_deref;
2160                 i = !i;
2161                 error = vfs_setopt(opts, pr_flag_nonames[fi], &i, sizeof(i));
2162                 if (error != 0 && error != ENOENT)
2163                         goto done_deref;
2164         }
2165         for (fi = 0; fi < nitems(pr_flag_jailsys); fi++) {
2166                 i = pr->pr_flags &
2167                     (pr_flag_jailsys[fi].disable | pr_flag_jailsys[fi].new);
2168                 i = pr_flag_jailsys[fi].disable &&
2169                       (i == pr_flag_jailsys[fi].disable) ? JAIL_SYS_DISABLE
2170                     : (i == pr_flag_jailsys[fi].new) ? JAIL_SYS_NEW
2171                     : JAIL_SYS_INHERIT;
2172                 error =
2173                     vfs_setopt(opts, pr_flag_jailsys[fi].name, &i, sizeof(i));
2174                 if (error != 0 && error != ENOENT)
2175                         goto done_deref;
2176         }
2177         for (fi = 0; fi < nitems(pr_allow_names); fi++) {
2178                 if (pr_allow_names[fi] == NULL)
2179                         continue;
2180                 i = (pr->pr_allow & (1 << fi)) ? 1 : 0;
2181                 error = vfs_setopt(opts, pr_allow_names[fi], &i, sizeof(i));
2182                 if (error != 0 && error != ENOENT)
2183                         goto done_deref;
2184                 i = !i;
2185                 error = vfs_setopt(opts, pr_allow_nonames[fi], &i, sizeof(i));
2186                 if (error != 0 && error != ENOENT)
2187                         goto done_deref;
2188         }
2189         i = (pr->pr_uref == 0);
2190         error = vfs_setopt(opts, "dying", &i, sizeof(i));
2191         if (error != 0 && error != ENOENT)
2192                 goto done_deref;
2193         i = !i;
2194         error = vfs_setopt(opts, "nodying", &i, sizeof(i));
2195         if (error != 0 && error != ENOENT)
2196                 goto done_deref;
2197         error = vfs_setopt(opts, "osreldate", &pr->pr_osreldate,
2198             sizeof(pr->pr_osreldate));
2199         if (error != 0 && error != ENOENT)
2200                 goto done_deref;
2201         error = vfs_setopts(opts, "osrelease", pr->pr_osrelease);
2202         if (error != 0 && error != ENOENT)
2203                 goto done_deref;
2204
2205         /* Get the module parameters. */
2206         mtx_unlock(&pr->pr_mtx);
2207         locked = 0;
2208         error = osd_jail_call(pr, PR_METHOD_GET, opts);
2209         if (error)
2210                 goto done_deref;
2211         prison_deref(pr, PD_DEREF | PD_LIST_SLOCKED);
2212
2213         /* By now, all parameters should have been noted. */
2214         TAILQ_FOREACH(opt, opts, link) {
2215                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
2216                         error = EINVAL;
2217                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
2218                         goto done_errmsg;
2219                 }
2220         }
2221
2222         /* Write the fetched parameters back to userspace. */
2223         error = 0;
2224         TAILQ_FOREACH(opt, opts, link) {
2225                 if (opt->pos >= 0 && opt->pos != errmsg_pos) {
2226                         pos = 2 * opt->pos + 1;
2227                         optuio->uio_iov[pos].iov_len = opt->len;
2228                         if (opt->value != NULL) {
2229                                 if (optuio->uio_segflg == UIO_SYSSPACE) {
2230                                         bcopy(opt->value,
2231                                             optuio->uio_iov[pos].iov_base,
2232                                             opt->len);
2233                                 } else {
2234                                         error = copyout(opt->value,
2235                                             optuio->uio_iov[pos].iov_base,
2236                                             opt->len);
2237                                         if (error)
2238                                                 break;
2239                                 }
2240                         }
2241                 }
2242         }
2243         goto done_errmsg;
2244
2245  done_deref:
2246         prison_deref(pr, locked | PD_DEREF | PD_LIST_SLOCKED);
2247         goto done_errmsg;
2248
2249  done_unlock_list:
2250         sx_sunlock(&allprison_lock);
2251  done_errmsg:
2252         if (error && errmsg_pos >= 0) {
2253                 vfs_getopt(opts, "errmsg", (void **)&errmsg, &errmsg_len);
2254                 errmsg_pos = 2 * errmsg_pos + 1;
2255                 if (errmsg_len > 0) {
2256                         if (optuio->uio_segflg == UIO_SYSSPACE)
2257                                 bcopy(errmsg,
2258                                     optuio->uio_iov[errmsg_pos].iov_base,
2259                                     errmsg_len);
2260                         else
2261                                 copyout(errmsg,
2262                                     optuio->uio_iov[errmsg_pos].iov_base,
2263                                     errmsg_len);
2264                 }
2265         }
2266         vfs_freeopts(opts);
2267         return (error);
2268 }
2269
2270
2271 /*
2272  * struct jail_remove_args {
2273  *      int jid;
2274  * };
2275  */
2276 int
2277 sys_jail_remove(struct thread *td, struct jail_remove_args *uap)
2278 {
2279         struct prison *pr, *cpr, *lpr, *tpr;
2280         int descend, error;
2281
2282         error = priv_check(td, PRIV_JAIL_REMOVE);
2283         if (error)
2284                 return (error);
2285
2286         sx_xlock(&allprison_lock);
2287         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2288         if (pr == NULL) {
2289                 sx_xunlock(&allprison_lock);
2290                 return (EINVAL);
2291         }
2292
2293         /* Remove all descendants of this prison, then remove this prison. */
2294         pr->pr_ref++;
2295         if (!LIST_EMPTY(&pr->pr_children)) {
2296                 mtx_unlock(&pr->pr_mtx);
2297                 lpr = NULL;
2298                 FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
2299                         mtx_lock(&cpr->pr_mtx);
2300                         if (cpr->pr_ref > 0) {
2301                                 tpr = cpr;
2302                                 cpr->pr_ref++;
2303                         } else {
2304                                 /* Already removed - do not do it again. */
2305                                 tpr = NULL;
2306                         }
2307                         mtx_unlock(&cpr->pr_mtx);
2308                         if (lpr != NULL) {
2309                                 mtx_lock(&lpr->pr_mtx);
2310                                 prison_remove_one(lpr);
2311                                 sx_xlock(&allprison_lock);
2312                         }
2313                         lpr = tpr;
2314                 }
2315                 if (lpr != NULL) {
2316                         mtx_lock(&lpr->pr_mtx);
2317                         prison_remove_one(lpr);
2318                         sx_xlock(&allprison_lock);
2319                 }
2320                 mtx_lock(&pr->pr_mtx);
2321         }
2322         prison_remove_one(pr);
2323         return (0);
2324 }
2325
2326 static void
2327 prison_remove_one(struct prison *pr)
2328 {
2329         struct proc *p;
2330         int deuref;
2331
2332         /* If the prison was persistent, it is not anymore. */
2333         deuref = 0;
2334         if (pr->pr_flags & PR_PERSIST) {
2335                 pr->pr_ref--;
2336                 deuref = PD_DEUREF;
2337                 pr->pr_flags &= ~PR_PERSIST;
2338         }
2339
2340         /*
2341          * jail_remove added a reference.  If that's the only one, remove
2342          * the prison now.
2343          */
2344         KASSERT(pr->pr_ref > 0,
2345             ("prison_remove_one removing a dead prison (jid=%d)", pr->pr_id));
2346         if (pr->pr_ref == 1) {
2347                 prison_deref(pr,
2348                     deuref | PD_DEREF | PD_LOCKED | PD_LIST_XLOCKED);
2349                 return;
2350         }
2351
2352         mtx_unlock(&pr->pr_mtx);
2353         sx_xunlock(&allprison_lock);
2354         /*
2355          * Kill all processes unfortunate enough to be attached to this prison.
2356          */
2357         sx_slock(&allproc_lock);
2358         LIST_FOREACH(p, &allproc, p_list) {
2359                 PROC_LOCK(p);
2360                 if (p->p_state != PRS_NEW && p->p_ucred &&
2361                     p->p_ucred->cr_prison == pr)
2362                         kern_psignal(p, SIGKILL);
2363                 PROC_UNLOCK(p);
2364         }
2365         sx_sunlock(&allproc_lock);
2366         /* Remove the temporary reference added by jail_remove. */
2367         prison_deref(pr, deuref | PD_DEREF);
2368 }
2369
2370
2371 /*
2372  * struct jail_attach_args {
2373  *      int jid;
2374  * };
2375  */
2376 int
2377 sys_jail_attach(struct thread *td, struct jail_attach_args *uap)
2378 {
2379         struct prison *pr;
2380         int error;
2381
2382         error = priv_check(td, PRIV_JAIL_ATTACH);
2383         if (error)
2384                 return (error);
2385
2386         /*
2387          * Start with exclusive hold on allprison_lock to ensure that a possible
2388          * PR_METHOD_REMOVE call isn't concurrent with jail_set or jail_remove.
2389          * But then immediately downgrade it since we don't need to stop
2390          * readers.
2391          */
2392         sx_xlock(&allprison_lock);
2393         sx_downgrade(&allprison_lock);
2394         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2395         if (pr == NULL) {
2396                 sx_sunlock(&allprison_lock);
2397                 return (EINVAL);
2398         }
2399
2400         /*
2401          * Do not allow a process to attach to a prison that is not
2402          * considered to be "alive".
2403          */
2404         if (pr->pr_uref == 0) {
2405                 mtx_unlock(&pr->pr_mtx);
2406                 sx_sunlock(&allprison_lock);
2407                 return (EINVAL);
2408         }
2409
2410         return (do_jail_attach(td, pr));
2411 }
2412
2413 static int
2414 do_jail_attach(struct thread *td, struct prison *pr)
2415 {
2416         struct proc *p;
2417         struct ucred *newcred, *oldcred;
2418         int error;
2419
2420         /*
2421          * XXX: Note that there is a slight race here if two threads
2422          * in the same privileged process attempt to attach to two
2423          * different jails at the same time.  It is important for
2424          * user processes not to do this, or they might end up with
2425          * a process root from one prison, but attached to the jail
2426          * of another.
2427          */
2428         pr->pr_ref++;
2429         pr->pr_uref++;
2430         mtx_unlock(&pr->pr_mtx);
2431
2432         /* Let modules do whatever they need to prepare for attaching. */
2433         error = osd_jail_call(pr, PR_METHOD_ATTACH, td);
2434         if (error) {
2435                 prison_deref(pr, PD_DEREF | PD_DEUREF | PD_LIST_SLOCKED);
2436                 return (error);
2437         }
2438         sx_sunlock(&allprison_lock);
2439
2440         /*
2441          * Reparent the newly attached process to this jail.
2442          */
2443         p = td->td_proc;
2444         error = cpuset_setproc_update_set(p, pr->pr_cpuset);
2445         if (error)
2446                 goto e_revert_osd;
2447
2448         vn_lock(pr->pr_root, LK_EXCLUSIVE | LK_RETRY);
2449         if ((error = change_dir(pr->pr_root, td)) != 0)
2450                 goto e_unlock;
2451 #ifdef MAC
2452         if ((error = mac_vnode_check_chroot(td->td_ucred, pr->pr_root)))
2453                 goto e_unlock;
2454 #endif
2455         VOP_UNLOCK(pr->pr_root, 0);
2456         if ((error = pwd_chroot(td, pr->pr_root)))
2457                 goto e_revert_osd;
2458
2459         newcred = crget();
2460         PROC_LOCK(p);
2461         oldcred = crcopysafe(p, newcred);
2462         newcred->cr_prison = pr;
2463         proc_set_cred(p, newcred);
2464         setsugid(p);
2465         PROC_UNLOCK(p);
2466 #ifdef RACCT
2467         racct_proc_ucred_changed(p, oldcred, newcred);
2468 #endif
2469         prison_deref(oldcred->cr_prison, PD_DEREF | PD_DEUREF);
2470         crfree(oldcred);
2471         return (0);
2472
2473  e_unlock:
2474         VOP_UNLOCK(pr->pr_root, 0);
2475  e_revert_osd:
2476         /* Tell modules this thread is still in its old jail after all. */
2477         (void)osd_jail_call(td->td_ucred->cr_prison, PR_METHOD_ATTACH, td);
2478         prison_deref(pr, PD_DEREF | PD_DEUREF);
2479         return (error);
2480 }
2481
2482
2483 /*
2484  * Returns a locked prison instance, or NULL on failure.
2485  */
2486 struct prison *
2487 prison_find(int prid)
2488 {
2489         struct prison *pr;
2490
2491         sx_assert(&allprison_lock, SX_LOCKED);
2492         TAILQ_FOREACH(pr, &allprison, pr_list) {
2493                 if (pr->pr_id == prid) {
2494                         mtx_lock(&pr->pr_mtx);
2495                         if (pr->pr_ref > 0)
2496                                 return (pr);
2497                         mtx_unlock(&pr->pr_mtx);
2498                 }
2499         }
2500         return (NULL);
2501 }
2502
2503 /*
2504  * Find a prison that is a descendant of mypr.  Returns a locked prison or NULL.
2505  */
2506 struct prison *
2507 prison_find_child(struct prison *mypr, int prid)
2508 {
2509         struct prison *pr;
2510         int descend;
2511
2512         sx_assert(&allprison_lock, SX_LOCKED);
2513         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2514                 if (pr->pr_id == prid) {
2515                         mtx_lock(&pr->pr_mtx);
2516                         if (pr->pr_ref > 0)
2517                                 return (pr);
2518                         mtx_unlock(&pr->pr_mtx);
2519                 }
2520         }
2521         return (NULL);
2522 }
2523
2524 /*
2525  * Look for the name relative to mypr.  Returns a locked prison or NULL.
2526  */
2527 struct prison *
2528 prison_find_name(struct prison *mypr, const char *name)
2529 {
2530         struct prison *pr, *deadpr;
2531         size_t mylen;
2532         int descend;
2533
2534         sx_assert(&allprison_lock, SX_LOCKED);
2535         mylen = (mypr == &prison0) ? 0 : strlen(mypr->pr_name) + 1;
2536  again:
2537         deadpr = NULL;
2538         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2539                 if (!strcmp(pr->pr_name + mylen, name)) {
2540                         mtx_lock(&pr->pr_mtx);
2541                         if (pr->pr_ref > 0) {
2542                                 if (pr->pr_uref > 0)
2543                                         return (pr);
2544                                 deadpr = pr;
2545                         }
2546                         mtx_unlock(&pr->pr_mtx);
2547                 }
2548         }
2549         /* There was no valid prison - perhaps there was a dying one. */
2550         if (deadpr != NULL) {
2551                 mtx_lock(&deadpr->pr_mtx);
2552                 if (deadpr->pr_ref == 0) {
2553                         mtx_unlock(&deadpr->pr_mtx);
2554                         goto again;
2555                 }
2556         }
2557         return (deadpr);
2558 }
2559
2560 /*
2561  * See if a prison has the specific flag set.
2562  */
2563 int
2564 prison_flag(struct ucred *cred, unsigned flag)
2565 {
2566
2567         /* This is an atomic read, so no locking is necessary. */
2568         return (cred->cr_prison->pr_flags & flag);
2569 }
2570
2571 int
2572 prison_allow(struct ucred *cred, unsigned flag)
2573 {
2574
2575         /* This is an atomic read, so no locking is necessary. */
2576         return (cred->cr_prison->pr_allow & flag);
2577 }
2578
2579 /*
2580  * Remove a prison reference.  If that was the last reference, remove the
2581  * prison itself - but not in this context in case there are locks held.
2582  */
2583 void
2584 prison_free_locked(struct prison *pr)
2585 {
2586         int ref;
2587
2588         mtx_assert(&pr->pr_mtx, MA_OWNED);
2589         ref = --pr->pr_ref;
2590         mtx_unlock(&pr->pr_mtx);
2591         if (ref == 0)
2592                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2593 }
2594
2595 void
2596 prison_free(struct prison *pr)
2597 {
2598
2599         mtx_lock(&pr->pr_mtx);
2600         prison_free_locked(pr);
2601 }
2602
2603 /*
2604  * Complete a call to either prison_free or prison_proc_free.
2605  */
2606 static void
2607 prison_complete(void *context, int pending)
2608 {
2609         struct prison *pr = context;
2610
2611         sx_xlock(&allprison_lock);
2612         mtx_lock(&pr->pr_mtx);
2613         prison_deref(pr, pr->pr_uref
2614             ? PD_DEREF | PD_DEUREF | PD_LOCKED | PD_LIST_XLOCKED
2615             : PD_LOCKED | PD_LIST_XLOCKED);
2616 }
2617
2618 /*
2619  * Remove a prison reference (usually).  This internal version assumes no
2620  * mutexes are held, except perhaps the prison itself.  If there are no more
2621  * references, release and delist the prison.  On completion, the prison lock
2622  * and the allprison lock are both unlocked.
2623  */
2624 static void
2625 prison_deref(struct prison *pr, int flags)
2626 {
2627         struct prison *ppr, *tpr;
2628         int ref, lasturef;
2629
2630         if (!(flags & PD_LOCKED))
2631                 mtx_lock(&pr->pr_mtx);
2632         for (;;) {
2633                 if (flags & PD_DEUREF) {
2634                         KASSERT(pr->pr_uref > 0,
2635                             ("prison_deref PD_DEUREF on a dead prison (jid=%d)",
2636                              pr->pr_id));
2637                         pr->pr_uref--;
2638                         lasturef = pr->pr_uref == 0;
2639                         if (lasturef)
2640                                 pr->pr_ref++;
2641                         KASSERT(prison0.pr_uref != 0, ("prison0 pr_uref=0"));
2642                 } else
2643                         lasturef = 0;
2644                 if (flags & PD_DEREF) {
2645                         KASSERT(pr->pr_ref > 0,
2646                             ("prison_deref PD_DEREF on a dead prison (jid=%d)",
2647                              pr->pr_id));
2648                         pr->pr_ref--;
2649                 }
2650                 ref = pr->pr_ref;
2651                 mtx_unlock(&pr->pr_mtx);
2652
2653                 /*
2654                  * Tell the modules if the last user reference was removed
2655                  * (even it sticks around in dying state).
2656                  */
2657                 if (lasturef) {
2658                         if (!(flags & (PD_LIST_SLOCKED | PD_LIST_XLOCKED))) {
2659                                 sx_xlock(&allprison_lock);
2660                                 flags |= PD_LIST_XLOCKED;
2661                         }
2662                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
2663                         mtx_lock(&pr->pr_mtx);
2664                         ref = --pr->pr_ref;
2665                         mtx_unlock(&pr->pr_mtx);
2666                 }
2667
2668                 /* If the prison still has references, nothing else to do. */
2669                 if (ref > 0) {
2670                         if (flags & PD_LIST_SLOCKED)
2671                                 sx_sunlock(&allprison_lock);
2672                         else if (flags & PD_LIST_XLOCKED)
2673                                 sx_xunlock(&allprison_lock);
2674                         return;
2675                 }
2676
2677                 if (flags & PD_LIST_SLOCKED) {
2678                         if (!sx_try_upgrade(&allprison_lock)) {
2679                                 sx_sunlock(&allprison_lock);
2680                                 sx_xlock(&allprison_lock);
2681                         }
2682                 } else if (!(flags & PD_LIST_XLOCKED))
2683                         sx_xlock(&allprison_lock);
2684
2685                 TAILQ_REMOVE(&allprison, pr, pr_list);
2686                 LIST_REMOVE(pr, pr_sibling);
2687                 ppr = pr->pr_parent;
2688                 for (tpr = ppr; tpr != NULL; tpr = tpr->pr_parent)
2689                         tpr->pr_childcount--;
2690                 sx_xunlock(&allprison_lock);
2691
2692 #ifdef VIMAGE
2693                 if (pr->pr_vnet != ppr->pr_vnet)
2694                         vnet_destroy(pr->pr_vnet);
2695 #endif
2696                 if (pr->pr_root != NULL)
2697                         vrele(pr->pr_root);
2698                 mtx_destroy(&pr->pr_mtx);
2699 #ifdef INET
2700                 free(pr->pr_ip4, M_PRISON);
2701 #endif
2702 #ifdef INET6
2703                 free(pr->pr_ip6, M_PRISON);
2704 #endif
2705                 if (pr->pr_cpuset != NULL)
2706                         cpuset_rel(pr->pr_cpuset);
2707                 osd_jail_exit(pr);
2708 #ifdef RACCT
2709                 if (racct_enable)
2710                         prison_racct_detach(pr);
2711 #endif
2712                 free(pr, M_PRISON);
2713
2714                 /* Removing a prison frees a reference on its parent. */
2715                 pr = ppr;
2716                 mtx_lock(&pr->pr_mtx);
2717                 flags = PD_DEREF | PD_DEUREF;
2718         }
2719 }
2720
2721 void
2722 prison_hold_locked(struct prison *pr)
2723 {
2724
2725         mtx_assert(&pr->pr_mtx, MA_OWNED);
2726         KASSERT(pr->pr_ref > 0,
2727             ("Trying to hold dead prison (jid=%d).", pr->pr_id));
2728         pr->pr_ref++;
2729 }
2730
2731 void
2732 prison_hold(struct prison *pr)
2733 {
2734
2735         mtx_lock(&pr->pr_mtx);
2736         prison_hold_locked(pr);
2737         mtx_unlock(&pr->pr_mtx);
2738 }
2739
2740 void
2741 prison_proc_hold(struct prison *pr)
2742 {
2743
2744         mtx_lock(&pr->pr_mtx);
2745         KASSERT(pr->pr_uref > 0,
2746             ("Cannot add a process to a non-alive prison (jid=%d)", pr->pr_id));
2747         pr->pr_uref++;
2748         mtx_unlock(&pr->pr_mtx);
2749 }
2750
2751 void
2752 prison_proc_free(struct prison *pr)
2753 {
2754
2755         mtx_lock(&pr->pr_mtx);
2756         KASSERT(pr->pr_uref > 0,
2757             ("Trying to kill a process in a dead prison (jid=%d)", pr->pr_id));
2758         if (pr->pr_uref > 1)
2759                 pr->pr_uref--;
2760         else {
2761                 /*
2762                  * Don't remove the last user reference in this context, which
2763                  * is expected to be a process that is not only locked, but
2764                  * also half dead.
2765                  */
2766                 pr->pr_ref++;
2767                 mtx_unlock(&pr->pr_mtx);
2768                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2769                 return;
2770         }
2771         mtx_unlock(&pr->pr_mtx);
2772 }
2773
2774
2775 #ifdef INET
2776 /*
2777  * Restrict a prison's IP address list with its parent's, possibly replacing
2778  * it.  Return true if the replacement buffer was used (or would have been).
2779  */
2780 static int
2781 prison_restrict_ip4(struct prison *pr, struct in_addr *newip4)
2782 {
2783         int ii, ij, used;
2784         struct prison *ppr;
2785
2786         ppr = pr->pr_parent;
2787         if (!(pr->pr_flags & PR_IP4_USER)) {
2788                 /* This has no user settings, so just copy the parent's list. */
2789                 if (pr->pr_ip4s < ppr->pr_ip4s) {
2790                         /*
2791                          * There's no room for the parent's list.  Use the
2792                          * new list buffer, which is assumed to be big enough
2793                          * (if it was passed).  If there's no buffer, try to
2794                          * allocate one.
2795                          */
2796                         used = 1;
2797                         if (newip4 == NULL) {
2798                                 newip4 = malloc(ppr->pr_ip4s * sizeof(*newip4),
2799                                     M_PRISON, M_NOWAIT);
2800                                 if (newip4 != NULL)
2801                                         used = 0;
2802                         }
2803                         if (newip4 != NULL) {
2804                                 bcopy(ppr->pr_ip4, newip4,
2805                                     ppr->pr_ip4s * sizeof(*newip4));
2806                                 free(pr->pr_ip4, M_PRISON);
2807                                 pr->pr_ip4 = newip4;
2808                                 pr->pr_ip4s = ppr->pr_ip4s;
2809                         }
2810                         return (used);
2811                 }
2812                 pr->pr_ip4s = ppr->pr_ip4s;
2813                 if (pr->pr_ip4s > 0)
2814                         bcopy(ppr->pr_ip4, pr->pr_ip4,
2815                             pr->pr_ip4s * sizeof(*newip4));
2816                 else if (pr->pr_ip4 != NULL) {
2817                         free(pr->pr_ip4, M_PRISON);
2818                         pr->pr_ip4 = NULL;
2819                 }
2820         } else if (pr->pr_ip4s > 0) {
2821                 /* Remove addresses that aren't in the parent. */
2822                 for (ij = 0; ij < ppr->pr_ip4s; ij++)
2823                         if (pr->pr_ip4[0].s_addr == ppr->pr_ip4[ij].s_addr)
2824                                 break;
2825                 if (ij < ppr->pr_ip4s)
2826                         ii = 1;
2827                 else {
2828                         bcopy(pr->pr_ip4 + 1, pr->pr_ip4,
2829                             --pr->pr_ip4s * sizeof(*pr->pr_ip4));
2830                         ii = 0;
2831                 }
2832                 for (ij = 1; ii < pr->pr_ip4s; ) {
2833                         if (pr->pr_ip4[ii].s_addr == ppr->pr_ip4[0].s_addr) {
2834                                 ii++;
2835                                 continue;
2836                         }
2837                         switch (ij >= ppr->pr_ip4s ? -1 :
2838                                 qcmp_v4(&pr->pr_ip4[ii], &ppr->pr_ip4[ij])) {
2839                         case -1:
2840                                 bcopy(pr->pr_ip4 + ii + 1, pr->pr_ip4 + ii,
2841                                     (--pr->pr_ip4s - ii) * sizeof(*pr->pr_ip4));
2842                                 break;
2843                         case 0:
2844                                 ii++;
2845                                 ij++;
2846                                 break;
2847                         case 1:
2848                                 ij++;
2849                                 break;
2850                         }
2851                 }
2852                 if (pr->pr_ip4s == 0) {
2853                         free(pr->pr_ip4, M_PRISON);
2854                         pr->pr_ip4 = NULL;
2855                 }
2856         }
2857         return (0);
2858 }
2859
2860 /*
2861  * Pass back primary IPv4 address of this jail.
2862  *
2863  * If not restricted return success but do not alter the address.  Caller has
2864  * to make sure to initialize it correctly (e.g. INADDR_ANY).
2865  *
2866  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv4.
2867  * Address returned in NBO.
2868  */
2869 int
2870 prison_get_ip4(struct ucred *cred, struct in_addr *ia)
2871 {
2872         struct prison *pr;
2873
2874         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2875         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2876
2877         pr = cred->cr_prison;
2878         if (!(pr->pr_flags & PR_IP4))
2879                 return (0);
2880         mtx_lock(&pr->pr_mtx);
2881         if (!(pr->pr_flags & PR_IP4)) {
2882                 mtx_unlock(&pr->pr_mtx);
2883                 return (0);
2884         }
2885         if (pr->pr_ip4 == NULL) {
2886                 mtx_unlock(&pr->pr_mtx);
2887                 return (EAFNOSUPPORT);
2888         }
2889
2890         ia->s_addr = pr->pr_ip4[0].s_addr;
2891         mtx_unlock(&pr->pr_mtx);
2892         return (0);
2893 }
2894
2895 /*
2896  * Return 1 if we should do proper source address selection or are not jailed.
2897  * We will return 0 if we should bypass source address selection in favour
2898  * of the primary jail IPv4 address. Only in this case *ia will be updated and
2899  * returned in NBO.
2900  * Return EAFNOSUPPORT, in case this jail does not allow IPv4.
2901  */
2902 int
2903 prison_saddrsel_ip4(struct ucred *cred, struct in_addr *ia)
2904 {
2905         struct prison *pr;
2906         struct in_addr lia;
2907         int error;
2908
2909         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2910         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2911
2912         if (!jailed(cred))
2913                 return (1);
2914
2915         pr = cred->cr_prison;
2916         if (pr->pr_flags & PR_IP4_SADDRSEL)
2917                 return (1);
2918
2919         lia.s_addr = INADDR_ANY;
2920         error = prison_get_ip4(cred, &lia);
2921         if (error)
2922                 return (error);
2923         if (lia.s_addr == INADDR_ANY)
2924                 return (1);
2925
2926         ia->s_addr = lia.s_addr;
2927         return (0);
2928 }
2929
2930 /*
2931  * Return true if pr1 and pr2 have the same IPv4 address restrictions.
2932  */
2933 int
2934 prison_equal_ip4(struct prison *pr1, struct prison *pr2)
2935 {
2936
2937         if (pr1 == pr2)
2938                 return (1);
2939
2940         /*
2941          * No need to lock since the PR_IP4_USER flag can't be altered for
2942          * existing prisons.
2943          */
2944         while (pr1 != &prison0 &&
2945 #ifdef VIMAGE
2946                !(pr1->pr_flags & PR_VNET) &&
2947 #endif
2948                !(pr1->pr_flags & PR_IP4_USER))
2949                 pr1 = pr1->pr_parent;
2950         while (pr2 != &prison0 &&
2951 #ifdef VIMAGE
2952                !(pr2->pr_flags & PR_VNET) &&
2953 #endif
2954                !(pr2->pr_flags & PR_IP4_USER))
2955                 pr2 = pr2->pr_parent;
2956         return (pr1 == pr2);
2957 }
2958
2959 /*
2960  * Make sure our (source) address is set to something meaningful to this
2961  * jail.
2962  *
2963  * Returns 0 if jail doesn't restrict IPv4 or if address belongs to jail,
2964  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
2965  * doesn't allow IPv4.  Address passed in in NBO and returned in NBO.
2966  */
2967 int
2968 prison_local_ip4(struct ucred *cred, struct in_addr *ia)
2969 {
2970         struct prison *pr;
2971         struct in_addr ia0;
2972         int error;
2973
2974         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2975         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2976
2977         pr = cred->cr_prison;
2978         if (!(pr->pr_flags & PR_IP4))
2979                 return (0);
2980         mtx_lock(&pr->pr_mtx);
2981         if (!(pr->pr_flags & PR_IP4)) {
2982                 mtx_unlock(&pr->pr_mtx);
2983                 return (0);
2984         }
2985         if (pr->pr_ip4 == NULL) {
2986                 mtx_unlock(&pr->pr_mtx);
2987                 return (EAFNOSUPPORT);
2988         }
2989
2990         ia0.s_addr = ntohl(ia->s_addr);
2991         if (ia0.s_addr == INADDR_LOOPBACK) {
2992                 ia->s_addr = pr->pr_ip4[0].s_addr;
2993                 mtx_unlock(&pr->pr_mtx);
2994                 return (0);
2995         }
2996
2997         if (ia0.s_addr == INADDR_ANY) {
2998                 /*
2999                  * In case there is only 1 IPv4 address, bind directly.
3000                  */
3001                 if (pr->pr_ip4s == 1)
3002                         ia->s_addr = pr->pr_ip4[0].s_addr;
3003                 mtx_unlock(&pr->pr_mtx);
3004                 return (0);
3005         }
3006
3007         error = _prison_check_ip4(pr, ia);
3008         mtx_unlock(&pr->pr_mtx);
3009         return (error);
3010 }
3011
3012 /*
3013  * Rewrite destination address in case we will connect to loopback address.
3014  *
3015  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv4.
3016  * Address passed in in NBO and returned in NBO.
3017  */
3018 int
3019 prison_remote_ip4(struct ucred *cred, struct in_addr *ia)
3020 {
3021         struct prison *pr;
3022
3023         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3024         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
3025
3026         pr = cred->cr_prison;
3027         if (!(pr->pr_flags & PR_IP4))
3028                 return (0);
3029         mtx_lock(&pr->pr_mtx);
3030         if (!(pr->pr_flags & PR_IP4)) {
3031                 mtx_unlock(&pr->pr_mtx);
3032                 return (0);
3033         }
3034         if (pr->pr_ip4 == NULL) {
3035                 mtx_unlock(&pr->pr_mtx);
3036                 return (EAFNOSUPPORT);
3037         }
3038
3039         if (ntohl(ia->s_addr) == INADDR_LOOPBACK) {
3040                 ia->s_addr = pr->pr_ip4[0].s_addr;
3041                 mtx_unlock(&pr->pr_mtx);
3042                 return (0);
3043         }
3044
3045         /*
3046          * Return success because nothing had to be changed.
3047          */
3048         mtx_unlock(&pr->pr_mtx);
3049         return (0);
3050 }
3051
3052 /*
3053  * Check if given address belongs to the jail referenced by cred/prison.
3054  *
3055  * Returns 0 if jail doesn't restrict IPv4 or if address belongs to jail,
3056  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3057  * doesn't allow IPv4.  Address passed in in NBO.
3058  */
3059 static int
3060 _prison_check_ip4(const struct prison *pr, const struct in_addr *ia)
3061 {
3062         int i, a, z, d;
3063
3064         /*
3065          * Check the primary IP.
3066          */
3067         if (pr->pr_ip4[0].s_addr == ia->s_addr)
3068                 return (0);
3069
3070         /*
3071          * All the other IPs are sorted so we can do a binary search.
3072          */
3073         a = 0;
3074         z = pr->pr_ip4s - 2;
3075         while (a <= z) {
3076                 i = (a + z) / 2;
3077                 d = qcmp_v4(&pr->pr_ip4[i+1], ia);
3078                 if (d > 0)
3079                         z = i - 1;
3080                 else if (d < 0)
3081                         a = i + 1;
3082                 else
3083                         return (0);
3084         }
3085
3086         return (EADDRNOTAVAIL);
3087 }
3088
3089 int
3090 prison_check_ip4(const struct ucred *cred, const struct in_addr *ia)
3091 {
3092         struct prison *pr;
3093         int error;
3094
3095         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3096         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
3097
3098         pr = cred->cr_prison;
3099         if (!(pr->pr_flags & PR_IP4))
3100                 return (0);
3101         mtx_lock(&pr->pr_mtx);
3102         if (!(pr->pr_flags & PR_IP4)) {
3103                 mtx_unlock(&pr->pr_mtx);
3104                 return (0);
3105         }
3106         if (pr->pr_ip4 == NULL) {
3107                 mtx_unlock(&pr->pr_mtx);
3108                 return (EAFNOSUPPORT);
3109         }
3110
3111         error = _prison_check_ip4(pr, ia);
3112         mtx_unlock(&pr->pr_mtx);
3113         return (error);
3114 }
3115 #endif
3116
3117 #ifdef INET6
3118 static int
3119 prison_restrict_ip6(struct prison *pr, struct in6_addr *newip6)
3120 {
3121         int ii, ij, used;
3122         struct prison *ppr;
3123
3124         ppr = pr->pr_parent;
3125         if (!(pr->pr_flags & PR_IP6_USER)) {
3126                 /* This has no user settings, so just copy the parent's list. */
3127                 if (pr->pr_ip6s < ppr->pr_ip6s) {
3128                         /*
3129                          * There's no room for the parent's list.  Use the
3130                          * new list buffer, which is assumed to be big enough
3131                          * (if it was passed).  If there's no buffer, try to
3132                          * allocate one.
3133                          */
3134                         used = 1;
3135                         if (newip6 == NULL) {
3136                                 newip6 = malloc(ppr->pr_ip6s * sizeof(*newip6),
3137                                     M_PRISON, M_NOWAIT);
3138                                 if (newip6 != NULL)
3139                                         used = 0;
3140                         }
3141                         if (newip6 != NULL) {
3142                                 bcopy(ppr->pr_ip6, newip6,
3143                                     ppr->pr_ip6s * sizeof(*newip6));
3144                                 free(pr->pr_ip6, M_PRISON);
3145                                 pr->pr_ip6 = newip6;
3146                                 pr->pr_ip6s = ppr->pr_ip6s;
3147                         }
3148                         return (used);
3149                 }
3150                 pr->pr_ip6s = ppr->pr_ip6s;
3151                 if (pr->pr_ip6s > 0)
3152                         bcopy(ppr->pr_ip6, pr->pr_ip6,
3153                             pr->pr_ip6s * sizeof(*newip6));
3154                 else if (pr->pr_ip6 != NULL) {
3155                         free(pr->pr_ip6, M_PRISON);
3156                         pr->pr_ip6 = NULL;
3157                 }
3158         } else if (pr->pr_ip6s > 0) {
3159                 /* Remove addresses that aren't in the parent. */
3160                 for (ij = 0; ij < ppr->pr_ip6s; ij++)
3161                         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[0],
3162                             &ppr->pr_ip6[ij]))
3163                                 break;
3164                 if (ij < ppr->pr_ip6s)
3165                         ii = 1;
3166                 else {
3167                         bcopy(pr->pr_ip6 + 1, pr->pr_ip6,
3168                             --pr->pr_ip6s * sizeof(*pr->pr_ip6));
3169                         ii = 0;
3170                 }
3171                 for (ij = 1; ii < pr->pr_ip6s; ) {
3172                         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[ii],
3173                             &ppr->pr_ip6[0])) {
3174                                 ii++;
3175                                 continue;
3176                         }
3177                         switch (ij >= ppr->pr_ip6s ? -1 :
3178                                 qcmp_v6(&pr->pr_ip6[ii], &ppr->pr_ip6[ij])) {
3179                         case -1:
3180                                 bcopy(pr->pr_ip6 + ii + 1, pr->pr_ip6 + ii,
3181                                     (--pr->pr_ip6s - ii) * sizeof(*pr->pr_ip6));
3182                                 break;
3183                         case 0:
3184                                 ii++;
3185                                 ij++;
3186                                 break;
3187                         case 1:
3188                                 ij++;
3189                                 break;
3190                         }
3191                 }
3192                 if (pr->pr_ip6s == 0) {
3193                         free(pr->pr_ip6, M_PRISON);
3194                         pr->pr_ip6 = NULL;
3195                 }
3196         }
3197         return 0;
3198 }
3199
3200 /*
3201  * Pass back primary IPv6 address for this jail.
3202  *
3203  * If not restricted return success but do not alter the address.  Caller has
3204  * to make sure to initialize it correctly (e.g. IN6ADDR_ANY_INIT).
3205  *
3206  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv6.
3207  */
3208 int
3209 prison_get_ip6(struct ucred *cred, struct in6_addr *ia6)
3210 {
3211         struct prison *pr;
3212
3213         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3214         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3215
3216         pr = cred->cr_prison;
3217         if (!(pr->pr_flags & PR_IP6))
3218                 return (0);
3219         mtx_lock(&pr->pr_mtx);
3220         if (!(pr->pr_flags & PR_IP6)) {
3221                 mtx_unlock(&pr->pr_mtx);
3222                 return (0);
3223         }
3224         if (pr->pr_ip6 == NULL) {
3225                 mtx_unlock(&pr->pr_mtx);
3226                 return (EAFNOSUPPORT);
3227         }
3228
3229         bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3230         mtx_unlock(&pr->pr_mtx);
3231         return (0);
3232 }
3233
3234 /*
3235  * Return 1 if we should do proper source address selection or are not jailed.
3236  * We will return 0 if we should bypass source address selection in favour
3237  * of the primary jail IPv6 address. Only in this case *ia will be updated and
3238  * returned in NBO.
3239  * Return EAFNOSUPPORT, in case this jail does not allow IPv6.
3240  */
3241 int
3242 prison_saddrsel_ip6(struct ucred *cred, struct in6_addr *ia6)
3243 {
3244         struct prison *pr;
3245         struct in6_addr lia6;
3246         int error;
3247
3248         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3249         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3250
3251         if (!jailed(cred))
3252                 return (1);
3253
3254         pr = cred->cr_prison;
3255         if (pr->pr_flags & PR_IP6_SADDRSEL)
3256                 return (1);
3257
3258         lia6 = in6addr_any;
3259         error = prison_get_ip6(cred, &lia6);
3260         if (error)
3261                 return (error);
3262         if (IN6_IS_ADDR_UNSPECIFIED(&lia6))
3263                 return (1);
3264
3265         bcopy(&lia6, ia6, sizeof(struct in6_addr));
3266         return (0);
3267 }
3268
3269 /*
3270  * Return true if pr1 and pr2 have the same IPv6 address restrictions.
3271  */
3272 int
3273 prison_equal_ip6(struct prison *pr1, struct prison *pr2)
3274 {
3275
3276         if (pr1 == pr2)
3277                 return (1);
3278
3279         while (pr1 != &prison0 &&
3280 #ifdef VIMAGE
3281                !(pr1->pr_flags & PR_VNET) &&
3282 #endif
3283                !(pr1->pr_flags & PR_IP6_USER))
3284                 pr1 = pr1->pr_parent;
3285         while (pr2 != &prison0 &&
3286 #ifdef VIMAGE
3287                !(pr2->pr_flags & PR_VNET) &&
3288 #endif
3289                !(pr2->pr_flags & PR_IP6_USER))
3290                 pr2 = pr2->pr_parent;
3291         return (pr1 == pr2);
3292 }
3293
3294 /*
3295  * Make sure our (source) address is set to something meaningful to this jail.
3296  *
3297  * v6only should be set based on (inp->inp_flags & IN6P_IPV6_V6ONLY != 0)
3298  * when needed while binding.
3299  *
3300  * Returns 0 if jail doesn't restrict IPv6 or if address belongs to jail,
3301  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3302  * doesn't allow IPv6.
3303  */
3304 int
3305 prison_local_ip6(struct ucred *cred, struct in6_addr *ia6, int v6only)
3306 {
3307         struct prison *pr;
3308         int error;
3309
3310         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3311         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3312
3313         pr = cred->cr_prison;
3314         if (!(pr->pr_flags & PR_IP6))
3315                 return (0);
3316         mtx_lock(&pr->pr_mtx);
3317         if (!(pr->pr_flags & PR_IP6)) {
3318                 mtx_unlock(&pr->pr_mtx);
3319                 return (0);
3320         }
3321         if (pr->pr_ip6 == NULL) {
3322                 mtx_unlock(&pr->pr_mtx);
3323                 return (EAFNOSUPPORT);
3324         }
3325
3326         if (IN6_IS_ADDR_LOOPBACK(ia6)) {
3327                 bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3328                 mtx_unlock(&pr->pr_mtx);
3329                 return (0);
3330         }
3331
3332         if (IN6_IS_ADDR_UNSPECIFIED(ia6)) {
3333                 /*
3334                  * In case there is only 1 IPv6 address, and v6only is true,
3335                  * then bind directly.
3336                  */
3337                 if (v6only != 0 && pr->pr_ip6s == 1)
3338                         bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3339                 mtx_unlock(&pr->pr_mtx);
3340                 return (0);
3341         }
3342
3343         error = _prison_check_ip6(pr, ia6);
3344         mtx_unlock(&pr->pr_mtx);
3345         return (error);
3346 }
3347
3348 /*
3349  * Rewrite destination address in case we will connect to loopback address.
3350  *
3351  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv6.
3352  */
3353 int
3354 prison_remote_ip6(struct ucred *cred, struct in6_addr *ia6)
3355 {
3356         struct prison *pr;
3357
3358         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3359         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3360
3361         pr = cred->cr_prison;
3362         if (!(pr->pr_flags & PR_IP6))
3363                 return (0);
3364         mtx_lock(&pr->pr_mtx);
3365         if (!(pr->pr_flags & PR_IP6)) {
3366                 mtx_unlock(&pr->pr_mtx);
3367                 return (0);
3368         }
3369         if (pr->pr_ip6 == NULL) {
3370                 mtx_unlock(&pr->pr_mtx);
3371                 return (EAFNOSUPPORT);
3372         }
3373
3374         if (IN6_IS_ADDR_LOOPBACK(ia6)) {
3375                 bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3376                 mtx_unlock(&pr->pr_mtx);
3377                 return (0);
3378         }
3379
3380         /*
3381          * Return success because nothing had to be changed.
3382          */
3383         mtx_unlock(&pr->pr_mtx);
3384         return (0);
3385 }
3386
3387 /*
3388  * Check if given address belongs to the jail referenced by cred/prison.
3389  *
3390  * Returns 0 if jail doesn't restrict IPv6 or if address belongs to jail,
3391  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3392  * doesn't allow IPv6.
3393  */
3394 static int
3395 _prison_check_ip6(struct prison *pr, struct in6_addr *ia6)
3396 {
3397         int i, a, z, d;
3398
3399         /*
3400          * Check the primary IP.
3401          */
3402         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[0], ia6))
3403                 return (0);
3404
3405         /*
3406          * All the other IPs are sorted so we can do a binary search.
3407          */
3408         a = 0;
3409         z = pr->pr_ip6s - 2;
3410         while (a <= z) {
3411                 i = (a + z) / 2;
3412                 d = qcmp_v6(&pr->pr_ip6[i+1], ia6);
3413                 if (d > 0)
3414                         z = i - 1;
3415                 else if (d < 0)
3416                         a = i + 1;
3417                 else
3418                         return (0);
3419         }
3420
3421         return (EADDRNOTAVAIL);
3422 }
3423
3424 int
3425 prison_check_ip6(struct ucred *cred, struct in6_addr *ia6)
3426 {
3427         struct prison *pr;
3428         int error;
3429
3430         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3431         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3432
3433         pr = cred->cr_prison;
3434         if (!(pr->pr_flags & PR_IP6))
3435                 return (0);
3436         mtx_lock(&pr->pr_mtx);
3437         if (!(pr->pr_flags & PR_IP6)) {
3438                 mtx_unlock(&pr->pr_mtx);
3439                 return (0);
3440         }
3441         if (pr->pr_ip6 == NULL) {
3442                 mtx_unlock(&pr->pr_mtx);
3443                 return (EAFNOSUPPORT);
3444         }
3445
3446         error = _prison_check_ip6(pr, ia6);
3447         mtx_unlock(&pr->pr_mtx);
3448         return (error);
3449 }
3450 #endif
3451
3452 /*
3453  * Check if a jail supports the given address family.
3454  *
3455  * Returns 0 if not jailed or the address family is supported, EAFNOSUPPORT
3456  * if not.
3457  */
3458 int
3459 prison_check_af(struct ucred *cred, int af)
3460 {
3461         struct prison *pr;
3462         int error;
3463
3464         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3465
3466         pr = cred->cr_prison;
3467 #ifdef VIMAGE
3468         /* Prisons with their own network stack are not limited. */
3469         if (prison_owns_vnet(cred))
3470                 return (0);
3471 #endif
3472
3473         error = 0;
3474         switch (af)
3475         {
3476 #ifdef INET
3477         case AF_INET:
3478                 if (pr->pr_flags & PR_IP4)
3479                 {
3480                         mtx_lock(&pr->pr_mtx);
3481                         if ((pr->pr_flags & PR_IP4) && pr->pr_ip4 == NULL)
3482                                 error = EAFNOSUPPORT;
3483                         mtx_unlock(&pr->pr_mtx);
3484                 }
3485                 break;
3486 #endif
3487 #ifdef INET6
3488         case AF_INET6:
3489                 if (pr->pr_flags & PR_IP6)
3490                 {
3491                         mtx_lock(&pr->pr_mtx);
3492                         if ((pr->pr_flags & PR_IP6) && pr->pr_ip6 == NULL)
3493                                 error = EAFNOSUPPORT;
3494                         mtx_unlock(&pr->pr_mtx);
3495                 }
3496                 break;
3497 #endif
3498         case AF_LOCAL:
3499         case AF_ROUTE:
3500                 break;
3501         default:
3502                 if (!(pr->pr_allow & PR_ALLOW_SOCKET_AF))
3503                         error = EAFNOSUPPORT;
3504         }
3505         return (error);
3506 }
3507
3508 /*
3509  * Check if given address belongs to the jail referenced by cred (wrapper to
3510  * prison_check_ip[46]).
3511  *
3512  * Returns 0 if jail doesn't restrict the address family or if address belongs
3513  * to jail, EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if
3514  * the jail doesn't allow the address family.  IPv4 Address passed in in NBO.
3515  */
3516 int
3517 prison_if(struct ucred *cred, struct sockaddr *sa)
3518 {
3519 #ifdef INET
3520         struct sockaddr_in *sai;
3521 #endif
3522 #ifdef INET6
3523         struct sockaddr_in6 *sai6;
3524 #endif
3525         int error;
3526
3527         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3528         KASSERT(sa != NULL, ("%s: sa is NULL", __func__));
3529
3530 #ifdef VIMAGE
3531         if (prison_owns_vnet(cred))
3532                 return (0);
3533 #endif
3534
3535         error = 0;
3536         switch (sa->sa_family)
3537         {
3538 #ifdef INET
3539         case AF_INET:
3540                 sai = (struct sockaddr_in *)sa;
3541                 error = prison_check_ip4(cred, &sai->sin_addr);
3542                 break;
3543 #endif
3544 #ifdef INET6
3545         case AF_INET6:
3546                 sai6 = (struct sockaddr_in6 *)sa;
3547                 error = prison_check_ip6(cred, &sai6->sin6_addr);
3548                 break;
3549 #endif
3550         default:
3551                 if (!(cred->cr_prison->pr_allow & PR_ALLOW_SOCKET_AF))
3552                         error = EAFNOSUPPORT;
3553         }
3554         return (error);
3555 }
3556
3557 /*
3558  * Return 0 if jails permit p1 to frob p2, otherwise ESRCH.
3559  */
3560 int
3561 prison_check(struct ucred *cred1, struct ucred *cred2)
3562 {
3563
3564         return ((cred1->cr_prison == cred2->cr_prison ||
3565             prison_ischild(cred1->cr_prison, cred2->cr_prison)) ? 0 : ESRCH);
3566 }
3567
3568 /*
3569  * Return 1 if p2 is a child of p1, otherwise 0.
3570  */
3571 int
3572 prison_ischild(struct prison *pr1, struct prison *pr2)
3573 {
3574
3575         for (pr2 = pr2->pr_parent; pr2 != NULL; pr2 = pr2->pr_parent)
3576                 if (pr1 == pr2)
3577                         return (1);
3578         return (0);
3579 }
3580
3581 /*
3582  * Return 1 if the passed credential is in a jail, otherwise 0.
3583  */
3584 int
3585 jailed(struct ucred *cred)
3586 {
3587
3588         return (cred->cr_prison != &prison0);
3589 }
3590
3591 /*
3592  * Return 1 if the passed credential is in a jail and that jail does not
3593  * have its own virtual network stack, otherwise 0.
3594  */
3595 int
3596 jailed_without_vnet(struct ucred *cred)
3597 {
3598
3599         if (!jailed(cred))
3600                 return (0);
3601 #ifdef VIMAGE
3602         if (prison_owns_vnet(cred))
3603                 return (0);
3604 #endif
3605
3606         return (1);
3607 }
3608
3609 /*
3610  * Return the correct hostname (domainname, et al) for the passed credential.
3611  */
3612 void
3613 getcredhostname(struct ucred *cred, char *buf, size_t size)
3614 {
3615         struct prison *pr;
3616
3617         /*
3618          * A NULL credential can be used to shortcut to the physical
3619          * system's hostname.
3620          */
3621         pr = (cred != NULL) ? cred->cr_prison : &prison0;
3622         mtx_lock(&pr->pr_mtx);
3623         strlcpy(buf, pr->pr_hostname, size);
3624         mtx_unlock(&pr->pr_mtx);
3625 }
3626
3627 void
3628 getcreddomainname(struct ucred *cred, char *buf, size_t size)
3629 {
3630
3631         mtx_lock(&cred->cr_prison->pr_mtx);
3632         strlcpy(buf, cred->cr_prison->pr_domainname, size);
3633         mtx_unlock(&cred->cr_prison->pr_mtx);
3634 }
3635
3636 void
3637 getcredhostuuid(struct ucred *cred, char *buf, size_t size)
3638 {
3639
3640         mtx_lock(&cred->cr_prison->pr_mtx);
3641         strlcpy(buf, cred->cr_prison->pr_hostuuid, size);
3642         mtx_unlock(&cred->cr_prison->pr_mtx);
3643 }
3644
3645 void
3646 getcredhostid(struct ucred *cred, unsigned long *hostid)
3647 {
3648
3649         mtx_lock(&cred->cr_prison->pr_mtx);
3650         *hostid = cred->cr_prison->pr_hostid;
3651         mtx_unlock(&cred->cr_prison->pr_mtx);
3652 }
3653
3654 #ifdef VIMAGE
3655 /*
3656  * Determine whether the prison represented by cred owns
3657  * its vnet rather than having it inherited.
3658  *
3659  * Returns 1 in case the prison owns the vnet, 0 otherwise.
3660  */
3661 int
3662 prison_owns_vnet(struct ucred *cred)
3663 {
3664
3665         /*
3666          * vnets cannot be added/removed after jail creation,
3667          * so no need to lock here.
3668          */
3669         return (cred->cr_prison->pr_flags & PR_VNET ? 1 : 0);
3670 }
3671 #endif
3672
3673 /*
3674  * Determine whether the subject represented by cred can "see"
3675  * status of a mount point.
3676  * Returns: 0 for permitted, ENOENT otherwise.
3677  * XXX: This function should be called cr_canseemount() and should be
3678  *      placed in kern_prot.c.
3679  */
3680 int
3681 prison_canseemount(struct ucred *cred, struct mount *mp)
3682 {
3683         struct prison *pr;
3684         struct statfs *sp;
3685         size_t len;
3686
3687         pr = cred->cr_prison;
3688         if (pr->pr_enforce_statfs == 0)
3689                 return (0);
3690         if (pr->pr_root->v_mount == mp)
3691                 return (0);
3692         if (pr->pr_enforce_statfs == 2)
3693                 return (ENOENT);
3694         /*
3695          * If jail's chroot directory is set to "/" we should be able to see
3696          * all mount-points from inside a jail.
3697          * This is ugly check, but this is the only situation when jail's
3698          * directory ends with '/'.
3699          */
3700         if (strcmp(pr->pr_path, "/") == 0)
3701                 return (0);
3702         len = strlen(pr->pr_path);
3703         sp = &mp->mnt_stat;
3704         if (strncmp(pr->pr_path, sp->f_mntonname, len) != 0)
3705                 return (ENOENT);
3706         /*
3707          * Be sure that we don't have situation where jail's root directory
3708          * is "/some/path" and mount point is "/some/pathpath".
3709          */
3710         if (sp->f_mntonname[len] != '\0' && sp->f_mntonname[len] != '/')
3711                 return (ENOENT);
3712         return (0);
3713 }
3714
3715 void
3716 prison_enforce_statfs(struct ucred *cred, struct mount *mp, struct statfs *sp)
3717 {
3718         char jpath[MAXPATHLEN];
3719         struct prison *pr;
3720         size_t len;
3721
3722         pr = cred->cr_prison;
3723         if (pr->pr_enforce_statfs == 0)
3724                 return;
3725         if (prison_canseemount(cred, mp) != 0) {
3726                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3727                 strlcpy(sp->f_mntonname, "[restricted]",
3728                     sizeof(sp->f_mntonname));
3729                 return;
3730         }
3731         if (pr->pr_root->v_mount == mp) {
3732                 /*
3733                  * Clear current buffer data, so we are sure nothing from
3734                  * the valid path left there.
3735                  */
3736                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3737                 *sp->f_mntonname = '/';
3738                 return;
3739         }
3740         /*
3741          * If jail's chroot directory is set to "/" we should be able to see
3742          * all mount-points from inside a jail.
3743          */
3744         if (strcmp(pr->pr_path, "/") == 0)
3745                 return;
3746         len = strlen(pr->pr_path);
3747         strlcpy(jpath, sp->f_mntonname + len, sizeof(jpath));
3748         /*
3749          * Clear current buffer data, so we are sure nothing from
3750          * the valid path left there.
3751          */
3752         bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3753         if (*jpath == '\0') {
3754                 /* Should never happen. */
3755                 *sp->f_mntonname = '/';
3756         } else {
3757                 strlcpy(sp->f_mntonname, jpath, sizeof(sp->f_mntonname));
3758         }
3759 }
3760
3761 /*
3762  * Check with permission for a specific privilege is granted within jail.  We
3763  * have a specific list of accepted privileges; the rest are denied.
3764  */
3765 int
3766 prison_priv_check(struct ucred *cred, int priv)
3767 {
3768
3769         if (!jailed(cred))
3770                 return (0);
3771
3772 #ifdef VIMAGE
3773         /*
3774          * Privileges specific to prisons with a virtual network stack.
3775          * There might be a duplicate entry here in case the privilege
3776          * is only granted conditionally in the legacy jail case.
3777          */
3778         switch (priv) {
3779 #ifdef notyet
3780                 /*
3781                  * NFS-specific privileges.
3782                  */
3783         case PRIV_NFS_DAEMON:
3784         case PRIV_NFS_LOCKD:
3785 #endif
3786                 /*
3787                  * Network stack privileges.
3788                  */
3789         case PRIV_NET_BRIDGE:
3790         case PRIV_NET_GRE:
3791         case PRIV_NET_BPF:
3792         case PRIV_NET_RAW:              /* Dup, cond. in legacy jail case. */
3793         case PRIV_NET_ROUTE:
3794         case PRIV_NET_TAP:
3795         case PRIV_NET_SETIFMTU:
3796         case PRIV_NET_SETIFFLAGS:
3797         case PRIV_NET_SETIFCAP:
3798         case PRIV_NET_SETIFDESCR:
3799         case PRIV_NET_SETIFNAME :
3800         case PRIV_NET_SETIFMETRIC:
3801         case PRIV_NET_SETIFPHYS:
3802         case PRIV_NET_SETIFMAC:
3803         case PRIV_NET_ADDMULTI:
3804         case PRIV_NET_DELMULTI:
3805         case PRIV_NET_HWIOCTL:
3806         case PRIV_NET_SETLLADDR:
3807         case PRIV_NET_ADDIFGROUP:
3808         case PRIV_NET_DELIFGROUP:
3809         case PRIV_NET_IFCREATE:
3810         case PRIV_NET_IFDESTROY:
3811         case PRIV_NET_ADDIFADDR:
3812         case PRIV_NET_DELIFADDR:
3813         case PRIV_NET_LAGG:
3814         case PRIV_NET_GIF:
3815         case PRIV_NET_SETIFVNET:
3816         case PRIV_NET_SETIFFIB:
3817
3818                 /*
3819                  * 802.11-related privileges.
3820                  */
3821         case PRIV_NET80211_GETKEY:
3822 #ifdef notyet
3823         case PRIV_NET80211_MANAGE:              /* XXX-BZ discuss with sam@ */
3824 #endif
3825
3826 #ifdef notyet
3827                 /*
3828                  * ATM privileges.
3829                  */
3830         case PRIV_NETATM_CFG:
3831         case PRIV_NETATM_ADD:
3832         case PRIV_NETATM_DEL:
3833         case PRIV_NETATM_SET:
3834
3835                 /*
3836                  * Bluetooth privileges.
3837                  */
3838         case PRIV_NETBLUETOOTH_RAW:
3839 #endif
3840
3841                 /*
3842                  * Netgraph and netgraph module privileges.
3843                  */
3844         case PRIV_NETGRAPH_CONTROL:
3845 #ifdef notyet
3846         case PRIV_NETGRAPH_TTY:
3847 #endif
3848
3849                 /*
3850                  * IPv4 and IPv6 privileges.
3851                  */
3852         case PRIV_NETINET_IPFW:
3853         case PRIV_NETINET_DIVERT:
3854         case PRIV_NETINET_PF:
3855         case PRIV_NETINET_DUMMYNET:
3856         case PRIV_NETINET_CARP:
3857         case PRIV_NETINET_MROUTE:
3858         case PRIV_NETINET_RAW:
3859         case PRIV_NETINET_ADDRCTRL6:
3860         case PRIV_NETINET_ND6:
3861         case PRIV_NETINET_SCOPE6:
3862         case PRIV_NETINET_ALIFETIME6:
3863         case PRIV_NETINET_IPSEC:
3864         case PRIV_NETINET_BINDANY:
3865
3866 #ifdef notyet
3867                 /*
3868                  * NCP privileges.
3869                  */
3870         case PRIV_NETNCP:
3871
3872                 /*
3873                  * SMB privileges.
3874                  */
3875         case PRIV_NETSMB:
3876 #endif
3877
3878         /*
3879          * No default: or deny here.
3880          * In case of no permit fall through to next switch().
3881          */
3882                 if (cred->cr_prison->pr_flags & PR_VNET)
3883                         return (0);
3884         }
3885 #endif /* VIMAGE */
3886
3887         switch (priv) {
3888
3889                 /*
3890                  * Allow ktrace privileges for root in jail.
3891                  */
3892         case PRIV_KTRACE:
3893
3894 #if 0
3895                 /*
3896                  * Allow jailed processes to configure audit identity and
3897                  * submit audit records (login, etc).  In the future we may
3898                  * want to further refine the relationship between audit and
3899                  * jail.
3900                  */
3901         case PRIV_AUDIT_GETAUDIT:
3902         case PRIV_AUDIT_SETAUDIT:
3903         case PRIV_AUDIT_SUBMIT:
3904 #endif
3905
3906                 /*
3907                  * Allow jailed processes to manipulate process UNIX
3908                  * credentials in any way they see fit.
3909                  */
3910         case PRIV_CRED_SETUID:
3911         case PRIV_CRED_SETEUID:
3912         case PRIV_CRED_SETGID:
3913         case PRIV_CRED_SETEGID:
3914         case PRIV_CRED_SETGROUPS:
3915         case PRIV_CRED_SETREUID:
3916         case PRIV_CRED_SETREGID:
3917         case PRIV_CRED_SETRESUID:
3918         case PRIV_CRED_SETRESGID:
3919
3920                 /*
3921                  * Jail implements visibility constraints already, so allow
3922                  * jailed root to override uid/gid-based constraints.
3923                  */
3924         case PRIV_SEEOTHERGIDS:
3925         case PRIV_SEEOTHERUIDS:
3926
3927                 /*
3928                  * Jail implements inter-process debugging limits already, so
3929                  * allow jailed root various debugging privileges.
3930                  */
3931         case PRIV_DEBUG_DIFFCRED:
3932         case PRIV_DEBUG_SUGID:
3933         case PRIV_DEBUG_UNPRIV:
3934
3935                 /*
3936                  * Allow jail to set various resource limits and login
3937                  * properties, and for now, exceed process resource limits.
3938                  */
3939         case PRIV_PROC_LIMIT:
3940         case PRIV_PROC_SETLOGIN:
3941         case PRIV_PROC_SETRLIMIT:
3942
3943                 /*
3944                  * System V and POSIX IPC privileges are granted in jail.
3945                  */
3946         case PRIV_IPC_READ:
3947         case PRIV_IPC_WRITE:
3948         case PRIV_IPC_ADMIN:
3949         case PRIV_IPC_MSGSIZE:
3950         case PRIV_MQ_ADMIN:
3951
3952                 /*
3953                  * Jail operations within a jail work on child jails.
3954                  */
3955         case PRIV_JAIL_ATTACH:
3956         case PRIV_JAIL_SET:
3957         case PRIV_JAIL_REMOVE:
3958
3959                 /*
3960                  * Jail implements its own inter-process limits, so allow
3961                  * root processes in jail to change scheduling on other
3962                  * processes in the same jail.  Likewise for signalling.
3963                  */
3964         case PRIV_SCHED_DIFFCRED:
3965         case PRIV_SCHED_CPUSET:
3966         case PRIV_SIGNAL_DIFFCRED:
3967         case PRIV_SIGNAL_SUGID:
3968
3969                 /*
3970                  * Allow jailed processes to write to sysctls marked as jail
3971                  * writable.
3972                  */
3973         case PRIV_SYSCTL_WRITEJAIL:
3974
3975                 /*
3976                  * Allow root in jail to manage a variety of quota
3977                  * properties.  These should likely be conditional on a
3978                  * configuration option.
3979                  */
3980         case PRIV_VFS_GETQUOTA:
3981         case PRIV_VFS_SETQUOTA:
3982
3983                 /*
3984                  * Since Jail relies on chroot() to implement file system
3985                  * protections, grant many VFS privileges to root in jail.
3986                  * Be careful to exclude mount-related and NFS-related
3987                  * privileges.
3988                  */
3989         case PRIV_VFS_READ:
3990         case PRIV_VFS_WRITE:
3991         case PRIV_VFS_ADMIN:
3992         case PRIV_VFS_EXEC:
3993         case PRIV_VFS_LOOKUP:
3994         case PRIV_VFS_BLOCKRESERVE:     /* XXXRW: Slightly surprising. */
3995         case PRIV_VFS_CHFLAGS_DEV:
3996         case PRIV_VFS_CHOWN:
3997         case PRIV_VFS_CHROOT:
3998         case PRIV_VFS_RETAINSUGID:
3999         case PRIV_VFS_FCHROOT:
4000         case PRIV_VFS_LINK:
4001         case PRIV_VFS_SETGID:
4002         case PRIV_VFS_STAT:
4003         case PRIV_VFS_STICKYFILE:
4004
4005                 /*
4006                  * As in the non-jail case, non-root users are expected to be
4007                  * able to read kernel/phyiscal memory (provided /dev/[k]mem
4008                  * exists in the jail and they have permission to access it).
4009                  */
4010         case PRIV_KMEM_READ:
4011                 return (0);
4012
4013                 /*
4014                  * Depending on the global setting, allow privilege of
4015                  * setting system flags.
4016                  */
4017         case PRIV_VFS_SYSFLAGS:
4018                 if (cred->cr_prison->pr_allow & PR_ALLOW_CHFLAGS)
4019                         return (0);
4020                 else
4021                         return (EPERM);
4022
4023                 /*
4024                  * Depending on the global setting, allow privilege of
4025                  * mounting/unmounting file systems.
4026                  */
4027         case PRIV_VFS_MOUNT:
4028         case PRIV_VFS_UNMOUNT:
4029         case PRIV_VFS_MOUNT_NONUSER:
4030         case PRIV_VFS_MOUNT_OWNER:
4031                 if (cred->cr_prison->pr_allow & PR_ALLOW_MOUNT &&
4032                     cred->cr_prison->pr_enforce_statfs < 2)
4033                         return (0);
4034                 else
4035                         return (EPERM);
4036
4037                 /*
4038                  * Allow jailed root to bind reserved ports and reuse in-use
4039                  * ports.
4040                  */
4041         case PRIV_NETINET_RESERVEDPORT:
4042         case PRIV_NETINET_REUSEPORT:
4043                 return (0);
4044
4045                 /*
4046                  * Allow jailed root to set certain IPv4/6 (option) headers.
4047                  */
4048         case PRIV_NETINET_SETHDROPTS:
4049                 return (0);
4050
4051                 /*
4052                  * Conditionally allow creating raw sockets in jail.
4053                  */
4054         case PRIV_NETINET_RAW:
4055                 if (cred->cr_prison->pr_allow & PR_ALLOW_RAW_SOCKETS)
4056                         return (0);
4057                 else
4058                         return (EPERM);
4059
4060                 /*
4061                  * Since jail implements its own visibility limits on netstat
4062                  * sysctls, allow getcred.  This allows identd to work in
4063                  * jail.
4064                  */
4065         case PRIV_NETINET_GETCRED:
4066                 return (0);
4067
4068                 /*
4069                  * Allow jailed root to set loginclass.
4070                  */
4071         case PRIV_PROC_SETLOGINCLASS:
4072                 return (0);
4073
4074         default:
4075                 /*
4076                  * In all remaining cases, deny the privilege request.  This
4077                  * includes almost all network privileges, many system
4078                  * configuration privileges.
4079                  */
4080                 return (EPERM);
4081         }
4082 }
4083
4084 /*
4085  * Return the part of pr2's name that is relative to pr1, or the whole name
4086  * if it does not directly follow.
4087  */
4088
4089 char *
4090 prison_name(struct prison *pr1, struct prison *pr2)
4091 {
4092         char *name;
4093
4094         /* Jails see themselves as "0" (if they see themselves at all). */
4095         if (pr1 == pr2)
4096                 return "0";
4097         name = pr2->pr_name;
4098         if (prison_ischild(pr1, pr2)) {
4099                 /*
4100                  * pr1 isn't locked (and allprison_lock may not be either)
4101                  * so its length can't be counted on.  But the number of dots
4102                  * can be counted on - and counted.
4103                  */
4104                 for (; pr1 != &prison0; pr1 = pr1->pr_parent)
4105                         name = strchr(name, '.') + 1;
4106         }
4107         return (name);
4108 }
4109
4110 /*
4111  * Return the part of pr2's path that is relative to pr1, or the whole path
4112  * if it does not directly follow.
4113  */
4114 static char *
4115 prison_path(struct prison *pr1, struct prison *pr2)
4116 {
4117         char *path1, *path2;
4118         int len1;
4119
4120         path1 = pr1->pr_path;
4121         path2 = pr2->pr_path;
4122         if (!strcmp(path1, "/"))
4123                 return (path2);
4124         len1 = strlen(path1);
4125         if (strncmp(path1, path2, len1))
4126                 return (path2);
4127         if (path2[len1] == '\0')
4128                 return "/";
4129         if (path2[len1] == '/')
4130                 return (path2 + len1);
4131         return (path2);
4132 }
4133
4134
4135 /*
4136  * Jail-related sysctls.
4137  */
4138 static SYSCTL_NODE(_security, OID_AUTO, jail, CTLFLAG_RW, 0,
4139     "Jails");
4140
4141 static int
4142 sysctl_jail_list(SYSCTL_HANDLER_ARGS)
4143 {
4144         struct xprison *xp;
4145         struct prison *pr, *cpr;
4146 #ifdef INET
4147         struct in_addr *ip4 = NULL;
4148         int ip4s = 0;
4149 #endif
4150 #ifdef INET6
4151         struct in6_addr *ip6 = NULL;
4152         int ip6s = 0;
4153 #endif
4154         int descend, error;
4155
4156         xp = malloc(sizeof(*xp), M_TEMP, M_WAITOK);
4157         pr = req->td->td_ucred->cr_prison;
4158         error = 0;
4159         sx_slock(&allprison_lock);
4160         FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
4161 #if defined(INET) || defined(INET6)
4162  again:
4163 #endif
4164                 mtx_lock(&cpr->pr_mtx);
4165 #ifdef INET
4166                 if (cpr->pr_ip4s > 0) {
4167                         if (ip4s < cpr->pr_ip4s) {
4168                                 ip4s = cpr->pr_ip4s;
4169                                 mtx_unlock(&cpr->pr_mtx);
4170                                 ip4 = realloc(ip4, ip4s *
4171                                     sizeof(struct in_addr), M_TEMP, M_WAITOK);
4172                                 goto again;
4173                         }
4174                         bcopy(cpr->pr_ip4, ip4,
4175                             cpr->pr_ip4s * sizeof(struct in_addr));
4176                 }
4177 #endif
4178 #ifdef INET6
4179                 if (cpr->pr_ip6s > 0) {
4180                         if (ip6s < cpr->pr_ip6s) {
4181                                 ip6s = cpr->pr_ip6s;
4182                                 mtx_unlock(&cpr->pr_mtx);
4183                                 ip6 = realloc(ip6, ip6s *
4184                                     sizeof(struct in6_addr), M_TEMP, M_WAITOK);
4185                                 goto again;
4186                         }
4187                         bcopy(cpr->pr_ip6, ip6,
4188                             cpr->pr_ip6s * sizeof(struct in6_addr));
4189                 }
4190 #endif
4191                 if (cpr->pr_ref == 0) {
4192                         mtx_unlock(&cpr->pr_mtx);
4193                         continue;
4194                 }
4195                 bzero(xp, sizeof(*xp));
4196                 xp->pr_version = XPRISON_VERSION;
4197                 xp->pr_id = cpr->pr_id;
4198                 xp->pr_state = cpr->pr_uref > 0
4199                     ? PRISON_STATE_ALIVE : PRISON_STATE_DYING;
4200                 strlcpy(xp->pr_path, prison_path(pr, cpr), sizeof(xp->pr_path));
4201                 strlcpy(xp->pr_host, cpr->pr_hostname, sizeof(xp->pr_host));
4202                 strlcpy(xp->pr_name, prison_name(pr, cpr), sizeof(xp->pr_name));
4203 #ifdef INET
4204                 xp->pr_ip4s = cpr->pr_ip4s;
4205 #endif
4206 #ifdef INET6
4207                 xp->pr_ip6s = cpr->pr_ip6s;
4208 #endif
4209                 mtx_unlock(&cpr->pr_mtx);
4210                 error = SYSCTL_OUT(req, xp, sizeof(*xp));
4211                 if (error)
4212                         break;
4213 #ifdef INET
4214                 if (xp->pr_ip4s > 0) {
4215                         error = SYSCTL_OUT(req, ip4,
4216                             xp->pr_ip4s * sizeof(struct in_addr));
4217                         if (error)
4218                                 break;
4219                 }
4220 #endif
4221 #ifdef INET6
4222                 if (xp->pr_ip6s > 0) {
4223                         error = SYSCTL_OUT(req, ip6,
4224                             xp->pr_ip6s * sizeof(struct in6_addr));
4225                         if (error)
4226                                 break;
4227                 }
4228 #endif
4229         }
4230         sx_sunlock(&allprison_lock);
4231         free(xp, M_TEMP);
4232 #ifdef INET
4233         free(ip4, M_TEMP);
4234 #endif
4235 #ifdef INET6
4236         free(ip6, M_TEMP);
4237 #endif
4238         return (error);
4239 }
4240
4241 SYSCTL_OID(_security_jail, OID_AUTO, list,
4242     CTLTYPE_STRUCT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4243     sysctl_jail_list, "S", "List of active jails");
4244
4245 static int
4246 sysctl_jail_jailed(SYSCTL_HANDLER_ARGS)
4247 {
4248         int error, injail;
4249
4250         injail = jailed(req->td->td_ucred);
4251         error = SYSCTL_OUT(req, &injail, sizeof(injail));
4252
4253         return (error);
4254 }
4255
4256 SYSCTL_PROC(_security_jail, OID_AUTO, jailed,
4257     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4258     sysctl_jail_jailed, "I", "Process in jail?");
4259
4260 static int
4261 sysctl_jail_vnet(SYSCTL_HANDLER_ARGS)
4262 {
4263         int error, havevnet;
4264 #ifdef VIMAGE
4265         struct ucred *cred = req->td->td_ucred;
4266
4267         havevnet = jailed(cred) && prison_owns_vnet(cred);
4268 #else
4269         havevnet = 0;
4270 #endif
4271         error = SYSCTL_OUT(req, &havevnet, sizeof(havevnet));
4272
4273         return (error);
4274 }
4275
4276 SYSCTL_PROC(_security_jail, OID_AUTO, vnet,
4277     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4278     sysctl_jail_vnet, "I", "Jail owns VNET?");
4279
4280 #if defined(INET) || defined(INET6)
4281 SYSCTL_UINT(_security_jail, OID_AUTO, jail_max_af_ips, CTLFLAG_RW,
4282     &jail_max_af_ips, 0,
4283     "Number of IP addresses a jail may have at most per address family (deprecated)");
4284 #endif
4285
4286 /*
4287  * Default parameters for jail(2) compatibility.  For historical reasons,
4288  * the sysctl names have varying similarity to the parameter names.  Prisons
4289  * just see their own parameters, and can't change them.
4290  */
4291 static int
4292 sysctl_jail_default_allow(SYSCTL_HANDLER_ARGS)
4293 {
4294         struct prison *pr;
4295         int allow, error, i;
4296
4297         pr = req->td->td_ucred->cr_prison;
4298         allow = (pr == &prison0) ? jail_default_allow : pr->pr_allow;
4299
4300         /* Get the current flag value, and convert it to a boolean. */
4301         i = (allow & arg2) ? 1 : 0;
4302         if (arg1 != NULL)
4303                 i = !i;
4304         error = sysctl_handle_int(oidp, &i, 0, req);
4305         if (error || !req->newptr)
4306                 return (error);
4307         i = i ? arg2 : 0;
4308         if (arg1 != NULL)
4309                 i ^= arg2;
4310         /*
4311          * The sysctls don't have CTLFLAGS_PRISON, so assume prison0
4312          * for writing.
4313          */
4314         mtx_lock(&prison0.pr_mtx);
4315         jail_default_allow = (jail_default_allow & ~arg2) | i;
4316         mtx_unlock(&prison0.pr_mtx);
4317         return (0);
4318 }
4319
4320 SYSCTL_PROC(_security_jail, OID_AUTO, set_hostname_allowed,
4321     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4322     NULL, PR_ALLOW_SET_HOSTNAME, sysctl_jail_default_allow, "I",
4323     "Processes in jail can set their hostnames (deprecated)");
4324 SYSCTL_PROC(_security_jail, OID_AUTO, socket_unixiproute_only,
4325     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4326     (void *)1, PR_ALLOW_SOCKET_AF, sysctl_jail_default_allow, "I",
4327     "Processes in jail are limited to creating UNIX/IP/route sockets only (deprecated)");
4328 SYSCTL_PROC(_security_jail, OID_AUTO, sysvipc_allowed,
4329     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4330     NULL, PR_ALLOW_SYSVIPC, sysctl_jail_default_allow, "I",
4331     "Processes in jail can use System V IPC primitives (deprecated)");
4332 SYSCTL_PROC(_security_jail, OID_AUTO, allow_raw_sockets,
4333     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4334     NULL, PR_ALLOW_RAW_SOCKETS, sysctl_jail_default_allow, "I",
4335     "Prison root can create raw sockets (deprecated)");
4336 SYSCTL_PROC(_security_jail, OID_AUTO, chflags_allowed,
4337     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4338     NULL, PR_ALLOW_CHFLAGS, sysctl_jail_default_allow, "I",
4339     "Processes in jail can alter system file flags (deprecated)");
4340 SYSCTL_PROC(_security_jail, OID_AUTO, mount_allowed,
4341     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4342     NULL, PR_ALLOW_MOUNT, sysctl_jail_default_allow, "I",
4343     "Processes in jail can mount/unmount jail-friendly file systems (deprecated)");
4344 SYSCTL_PROC(_security_jail, OID_AUTO, mount_devfs_allowed,
4345     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4346     NULL, PR_ALLOW_MOUNT_DEVFS, sysctl_jail_default_allow, "I",
4347     "Processes in jail can mount the devfs file system (deprecated)");
4348 SYSCTL_PROC(_security_jail, OID_AUTO, mount_fdescfs_allowed,
4349     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4350     NULL, PR_ALLOW_MOUNT_FDESCFS, sysctl_jail_default_allow, "I",
4351     "Processes in jail can mount the fdescfs file system (deprecated)");
4352 SYSCTL_PROC(_security_jail, OID_AUTO, mount_nullfs_allowed,
4353     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4354     NULL, PR_ALLOW_MOUNT_NULLFS, sysctl_jail_default_allow, "I",
4355     "Processes in jail can mount the nullfs file system (deprecated)");
4356 SYSCTL_PROC(_security_jail, OID_AUTO, mount_procfs_allowed,
4357     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4358     NULL, PR_ALLOW_MOUNT_PROCFS, sysctl_jail_default_allow, "I",
4359     "Processes in jail can mount the procfs file system (deprecated)");
4360 SYSCTL_PROC(_security_jail, OID_AUTO, mount_linprocfs_allowed,
4361     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4362     NULL, PR_ALLOW_MOUNT_LINPROCFS, sysctl_jail_default_allow, "I",
4363     "Processes in jail can mount the linprocfs file system (deprecated)");
4364 SYSCTL_PROC(_security_jail, OID_AUTO, mount_linsysfs_allowed,
4365     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4366     NULL, PR_ALLOW_MOUNT_LINSYSFS, sysctl_jail_default_allow, "I",
4367     "Processes in jail can mount the linsysfs file system (deprecated)");
4368 SYSCTL_PROC(_security_jail, OID_AUTO, mount_tmpfs_allowed,
4369     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4370     NULL, PR_ALLOW_MOUNT_TMPFS, sysctl_jail_default_allow, "I",
4371     "Processes in jail can mount the tmpfs file system (deprecated)");
4372 SYSCTL_PROC(_security_jail, OID_AUTO, mount_zfs_allowed,
4373     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4374     NULL, PR_ALLOW_MOUNT_ZFS, sysctl_jail_default_allow, "I",
4375     "Processes in jail can mount the zfs file system (deprecated)");
4376
4377 static int
4378 sysctl_jail_default_level(SYSCTL_HANDLER_ARGS)
4379 {
4380         struct prison *pr;
4381         int level, error;
4382
4383         pr = req->td->td_ucred->cr_prison;
4384         level = (pr == &prison0) ? *(int *)arg1 : *(int *)((char *)pr + arg2);
4385         error = sysctl_handle_int(oidp, &level, 0, req);
4386         if (error || !req->newptr)
4387                 return (error);
4388         *(int *)arg1 = level;
4389         return (0);
4390 }
4391
4392 SYSCTL_PROC(_security_jail, OID_AUTO, enforce_statfs,
4393     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4394     &jail_default_enforce_statfs, offsetof(struct prison, pr_enforce_statfs),
4395     sysctl_jail_default_level, "I",
4396     "Processes in jail cannot see all mounted file systems (deprecated)");
4397
4398 SYSCTL_PROC(_security_jail, OID_AUTO, devfs_ruleset,
4399     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE,
4400     &jail_default_devfs_rsnum, offsetof(struct prison, pr_devfs_rsnum),
4401     sysctl_jail_default_level, "I",
4402     "Ruleset for the devfs filesystem in jail (deprecated)");
4403
4404 /*
4405  * Nodes to describe jail parameters.  Maximum length of string parameters
4406  * is returned in the string itself, and the other parameters exist merely
4407  * to make themselves and their types known.
4408  */
4409 SYSCTL_NODE(_security_jail, OID_AUTO, param, CTLFLAG_RW, 0,
4410     "Jail parameters");
4411
4412 int
4413 sysctl_jail_param(SYSCTL_HANDLER_ARGS)
4414 {
4415         int i;
4416         long l;
4417         size_t s;
4418         char numbuf[12];
4419
4420         switch (oidp->oid_kind & CTLTYPE)
4421         {
4422         case CTLTYPE_LONG:
4423         case CTLTYPE_ULONG:
4424                 l = 0;
4425 #ifdef SCTL_MASK32
4426                 if (!(req->flags & SCTL_MASK32))
4427 #endif
4428                         return (SYSCTL_OUT(req, &l, sizeof(l)));
4429         case CTLTYPE_INT:
4430         case CTLTYPE_UINT:
4431                 i = 0;
4432                 return (SYSCTL_OUT(req, &i, sizeof(i)));
4433         case CTLTYPE_STRING:
4434                 snprintf(numbuf, sizeof(numbuf), "%jd", (intmax_t)arg2);
4435                 return
4436                     (sysctl_handle_string(oidp, numbuf, sizeof(numbuf), req));
4437         case CTLTYPE_STRUCT:
4438                 s = (size_t)arg2;
4439                 return (SYSCTL_OUT(req, &s, sizeof(s)));
4440         }
4441         return (0);
4442 }
4443
4444 /*
4445  * CTLFLAG_RDTUN in the following indicates jail parameters that can be set at
4446  * jail creation time but cannot be changed in an existing jail.
4447  */
4448 SYSCTL_JAIL_PARAM(, jid, CTLTYPE_INT | CTLFLAG_RDTUN, "I", "Jail ID");
4449 SYSCTL_JAIL_PARAM(, parent, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail parent ID");
4450 SYSCTL_JAIL_PARAM_STRING(, name, CTLFLAG_RW, MAXHOSTNAMELEN, "Jail name");
4451 SYSCTL_JAIL_PARAM_STRING(, path, CTLFLAG_RDTUN, MAXPATHLEN, "Jail root path");
4452 SYSCTL_JAIL_PARAM(, securelevel, CTLTYPE_INT | CTLFLAG_RW,
4453     "I", "Jail secure level");
4454 SYSCTL_JAIL_PARAM(, osreldate, CTLTYPE_INT | CTLFLAG_RDTUN, "I",
4455     "Jail value for kern.osreldate and uname -K");
4456 SYSCTL_JAIL_PARAM_STRING(, osrelease, CTLFLAG_RDTUN, OSRELEASELEN,
4457     "Jail value for kern.osrelease and uname -r");
4458 SYSCTL_JAIL_PARAM(, enforce_statfs, CTLTYPE_INT | CTLFLAG_RW,
4459     "I", "Jail cannot see all mounted file systems");
4460 SYSCTL_JAIL_PARAM(, devfs_ruleset, CTLTYPE_INT | CTLFLAG_RW,
4461     "I", "Ruleset for in-jail devfs mounts");
4462 SYSCTL_JAIL_PARAM(, persist, CTLTYPE_INT | CTLFLAG_RW,
4463     "B", "Jail persistence");
4464 #ifdef VIMAGE
4465 SYSCTL_JAIL_PARAM(, vnet, CTLTYPE_INT | CTLFLAG_RDTUN,
4466     "E,jailsys", "Virtual network stack");
4467 #endif
4468 SYSCTL_JAIL_PARAM(, dying, CTLTYPE_INT | CTLFLAG_RD,
4469     "B", "Jail is in the process of shutting down");
4470
4471 SYSCTL_JAIL_PARAM_NODE(children, "Number of child jails");
4472 SYSCTL_JAIL_PARAM(_children, cur, CTLTYPE_INT | CTLFLAG_RD,
4473     "I", "Current number of child jails");
4474 SYSCTL_JAIL_PARAM(_children, max, CTLTYPE_INT | CTLFLAG_RW,
4475     "I", "Maximum number of child jails");
4476
4477 SYSCTL_JAIL_PARAM_SYS_NODE(host, CTLFLAG_RW, "Jail host info");
4478 SYSCTL_JAIL_PARAM_STRING(_host, hostname, CTLFLAG_RW, MAXHOSTNAMELEN,
4479     "Jail hostname");
4480 SYSCTL_JAIL_PARAM_STRING(_host, domainname, CTLFLAG_RW, MAXHOSTNAMELEN,
4481     "Jail NIS domainname");
4482 SYSCTL_JAIL_PARAM_STRING(_host, hostuuid, CTLFLAG_RW, HOSTUUIDLEN,
4483     "Jail host UUID");
4484 SYSCTL_JAIL_PARAM(_host, hostid, CTLTYPE_ULONG | CTLFLAG_RW,
4485     "LU", "Jail host ID");
4486
4487 SYSCTL_JAIL_PARAM_NODE(cpuset, "Jail cpuset");
4488 SYSCTL_JAIL_PARAM(_cpuset, id, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail cpuset ID");
4489
4490 #ifdef INET
4491 SYSCTL_JAIL_PARAM_SYS_NODE(ip4, CTLFLAG_RDTUN,
4492     "Jail IPv4 address virtualization");
4493 SYSCTL_JAIL_PARAM_STRUCT(_ip4, addr, CTLFLAG_RW, sizeof(struct in_addr),
4494     "S,in_addr,a", "Jail IPv4 addresses");
4495 SYSCTL_JAIL_PARAM(_ip4, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4496     "B", "Do (not) use IPv4 source address selection rather than the "
4497     "primary jail IPv4 address.");
4498 #endif
4499 #ifdef INET6
4500 SYSCTL_JAIL_PARAM_SYS_NODE(ip6, CTLFLAG_RDTUN,
4501     "Jail IPv6 address virtualization");
4502 SYSCTL_JAIL_PARAM_STRUCT(_ip6, addr, CTLFLAG_RW, sizeof(struct in6_addr),
4503     "S,in6_addr,a", "Jail IPv6 addresses");
4504 SYSCTL_JAIL_PARAM(_ip6, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4505     "B", "Do (not) use IPv6 source address selection rather than the "
4506     "primary jail IPv6 address.");
4507 #endif
4508
4509 SYSCTL_JAIL_PARAM_NODE(allow, "Jail permission flags");
4510 SYSCTL_JAIL_PARAM(_allow, set_hostname, CTLTYPE_INT | CTLFLAG_RW,
4511     "B", "Jail may set hostname");
4512 SYSCTL_JAIL_PARAM(_allow, sysvipc, CTLTYPE_INT | CTLFLAG_RW,
4513     "B", "Jail may use SYSV IPC");
4514 SYSCTL_JAIL_PARAM(_allow, raw_sockets, CTLTYPE_INT | CTLFLAG_RW,
4515     "B", "Jail may create raw sockets");
4516 SYSCTL_JAIL_PARAM(_allow, chflags, CTLTYPE_INT | CTLFLAG_RW,
4517     "B", "Jail may alter system file flags");
4518 SYSCTL_JAIL_PARAM(_allow, quotas, CTLTYPE_INT | CTLFLAG_RW,
4519     "B", "Jail may set file quotas");
4520 SYSCTL_JAIL_PARAM(_allow, socket_af, CTLTYPE_INT | CTLFLAG_RW,
4521     "B", "Jail may create sockets other than just UNIX/IPv4/IPv6/route");
4522
4523 SYSCTL_JAIL_PARAM_SUBNODE(allow, mount, "Jail mount/unmount permission flags");
4524 SYSCTL_JAIL_PARAM(_allow_mount, , CTLTYPE_INT | CTLFLAG_RW,
4525     "B", "Jail may mount/unmount jail-friendly file systems in general");
4526 SYSCTL_JAIL_PARAM(_allow_mount, devfs, CTLTYPE_INT | CTLFLAG_RW,
4527     "B", "Jail may mount the devfs file system");
4528 SYSCTL_JAIL_PARAM(_allow_mount, fdescfs, CTLTYPE_INT | CTLFLAG_RW,
4529     "B", "Jail may mount the fdescfs file system");
4530 SYSCTL_JAIL_PARAM(_allow_mount, nullfs, CTLTYPE_INT | CTLFLAG_RW,
4531     "B", "Jail may mount the nullfs file system");
4532 SYSCTL_JAIL_PARAM(_allow_mount, procfs, CTLTYPE_INT | CTLFLAG_RW,
4533     "B", "Jail may mount the procfs file system");
4534 SYSCTL_JAIL_PARAM(_allow_mount, linprocfs, CTLTYPE_INT | CTLFLAG_RW,
4535     "B", "Jail may mount the linprocfs file system");
4536 SYSCTL_JAIL_PARAM(_allow_mount, linsysfs, CTLTYPE_INT | CTLFLAG_RW,
4537     "B", "Jail may mount the linsysfs file system");
4538 SYSCTL_JAIL_PARAM(_allow_mount, tmpfs, CTLTYPE_INT | CTLFLAG_RW,
4539     "B", "Jail may mount the tmpfs file system");
4540 SYSCTL_JAIL_PARAM(_allow_mount, zfs, CTLTYPE_INT | CTLFLAG_RW,
4541     "B", "Jail may mount the zfs file system");
4542
4543 #ifdef RACCT
4544 void
4545 prison_racct_foreach(void (*callback)(struct racct *racct,
4546     void *arg2, void *arg3), void (*pre)(void), void (*post)(void),
4547     void *arg2, void *arg3)
4548 {
4549         struct prison_racct *prr;
4550
4551         ASSERT_RACCT_ENABLED();
4552
4553         sx_slock(&allprison_lock);
4554         if (pre != NULL)
4555                 (pre)();
4556         LIST_FOREACH(prr, &allprison_racct, prr_next)
4557                 (callback)(prr->prr_racct, arg2, arg3);
4558         if (post != NULL)
4559                 (post)();
4560         sx_sunlock(&allprison_lock);
4561 }
4562
4563 static struct prison_racct *
4564 prison_racct_find_locked(const char *name)
4565 {
4566         struct prison_racct *prr;
4567
4568         ASSERT_RACCT_ENABLED();
4569         sx_assert(&allprison_lock, SA_XLOCKED);
4570
4571         if (name[0] == '\0' || strlen(name) >= MAXHOSTNAMELEN)
4572                 return (NULL);
4573
4574         LIST_FOREACH(prr, &allprison_racct, prr_next) {
4575                 if (strcmp(name, prr->prr_name) != 0)
4576                         continue;
4577
4578                 /* Found prison_racct with a matching name? */
4579                 prison_racct_hold(prr);
4580                 return (prr);
4581         }
4582
4583         /* Add new prison_racct. */
4584         prr = malloc(sizeof(*prr), M_PRISON_RACCT, M_ZERO | M_WAITOK);
4585         racct_create(&prr->prr_racct);
4586
4587         strcpy(prr->prr_name, name);
4588         refcount_init(&prr->prr_refcount, 1);
4589         LIST_INSERT_HEAD(&allprison_racct, prr, prr_next);
4590
4591         return (prr);
4592 }
4593
4594 struct prison_racct *
4595 prison_racct_find(const char *name)
4596 {
4597         struct prison_racct *prr;
4598
4599         ASSERT_RACCT_ENABLED();
4600
4601         sx_xlock(&allprison_lock);
4602         prr = prison_racct_find_locked(name);
4603         sx_xunlock(&allprison_lock);
4604         return (prr);
4605 }
4606
4607 void
4608 prison_racct_hold(struct prison_racct *prr)
4609 {
4610
4611         ASSERT_RACCT_ENABLED();
4612
4613         refcount_acquire(&prr->prr_refcount);
4614 }
4615
4616 static void
4617 prison_racct_free_locked(struct prison_racct *prr)
4618 {
4619
4620         ASSERT_RACCT_ENABLED();
4621         sx_assert(&allprison_lock, SA_XLOCKED);
4622
4623         if (refcount_release(&prr->prr_refcount)) {
4624                 racct_destroy(&prr->prr_racct);
4625                 LIST_REMOVE(prr, prr_next);
4626                 free(prr, M_PRISON_RACCT);
4627         }
4628 }
4629
4630 void
4631 prison_racct_free(struct prison_racct *prr)
4632 {
4633         int old;
4634
4635         ASSERT_RACCT_ENABLED();
4636         sx_assert(&allprison_lock, SA_UNLOCKED);
4637
4638         old = prr->prr_refcount;
4639         if (old > 1 && atomic_cmpset_int(&prr->prr_refcount, old, old - 1))
4640                 return;
4641
4642         sx_xlock(&allprison_lock);
4643         prison_racct_free_locked(prr);
4644         sx_xunlock(&allprison_lock);
4645 }
4646
4647 static void
4648 prison_racct_attach(struct prison *pr)
4649 {
4650         struct prison_racct *prr;
4651
4652         ASSERT_RACCT_ENABLED();
4653         sx_assert(&allprison_lock, SA_XLOCKED);
4654
4655         prr = prison_racct_find_locked(pr->pr_name);
4656         KASSERT(prr != NULL, ("cannot find prison_racct"));
4657
4658         pr->pr_prison_racct = prr;
4659 }
4660
4661 /*
4662  * Handle jail renaming.  From the racct point of view, renaming means
4663  * moving from one prison_racct to another.
4664  */
4665 static void
4666 prison_racct_modify(struct prison *pr)
4667 {
4668         struct proc *p;
4669         struct ucred *cred;
4670         struct prison_racct *oldprr;
4671
4672         ASSERT_RACCT_ENABLED();
4673
4674         sx_slock(&allproc_lock);
4675         sx_xlock(&allprison_lock);
4676
4677         if (strcmp(pr->pr_name, pr->pr_prison_racct->prr_name) == 0) {
4678                 sx_xunlock(&allprison_lock);
4679                 sx_sunlock(&allproc_lock);
4680                 return;
4681         }
4682
4683         oldprr = pr->pr_prison_racct;
4684         pr->pr_prison_racct = NULL;
4685
4686         prison_racct_attach(pr);
4687
4688         /*
4689          * Move resource utilisation records.
4690          */
4691         racct_move(pr->pr_prison_racct->prr_racct, oldprr->prr_racct);
4692
4693         /*
4694          * Force rctl to reattach rules to processes.
4695          */
4696         FOREACH_PROC_IN_SYSTEM(p) {
4697                 PROC_LOCK(p);
4698                 cred = crhold(p->p_ucred);
4699                 PROC_UNLOCK(p);
4700                 racct_proc_ucred_changed(p, cred, cred);
4701                 crfree(cred);
4702         }
4703
4704         sx_sunlock(&allproc_lock);
4705         prison_racct_free_locked(oldprr);
4706         sx_xunlock(&allprison_lock);
4707 }
4708
4709 static void
4710 prison_racct_detach(struct prison *pr)
4711 {
4712
4713         ASSERT_RACCT_ENABLED();
4714         sx_assert(&allprison_lock, SA_UNLOCKED);
4715
4716         if (pr->pr_prison_racct == NULL)
4717                 return;
4718         prison_racct_free(pr->pr_prison_racct);
4719         pr->pr_prison_racct = NULL;
4720 }
4721 #endif /* RACCT */
4722
4723 #ifdef DDB
4724
4725 static void
4726 db_show_prison(struct prison *pr)
4727 {
4728         int fi;
4729 #if defined(INET) || defined(INET6)
4730         int ii;
4731 #endif
4732         unsigned jsf;
4733 #ifdef INET6
4734         char ip6buf[INET6_ADDRSTRLEN];
4735 #endif
4736
4737         db_printf("prison %p:\n", pr);
4738         db_printf(" jid             = %d\n", pr->pr_id);
4739         db_printf(" name            = %s\n", pr->pr_name);
4740         db_printf(" parent          = %p\n", pr->pr_parent);
4741         db_printf(" ref             = %d\n", pr->pr_ref);
4742         db_printf(" uref            = %d\n", pr->pr_uref);
4743         db_printf(" path            = %s\n", pr->pr_path);
4744         db_printf(" cpuset          = %d\n", pr->pr_cpuset
4745             ? pr->pr_cpuset->cs_id : -1);
4746 #ifdef VIMAGE
4747         db_printf(" vnet            = %p\n", pr->pr_vnet);
4748 #endif
4749         db_printf(" root            = %p\n", pr->pr_root);
4750         db_printf(" securelevel     = %d\n", pr->pr_securelevel);
4751         db_printf(" devfs_rsnum     = %d\n", pr->pr_devfs_rsnum);
4752         db_printf(" children.max    = %d\n", pr->pr_childmax);
4753         db_printf(" children.cur    = %d\n", pr->pr_childcount);
4754         db_printf(" child           = %p\n", LIST_FIRST(&pr->pr_children));
4755         db_printf(" sibling         = %p\n", LIST_NEXT(pr, pr_sibling));
4756         db_printf(" flags           = 0x%x", pr->pr_flags);
4757         for (fi = 0; fi < nitems(pr_flag_names); fi++)
4758                 if (pr_flag_names[fi] != NULL && (pr->pr_flags & (1 << fi)))
4759                         db_printf(" %s", pr_flag_names[fi]);
4760         for (fi = 0; fi < nitems(pr_flag_jailsys); fi++) {
4761                 jsf = pr->pr_flags &
4762                     (pr_flag_jailsys[fi].disable | pr_flag_jailsys[fi].new);
4763                 db_printf(" %-16s= %s\n", pr_flag_jailsys[fi].name,
4764                     pr_flag_jailsys[fi].disable &&
4765                       (jsf == pr_flag_jailsys[fi].disable) ? "disable"
4766                     : (jsf == pr_flag_jailsys[fi].new) ? "new"
4767                     : "inherit");
4768         }
4769         db_printf(" allow           = 0x%x", pr->pr_allow);
4770         for (fi = 0; fi < nitems(pr_allow_names); fi++)
4771                 if (pr_allow_names[fi] != NULL && (pr->pr_allow & (1 << fi)))
4772                         db_printf(" %s", pr_allow_names[fi]);
4773         db_printf("\n");
4774         db_printf(" enforce_statfs  = %d\n", pr->pr_enforce_statfs);
4775         db_printf(" host.hostname   = %s\n", pr->pr_hostname);
4776         db_printf(" host.domainname = %s\n", pr->pr_domainname);
4777         db_printf(" host.hostuuid   = %s\n", pr->pr_hostuuid);
4778         db_printf(" host.hostid     = %lu\n", pr->pr_hostid);
4779 #ifdef INET
4780         db_printf(" ip4s            = %d\n", pr->pr_ip4s);
4781         for (ii = 0; ii < pr->pr_ip4s; ii++)
4782                 db_printf(" %s %s\n",
4783                     ii == 0 ? "ip4.addr        =" : "                 ",
4784                     inet_ntoa(pr->pr_ip4[ii]));
4785 #endif
4786 #ifdef INET6
4787         db_printf(" ip6s            = %d\n", pr->pr_ip6s);
4788         for (ii = 0; ii < pr->pr_ip6s; ii++)
4789                 db_printf(" %s %s\n",
4790                     ii == 0 ? "ip6.addr        =" : "                 ",
4791                     ip6_sprintf(ip6buf, &pr->pr_ip6[ii]));
4792 #endif
4793 }
4794
4795 DB_SHOW_COMMAND(prison, db_show_prison_command)
4796 {
4797         struct prison *pr;
4798
4799         if (!have_addr) {
4800                 /*
4801                  * Show all prisons in the list, and prison0 which is not
4802                  * listed.
4803                  */
4804                 db_show_prison(&prison0);
4805                 if (!db_pager_quit) {
4806                         TAILQ_FOREACH(pr, &allprison, pr_list) {
4807                                 db_show_prison(pr);
4808                                 if (db_pager_quit)
4809                                         break;
4810                         }
4811                 }
4812                 return;
4813         }
4814
4815         if (addr == 0)
4816                 pr = &prison0;
4817         else {
4818                 /* Look for a prison with the ID and with references. */
4819                 TAILQ_FOREACH(pr, &allprison, pr_list)
4820                         if (pr->pr_id == addr && pr->pr_ref > 0)
4821                                 break;
4822                 if (pr == NULL)
4823                         /* Look again, without requiring a reference. */
4824                         TAILQ_FOREACH(pr, &allprison, pr_list)
4825                                 if (pr->pr_id == addr)
4826                                         break;
4827                 if (pr == NULL)
4828                         /* Assume address points to a valid prison. */
4829                         pr = (struct prison *)addr;
4830         }
4831         db_show_prison(pr);
4832 }
4833
4834 #endif /* DDB */