sys/kern/kern_jail.c

   1 /*-
   2  * Copyright (c) 1999 Poul-Henning Kamp.
   3  * Copyright (c) 2008 Bjoern A. Zeeb.
   4  * Copyright (c) 2009 James Gritton.
   5  * All rights reserved.
   6  *
   7  * Redistribution and use in source and binary forms, with or without
   8  * modification, are permitted provided that the following conditions
   9  * are met:
  10  * 1. Redistributions of source code must retain the above copyright
  11  *    notice, this list of conditions and the following disclaimer.
  12  * 2. Redistributions in binary form must reproduce the above copyright
  13  *    notice, this list of conditions and the following disclaimer in the
  14  *    documentation and/or other materials provided with the distribution.
  15  *
  16  * THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
  17  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  18  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  19  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  20  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  21  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  22  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  23  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  24  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  25  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  26  * SUCH DAMAGE.
  27  */
  28
  29 #include <sys/cdefs.h>
  30 __FBSDID("$FreeBSD$");
  31
  32 #include "opt_compat.h"
  33 #include "opt_ddb.h"
  34 #include "opt_inet.h"
  35 #include "opt_inet6.h"
  36
  37 #include <sys/param.h>
  38 #include <sys/types.h>
  39 #include <sys/kernel.h>
  40 #include <sys/systm.h>
  41 #include <sys/errno.h>
  42 #include <sys/sysproto.h>
  43 #include <sys/malloc.h>
  44 #include <sys/osd.h>
  45 #include <sys/priv.h>
  46 #include <sys/proc.h>
  47 #include <sys/taskqueue.h>
  48 #include <sys/fcntl.h>
  49 #include <sys/jail.h>
  50 #include <sys/lock.h>
  51 #include <sys/mutex.h>
  52 #include <sys/racct.h>
  53 #include <sys/refcount.h>
  54 #include <sys/sx.h>
  55 #include <sys/sysent.h>
  56 #include <sys/namei.h>
  57 #include <sys/mount.h>
  58 #include <sys/queue.h>
  59 #include <sys/socket.h>
  60 #include <sys/syscallsubr.h>
  61 #include <sys/sysctl.h>
  62 #include <sys/vnode.h>
  63
  64 #include <net/if.h>
  65 #include <net/vnet.h>
  66
  67 #include <netinet/in.h>
  68
  69 #ifdef DDB
  70 #include <ddb/ddb.h>
  71 #ifdef INET6
  72 #include <netinet6/in6_var.h>
  73 #endif /* INET6 */
  74 #endif /* DDB */
  75
  76 #include <security/mac/mac_framework.h>
  77
  78 #define DEFAULT_HOSTUUID        "00000000-0000-0000-0000-000000000000"
  79
  80 MALLOC_DEFINE(M_PRISON, "prison", "Prison structures");
  81 static MALLOC_DEFINE(M_PRISON_RACCT, "prison_racct", "Prison racct structures");
  82
  83 /* Keep struct prison prison0 and some code in kern_jail_set() readable. */
  84 #ifdef INET
  85 #ifdef INET6
  86 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL|PR_IP6_SADDRSEL
  87 #else
  88 #define _PR_IP_SADDRSEL PR_IP4_SADDRSEL
  89 #endif
  90 #else /* !INET */
  91 #ifdef INET6
  92 #define _PR_IP_SADDRSEL PR_IP6_SADDRSEL
  93 #else
  94 #define _PR_IP_SADDRSEL 0
  95 #endif
  96 #endif
  97
  98 /* prison0 describes what is "real" about the system. */
  99 struct prison prison0 = {
 100         .pr_id          = 0,
 101         .pr_name        = "0",
 102         .pr_ref         = 1,
 103         .pr_uref        = 1,
 104         .pr_path        = "/",
 105         .pr_securelevel = -1,
 106         .pr_devfs_rsnum = 0,
 107         .pr_childmax    = JAIL_MAX,
 108         .pr_hostuuid    = DEFAULT_HOSTUUID,
 109         .pr_children    = LIST_HEAD_INITIALIZER(prison0.pr_children),
 110 #ifdef VIMAGE
 111         .pr_flags       = PR_HOST|PR_VNET|_PR_IP_SADDRSEL,
 112 #else
 113         .pr_flags       = PR_HOST|_PR_IP_SADDRSEL,
 114 #endif
 115         .pr_allow       = PR_ALLOW_ALL,
 116 };
 117 MTX_SYSINIT(prison0, &prison0.pr_mtx, "jail mutex", MTX_DEF);
 118
 119 /* allprison, allprison_racct and lastprid are protected by allprison_lock. */
 120 struct  sx allprison_lock;
 121 SX_SYSINIT(allprison_lock, &allprison_lock, "allprison");
 122 struct  prisonlist allprison = TAILQ_HEAD_INITIALIZER(allprison);
 123 LIST_HEAD(, prison_racct) allprison_racct;
 124 int     lastprid = 0;
 125
 126 static int do_jail_attach(struct thread *td, struct prison *pr);
 127 static void prison_complete(void *context, int pending);
 128 static void prison_deref(struct prison *pr, int flags);
 129 static char *prison_path(struct prison *pr1, struct prison *pr2);
 130 static void prison_remove_one(struct prison *pr);
 131 #ifdef RACCT
 132 static void prison_racct_attach(struct prison *pr);
 133 static void prison_racct_modify(struct prison *pr);
 134 static void prison_racct_detach(struct prison *pr);
 135 #endif
 136 #ifdef INET
 137 static int _prison_check_ip4(struct prison *pr, struct in_addr *ia);
 138 static int prison_restrict_ip4(struct prison *pr, struct in_addr *newip4);
 139 #endif
 140 #ifdef INET6
 141 static int _prison_check_ip6(struct prison *pr, struct in6_addr *ia6);
 142 static int prison_restrict_ip6(struct prison *pr, struct in6_addr *newip6);
 143 #endif
 144
 145 /* Flags for prison_deref */
 146 #define PD_DEREF        0x01
 147 #define PD_DEUREF       0x02
 148 #define PD_LOCKED       0x04
 149 #define PD_LIST_SLOCKED 0x08
 150 #define PD_LIST_XLOCKED 0x10
 151
 152 /*
 153  * Parameter names corresponding to PR_* flag values.  Size values are for kvm
 154  * as we cannot figure out the size of a sparse array, or an array without a
 155  * terminating entry.
 156  */
 157 static char *pr_flag_names[] = {
 158         [0] = "persist",
 159 #ifdef INET
 160         [7] = "ip4.saddrsel",
 161 #endif
 162 #ifdef INET6
 163         [8] = "ip6.saddrsel",
 164 #endif
 165 };
 166 const size_t pr_flag_names_size = sizeof(pr_flag_names);
 167
 168 static char *pr_flag_nonames[] = {
 169         [0] = "nopersist",
 170 #ifdef INET
 171         [7] = "ip4.nosaddrsel",
 172 #endif
 173 #ifdef INET6
 174         [8] = "ip6.nosaddrsel",
 175 #endif
 176 };
 177 const size_t pr_flag_nonames_size = sizeof(pr_flag_nonames);
 178
 179 struct jailsys_flags {
 180         const char      *name;
 181         unsigned         disable;
 182         unsigned         new;
 183 } pr_flag_jailsys[] = {
 184         { "host", 0, PR_HOST },
 185 #ifdef VIMAGE
 186         { "vnet", 0, PR_VNET },
 187 #endif
 188 #ifdef INET
 189         { "ip4", PR_IP4_USER | PR_IP4_DISABLE, PR_IP4_USER },
 190 #endif
 191 #ifdef INET6
 192         { "ip6", PR_IP6_USER | PR_IP6_DISABLE, PR_IP6_USER },
 193 #endif
 194 };
 195 const size_t pr_flag_jailsys_size = sizeof(pr_flag_jailsys);
 196
 197 static char *pr_allow_names[] = {
 198         "allow.set_hostname",
 199         "allow.sysvipc",
 200         "allow.raw_sockets",
 201         "allow.chflags",
 202         "allow.mount",
 203         "allow.quotas",
 204         "allow.socket_af",
 205         "allow.mount.devfs",
 206         "allow.mount.nullfs",
 207         "allow.mount.zfs",
 208         "allow.mount.procfs",
 209         "allow.mount.tmpfs",
 210         "allow.mount.fdescfs",
 211         "allow.mount.linprocfs",
 212         "allow.mount.linsysfs",
 213 };
 214 const size_t pr_allow_names_size = sizeof(pr_allow_names);
 215
 216 static char *pr_allow_nonames[] = {
 217         "allow.noset_hostname",
 218         "allow.nosysvipc",
 219         "allow.noraw_sockets",
 220         "allow.nochflags",
 221         "allow.nomount",
 222         "allow.noquotas",
 223         "allow.nosocket_af",
 224         "allow.mount.nodevfs",
 225         "allow.mount.nonullfs",
 226         "allow.mount.nozfs",
 227         "allow.mount.noprocfs",
 228         "allow.mount.notmpfs",
 229         "allow.mount.nofdescfs",
 230         "allow.mount.nolinprocfs",
 231         "allow.mount.nolinsysfs",
 232 };
 233 const size_t pr_allow_nonames_size = sizeof(pr_allow_nonames);
 234
 235 #define JAIL_DEFAULT_ALLOW              PR_ALLOW_SET_HOSTNAME
 236 #define JAIL_DEFAULT_ENFORCE_STATFS     2
 237 #define JAIL_DEFAULT_DEVFS_RSNUM        0
 238 static unsigned jail_default_allow = JAIL_DEFAULT_ALLOW;
 239 static int jail_default_enforce_statfs = JAIL_DEFAULT_ENFORCE_STATFS;
 240 static int jail_default_devfs_rsnum = JAIL_DEFAULT_DEVFS_RSNUM;
 241 #if defined(INET) || defined(INET6)
 242 static unsigned jail_max_af_ips = 255;
 243 #endif
 244
 245 /*
 246  * Initialize the parts of prison0 that can't be static-initialized with
 247  * constants.  This is called from proc0_init() after creating thread0 cpuset.
 248  */
 249 void
 250 prison0_init(void)
 251 {
 252
 253         prison0.pr_cpuset = cpuset_ref(thread0.td_cpuset);
 254         prison0.pr_osreldate = osreldate;
 255         strlcpy(prison0.pr_osrelease, osrelease, sizeof(prison0.pr_osrelease));
 256 }
 257
 258 #ifdef INET
 259 static int
 260 qcmp_v4(const void *ip1, const void *ip2)
 261 {
 262         in_addr_t iaa, iab;
 263
 264         /*
 265          * We need to compare in HBO here to get the list sorted as expected
 266          * by the result of the code.  Sorting NBO addresses gives you
 267          * interesting results.  If you do not understand, do not try.
 268          */
 269         iaa = ntohl(((const struct in_addr *)ip1)->s_addr);
 270         iab = ntohl(((const struct in_addr *)ip2)->s_addr);
 271
 272         /*
 273          * Do not simply return the difference of the two numbers, the int is
 274          * not wide enough.
 275          */
 276         if (iaa > iab)
 277                 return (1);
 278         else if (iaa < iab)
 279                 return (-1);
 280         else
 281                 return (0);
 282 }
 283 #endif
 284
 285 #ifdef INET6
 286 static int
 287 qcmp_v6(const void *ip1, const void *ip2)
 288 {
 289         const struct in6_addr *ia6a, *ia6b;
 290         int i, rc;
 291
 292         ia6a = (const struct in6_addr *)ip1;
 293         ia6b = (const struct in6_addr *)ip2;
 294
 295         rc = 0;
 296         for (i = 0; rc == 0 && i < sizeof(struct in6_addr); i++) {
 297                 if (ia6a->s6_addr[i] > ia6b->s6_addr[i])
 298                         rc = 1;
 299                 else if (ia6a->s6_addr[i] < ia6b->s6_addr[i])
 300                         rc = -1;
 301         }
 302         return (rc);
 303 }
 304 #endif
 305
 306 /*
 307  * struct jail_args {
 308  *      struct jail *jail;
 309  * };
 310  */
 311 int
 312 sys_jail(struct thread *td, struct jail_args *uap)
 313 {
 314         uint32_t version;
 315         int error;
 316         struct jail j;
 317
 318         error = copyin(uap->jail, &version, sizeof(uint32_t));
 319         if (error)
 320                 return (error);
 321
 322         switch (version) {
 323         case 0:
 324         {
 325                 struct jail_v0 j0;
 326
 327                 /* FreeBSD single IPv4 jails. */
 328                 bzero(&j, sizeof(struct jail));
 329                 error = copyin(uap->jail, &j0, sizeof(struct jail_v0));
 330                 if (error)
 331                         return (error);
 332                 j.version = j0.version;
 333                 j.path = j0.path;
 334                 j.hostname = j0.hostname;
 335                 j.ip4s = htonl(j0.ip_number);   /* jail_v0 is host order */
 336                 break;
 337         }
 338
 339         case 1:
 340                 /*
 341                  * Version 1 was used by multi-IPv4 jail implementations
 342                  * that never made it into the official kernel.
 343                  */
 344                 return (EINVAL);
 345
 346         case 2: /* JAIL_API_VERSION */
 347                 /* FreeBSD multi-IPv4/IPv6,noIP jails. */
 348                 error = copyin(uap->jail, &j, sizeof(struct jail));
 349                 if (error)
 350                         return (error);
 351                 break;
 352
 353         default:
 354                 /* Sci-Fi jails are not supported, sorry. */
 355                 return (EINVAL);
 356         }
 357         return (kern_jail(td, &j));
 358 }
 359
 360 int
 361 kern_jail(struct thread *td, struct jail *j)
 362 {
 363         struct iovec optiov[2 * (4
 364                             + sizeof(pr_allow_names) / sizeof(pr_allow_names[0])
 365 #ifdef INET
 366                             + 1
 367 #endif
 368 #ifdef INET6
 369                             + 1
 370 #endif
 371                             )];
 372         struct uio opt;
 373         char *u_path, *u_hostname, *u_name;
 374 #ifdef INET
 375         uint32_t ip4s;
 376         struct in_addr *u_ip4;
 377 #endif
 378 #ifdef INET6
 379         struct in6_addr *u_ip6;
 380 #endif
 381         size_t tmplen;
 382         int error, enforce_statfs, fi;
 383
 384         bzero(&optiov, sizeof(optiov));
 385         opt.uio_iov = optiov;
 386         opt.uio_iovcnt = 0;
 387         opt.uio_offset = -1;
 388         opt.uio_resid = -1;
 389         opt.uio_segflg = UIO_SYSSPACE;
 390         opt.uio_rw = UIO_READ;
 391         opt.uio_td = td;
 392
 393         /* Set permissions for top-level jails from sysctls. */
 394         if (!jailed(td->td_ucred)) {
 395                 for (fi = 0; fi < sizeof(pr_allow_names) /
 396                      sizeof(pr_allow_names[0]); fi++) {
 397                         optiov[opt.uio_iovcnt].iov_base =
 398                             (jail_default_allow & (1 << fi))
 399                             ? pr_allow_names[fi] : pr_allow_nonames[fi];
 400                         optiov[opt.uio_iovcnt].iov_len =
 401                             strlen(optiov[opt.uio_iovcnt].iov_base) + 1;
 402                         opt.uio_iovcnt += 2;
 403                 }
 404                 optiov[opt.uio_iovcnt].iov_base = "enforce_statfs";
 405                 optiov[opt.uio_iovcnt].iov_len = sizeof("enforce_statfs");
 406                 opt.uio_iovcnt++;
 407                 enforce_statfs = jail_default_enforce_statfs;
 408                 optiov[opt.uio_iovcnt].iov_base = &enforce_statfs;
 409                 optiov[opt.uio_iovcnt].iov_len = sizeof(enforce_statfs);
 410                 opt.uio_iovcnt++;
 411         }
 412
 413         tmplen = MAXPATHLEN + MAXHOSTNAMELEN + MAXHOSTNAMELEN;
 414 #ifdef INET
 415         ip4s = (j->version == 0) ? 1 : j->ip4s;
 416         if (ip4s > jail_max_af_ips)
 417                 return (EINVAL);
 418         tmplen += ip4s * sizeof(struct in_addr);
 419 #else
 420         if (j->ip4s > 0)
 421                 return (EINVAL);
 422 #endif
 423 #ifdef INET6
 424         if (j->ip6s > jail_max_af_ips)
 425                 return (EINVAL);
 426         tmplen += j->ip6s * sizeof(struct in6_addr);
 427 #else
 428         if (j->ip6s > 0)
 429                 return (EINVAL);
 430 #endif
 431         u_path = malloc(tmplen, M_TEMP, M_WAITOK);
 432         u_hostname = u_path + MAXPATHLEN;
 433         u_name = u_hostname + MAXHOSTNAMELEN;
 434 #ifdef INET
 435         u_ip4 = (struct in_addr *)(u_name + MAXHOSTNAMELEN);
 436 #endif
 437 #ifdef INET6
 438 #ifdef INET
 439         u_ip6 = (struct in6_addr *)(u_ip4 + ip4s);
 440 #else
 441         u_ip6 = (struct in6_addr *)(u_name + MAXHOSTNAMELEN);
 442 #endif
 443 #endif
 444         optiov[opt.uio_iovcnt].iov_base = "path";
 445         optiov[opt.uio_iovcnt].iov_len = sizeof("path");
 446         opt.uio_iovcnt++;
 447         optiov[opt.uio_iovcnt].iov_base = u_path;
 448         error = copyinstr(j->path, u_path, MAXPATHLEN,
 449             &optiov[opt.uio_iovcnt].iov_len);
 450         if (error) {
 451                 free(u_path, M_TEMP);
 452                 return (error);
 453         }
 454         opt.uio_iovcnt++;
 455         optiov[opt.uio_iovcnt].iov_base = "host.hostname";
 456         optiov[opt.uio_iovcnt].iov_len = sizeof("host.hostname");
 457         opt.uio_iovcnt++;
 458         optiov[opt.uio_iovcnt].iov_base = u_hostname;
 459         error = copyinstr(j->hostname, u_hostname, MAXHOSTNAMELEN,
 460             &optiov[opt.uio_iovcnt].iov_len);
 461         if (error) {
 462                 free(u_path, M_TEMP);
 463                 return (error);
 464         }
 465         opt.uio_iovcnt++;
 466         if (j->jailname != NULL) {
 467                 optiov[opt.uio_iovcnt].iov_base = "name";
 468                 optiov[opt.uio_iovcnt].iov_len = sizeof("name");
 469                 opt.uio_iovcnt++;
 470                 optiov[opt.uio_iovcnt].iov_base = u_name;
 471                 error = copyinstr(j->jailname, u_name, MAXHOSTNAMELEN,
 472                     &optiov[opt.uio_iovcnt].iov_len);
 473                 if (error) {
 474                         free(u_path, M_TEMP);
 475                         return (error);
 476                 }
 477                 opt.uio_iovcnt++;
 478         }
 479 #ifdef INET
 480         optiov[opt.uio_iovcnt].iov_base = "ip4.addr";
 481         optiov[opt.uio_iovcnt].iov_len = sizeof("ip4.addr");
 482         opt.uio_iovcnt++;
 483         optiov[opt.uio_iovcnt].iov_base = u_ip4;
 484         optiov[opt.uio_iovcnt].iov_len = ip4s * sizeof(struct in_addr);
 485         if (j->version == 0)
 486                 u_ip4->s_addr = j->ip4s;
 487         else {
 488                 error = copyin(j->ip4, u_ip4, optiov[opt.uio_iovcnt].iov_len);
 489                 if (error) {
 490                         free(u_path, M_TEMP);
 491                         return (error);
 492                 }
 493         }
 494         opt.uio_iovcnt++;
 495 #endif
 496 #ifdef INET6
 497         optiov[opt.uio_iovcnt].iov_base = "ip6.addr";
 498         optiov[opt.uio_iovcnt].iov_len = sizeof("ip6.addr");
 499         opt.uio_iovcnt++;
 500         optiov[opt.uio_iovcnt].iov_base = u_ip6;
 501         optiov[opt.uio_iovcnt].iov_len = j->ip6s * sizeof(struct in6_addr);
 502         error = copyin(j->ip6, u_ip6, optiov[opt.uio_iovcnt].iov_len);
 503         if (error) {
 504                 free(u_path, M_TEMP);
 505                 return (error);
 506         }
 507         opt.uio_iovcnt++;
 508 #endif
 509         KASSERT(opt.uio_iovcnt <= sizeof(optiov) / sizeof(optiov[0]),
 510             ("kern_jail: too many iovecs (%d)", opt.uio_iovcnt));
 511         error = kern_jail_set(td, &opt, JAIL_CREATE | JAIL_ATTACH);
 512         free(u_path, M_TEMP);
 513         return (error);
 514 }
 515
 516
 517 /*
 518  * struct jail_set_args {
 519  *      struct iovec *iovp;
 520  *      unsigned int iovcnt;
 521  *      int flags;
 522  * };
 523  */
 524 int
 525 sys_jail_set(struct thread *td, struct jail_set_args *uap)
 526 {
 527         struct uio *auio;
 528         int error;
 529
 530         /* Check that we have an even number of iovecs. */
 531         if (uap->iovcnt & 1)
 532                 return (EINVAL);
 533
 534         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
 535         if (error)
 536                 return (error);
 537         error = kern_jail_set(td, auio, uap->flags);
 538         free(auio, M_IOV);
 539         return (error);
 540 }
 541
 542 int
 543 kern_jail_set(struct thread *td, struct uio *optuio, int flags)
 544 {
 545         struct nameidata nd;
 546 #ifdef INET
 547         struct in_addr *ip4;
 548 #endif
 549 #ifdef INET6
 550         struct in6_addr *ip6;
 551 #endif
 552         struct vfsopt *opt;
 553         struct vfsoptlist *opts;
 554         struct prison *pr, *deadpr, *mypr, *ppr, *tpr;
 555         struct vnode *root;
 556         char *domain, *errmsg, *host, *name, *namelc, *p, *path, *uuid;
 557         char *g_path, *osrelstr;
 558 #if defined(INET) || defined(INET6)
 559         struct prison *tppr;
 560         void *op;
 561 #endif
 562         unsigned long hid;
 563         size_t namelen, onamelen, pnamelen;
 564         int born, created, cuflags, descend, enforce;
 565         int error, errmsg_len, errmsg_pos;
 566         int gotchildmax, gotenforce, gothid, gotrsnum, gotslevel;
 567         int fi, jid, jsys, len, level;
 568         int childmax, osreldt, rsnum, slevel;
 569         int fullpath_disabled;
 570 #if defined(INET) || defined(INET6)
 571         int ii, ij;
 572 #endif
 573 #ifdef INET
 574         int ip4s, redo_ip4;
 575 #endif
 576 #ifdef INET6
 577         int ip6s, redo_ip6;
 578 #endif
 579         uint64_t pr_allow, ch_allow, pr_flags, ch_flags;
 580         unsigned tallow;
 581         char numbuf[12];
 582
 583         error = priv_check(td, PRIV_JAIL_SET);
 584         if (!error && (flags & JAIL_ATTACH))
 585                 error = priv_check(td, PRIV_JAIL_ATTACH);
 586         if (error)
 587                 return (error);
 588         mypr = td->td_ucred->cr_prison;
 589         if ((flags & JAIL_CREATE) && mypr->pr_childmax == 0)
 590                 return (EPERM);
 591         if (flags & ~JAIL_SET_MASK)
 592                 return (EINVAL);
 593
 594         /*
 595          * Check all the parameters before committing to anything.  Not all
 596          * errors can be caught early, but we may as well try.  Also, this
 597          * takes care of some expensive stuff (path lookup) before getting
 598          * the allprison lock.
 599          *
 600          * XXX Jails are not filesystems, and jail parameters are not mount
 601          *     options.  But it makes more sense to re-use the vfsopt code
 602          *     than duplicate it under a different name.
 603          */
 604         error = vfs_buildopts(optuio, &opts);
 605         if (error)
 606                 return (error);
 607 #ifdef INET
 608         ip4 = NULL;
 609 #endif
 610 #ifdef INET6
 611         ip6 = NULL;
 612 #endif
 613         g_path = NULL;
 614
 615         cuflags = flags & (JAIL_CREATE | JAIL_UPDATE);
 616         if (!cuflags) {
 617                 error = EINVAL;
 618                 vfs_opterror(opts, "no valid operation (create or update)");
 619                 goto done_errmsg;
 620         }
 621
 622         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
 623         if (error == ENOENT)
 624                 jid = 0;
 625         else if (error != 0)
 626                 goto done_free;
 627
 628         error = vfs_copyopt(opts, "securelevel", &slevel, sizeof(slevel));
 629         if (error == ENOENT)
 630                 gotslevel = 0;
 631         else if (error != 0)
 632                 goto done_free;
 633         else
 634                 gotslevel = 1;
 635
 636         error =
 637             vfs_copyopt(opts, "children.max", &childmax, sizeof(childmax));
 638         if (error == ENOENT)
 639                 gotchildmax = 0;
 640         else if (error != 0)
 641                 goto done_free;
 642         else
 643                 gotchildmax = 1;
 644
 645         error = vfs_copyopt(opts, "enforce_statfs", &enforce, sizeof(enforce));
 646         if (error == ENOENT)
 647                 gotenforce = 0;
 648         else if (error != 0)
 649                 goto done_free;
 650         else if (enforce < 0 || enforce > 2) {
 651                 error = EINVAL;
 652                 goto done_free;
 653         } else
 654                 gotenforce = 1;
 655
 656         error = vfs_copyopt(opts, "devfs_ruleset", &rsnum, sizeof(rsnum));
 657         if (error == ENOENT)
 658                 gotrsnum = 0;
 659         else if (error != 0)
 660                 goto done_free;
 661         else
 662                 gotrsnum = 1;
 663
 664         pr_flags = ch_flags = 0;
 665         for (fi = 0; fi < sizeof(pr_flag_names) / sizeof(pr_flag_names[0]);
 666             fi++) {
 667                 if (pr_flag_names[fi] == NULL)
 668                         continue;
 669                 vfs_flagopt(opts, pr_flag_names[fi], &pr_flags, 1 << fi);
 670                 vfs_flagopt(opts, pr_flag_nonames[fi], &ch_flags, 1 << fi);
 671         }
 672         ch_flags |= pr_flags;
 673         for (fi = 0; fi < sizeof(pr_flag_jailsys) / sizeof(pr_flag_jailsys[0]);
 674             fi++) {
 675                 error = vfs_copyopt(opts, pr_flag_jailsys[fi].name, &jsys,
 676                     sizeof(jsys));
 677                 if (error == ENOENT)
 678                         continue;
 679                 if (error != 0)
 680                         goto done_free;
 681                 switch (jsys) {
 682                 case JAIL_SYS_DISABLE:
 683                         if (!pr_flag_jailsys[fi].disable) {
 684                                 error = EINVAL;
 685                                 goto done_free;
 686                         }
 687                         pr_flags |= pr_flag_jailsys[fi].disable;
 688                         break;
 689                 case JAIL_SYS_NEW:
 690                         pr_flags |= pr_flag_jailsys[fi].new;
 691                         break;
 692                 case JAIL_SYS_INHERIT:
 693                         break;
 694                 default:
 695                         error = EINVAL;
 696                         goto done_free;
 697                 }
 698                 ch_flags |=
 699                     pr_flag_jailsys[fi].new | pr_flag_jailsys[fi].disable;
 700         }
 701         if ((flags & (JAIL_CREATE | JAIL_UPDATE | JAIL_ATTACH)) == JAIL_CREATE
 702             && !(pr_flags & PR_PERSIST)) {
 703                 error = EINVAL;
 704                 vfs_opterror(opts, "new jail must persist or attach");
 705                 goto done_errmsg;
 706         }
 707 #ifdef VIMAGE
 708         if ((flags & JAIL_UPDATE) && (ch_flags & PR_VNET)) {
 709                 error = EINVAL;
 710                 vfs_opterror(opts, "vnet cannot be changed after creation");
 711                 goto done_errmsg;
 712         }
 713 #endif
 714 #ifdef INET
 715         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP4_USER)) {
 716                 error = EINVAL;
 717                 vfs_opterror(opts, "ip4 cannot be changed after creation");
 718                 goto done_errmsg;
 719         }
 720 #endif
 721 #ifdef INET6
 722         if ((flags & JAIL_UPDATE) && (ch_flags & PR_IP6_USER)) {
 723                 error = EINVAL;
 724                 vfs_opterror(opts, "ip6 cannot be changed after creation");
 725                 goto done_errmsg;
 726         }
 727 #endif
 728
 729         pr_allow = ch_allow = 0;
 730         for (fi = 0; fi < sizeof(pr_allow_names) / sizeof(pr_allow_names[0]);
 731             fi++) {
 732                 vfs_flagopt(opts, pr_allow_names[fi], &pr_allow, 1 << fi);
 733                 vfs_flagopt(opts, pr_allow_nonames[fi], &ch_allow, 1 << fi);
 734         }
 735         ch_allow |= pr_allow;
 736
 737         error = vfs_getopt(opts, "name", (void **)&name, &len);
 738         if (error == ENOENT)
 739                 name = NULL;
 740         else if (error != 0)
 741                 goto done_free;
 742         else {
 743                 if (len == 0 || name[len - 1] != '\0') {
 744                         error = EINVAL;
 745                         goto done_free;
 746                 }
 747                 if (len > MAXHOSTNAMELEN) {
 748                         error = ENAMETOOLONG;
 749                         goto done_free;
 750                 }
 751         }
 752
 753         error = vfs_getopt(opts, "host.hostname", (void **)&host, &len);
 754         if (error == ENOENT)
 755                 host = NULL;
 756         else if (error != 0)
 757                 goto done_free;
 758         else {
 759                 ch_flags |= PR_HOST;
 760                 pr_flags |= PR_HOST;
 761                 if (len == 0 || host[len - 1] != '\0') {
 762                         error = EINVAL;
 763                         goto done_free;
 764                 }
 765                 if (len > MAXHOSTNAMELEN) {
 766                         error = ENAMETOOLONG;
 767                         goto done_free;
 768                 }
 769         }
 770
 771         error = vfs_getopt(opts, "host.domainname", (void **)&domain, &len);
 772         if (error == ENOENT)
 773                 domain = NULL;
 774         else if (error != 0)
 775                 goto done_free;
 776         else {
 777                 ch_flags |= PR_HOST;
 778                 pr_flags |= PR_HOST;
 779                 if (len == 0 || domain[len - 1] != '\0') {
 780                         error = EINVAL;
 781                         goto done_free;
 782                 }
 783                 if (len > MAXHOSTNAMELEN) {
 784                         error = ENAMETOOLONG;
 785                         goto done_free;
 786                 }
 787         }
 788
 789         error = vfs_getopt(opts, "host.hostuuid", (void **)&uuid, &len);
 790         if (error == ENOENT)
 791                 uuid = NULL;
 792         else if (error != 0)
 793                 goto done_free;
 794         else {
 795                 ch_flags |= PR_HOST;
 796                 pr_flags |= PR_HOST;
 797                 if (len == 0 || uuid[len - 1] != '\0') {
 798                         error = EINVAL;
 799                         goto done_free;
 800                 }
 801                 if (len > HOSTUUIDLEN) {
 802                         error = ENAMETOOLONG;
 803                         goto done_free;
 804                 }
 805         }
 806
 807 #ifdef COMPAT_FREEBSD32
 808         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
 809                 uint32_t hid32;
 810
 811                 error = vfs_copyopt(opts, "host.hostid", &hid32, sizeof(hid32));
 812                 hid = hid32;
 813         } else
 814 #endif
 815                 error = vfs_copyopt(opts, "host.hostid", &hid, sizeof(hid));
 816         if (error == ENOENT)
 817                 gothid = 0;
 818         else if (error != 0)
 819                 goto done_free;
 820         else {
 821                 gothid = 1;
 822                 ch_flags |= PR_HOST;
 823                 pr_flags |= PR_HOST;
 824         }
 825
 826 #ifdef INET
 827         error = vfs_getopt(opts, "ip4.addr", &op, &ip4s);
 828         if (error == ENOENT)
 829                 ip4s = 0;
 830         else if (error != 0)
 831                 goto done_free;
 832         else if (ip4s & (sizeof(*ip4) - 1)) {
 833                 error = EINVAL;
 834                 goto done_free;
 835         } else {
 836                 ch_flags |= PR_IP4_USER | PR_IP4_DISABLE;
 837                 if (ip4s == 0)
 838                         pr_flags |= PR_IP4_USER | PR_IP4_DISABLE;
 839                 else {
 840                         pr_flags = (pr_flags & ~PR_IP4_DISABLE) | PR_IP4_USER;
 841                         ip4s /= sizeof(*ip4);
 842                         if (ip4s > jail_max_af_ips) {
 843                                 error = EINVAL;
 844                                 vfs_opterror(opts, "too many IPv4 addresses");
 845                                 goto done_errmsg;
 846                         }
 847                         ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
 848                         bcopy(op, ip4, ip4s * sizeof(*ip4));
 849                         /*
 850                          * IP addresses are all sorted but ip[0] to preserve
 851                          * the primary IP address as given from userland.
 852                          * This special IP is used for unbound outgoing
 853                          * connections as well for "loopback" traffic in case
 854                          * source address selection cannot find any more fitting
 855                          * address to connect from.
 856                          */
 857                         if (ip4s > 1)
 858                                 qsort(ip4 + 1, ip4s - 1, sizeof(*ip4), qcmp_v4);
 859                         /*
 860                          * Check for duplicate addresses and do some simple
 861                          * zero and broadcast checks. If users give other bogus
 862                          * addresses it is their problem.
 863                          *
 864                          * We do not have to care about byte order for these
 865                          * checks so we will do them in NBO.
 866                          */
 867                         for (ii = 0; ii < ip4s; ii++) {
 868                                 if (ip4[ii].s_addr == INADDR_ANY ||
 869                                     ip4[ii].s_addr == INADDR_BROADCAST) {
 870                                         error = EINVAL;
 871                                         goto done_free;
 872                                 }
 873                                 if ((ii+1) < ip4s &&
 874                                     (ip4[0].s_addr == ip4[ii+1].s_addr ||
 875                                      ip4[ii].s_addr == ip4[ii+1].s_addr)) {
 876                                         error = EINVAL;
 877                                         goto done_free;
 878                                 }
 879                         }
 880                 }
 881         }
 882 #endif
 883
 884 #ifdef INET6
 885         error = vfs_getopt(opts, "ip6.addr", &op, &ip6s);
 886         if (error == ENOENT)
 887                 ip6s = 0;
 888         else if (error != 0)
 889                 goto done_free;
 890         else if (ip6s & (sizeof(*ip6) - 1)) {
 891                 error = EINVAL;
 892                 goto done_free;
 893         } else {
 894                 ch_flags |= PR_IP6_USER | PR_IP6_DISABLE;
 895                 if (ip6s == 0)
 896                         pr_flags |= PR_IP6_USER | PR_IP6_DISABLE;
 897                 else {
 898                         pr_flags = (pr_flags & ~PR_IP6_DISABLE) | PR_IP6_USER;
 899                         ip6s /= sizeof(*ip6);
 900                         if (ip6s > jail_max_af_ips) {
 901                                 error = EINVAL;
 902                                 vfs_opterror(opts, "too many IPv6 addresses");
 903                                 goto done_errmsg;
 904                         }
 905                         ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
 906                         bcopy(op, ip6, ip6s * sizeof(*ip6));
 907                         if (ip6s > 1)
 908                                 qsort(ip6 + 1, ip6s - 1, sizeof(*ip6), qcmp_v6);
 909                         for (ii = 0; ii < ip6s; ii++) {
 910                                 if (IN6_IS_ADDR_UNSPECIFIED(&ip6[ii])) {
 911                                         error = EINVAL;
 912                                         goto done_free;
 913                                 }
 914                                 if ((ii+1) < ip6s &&
 915                                     (IN6_ARE_ADDR_EQUAL(&ip6[0], &ip6[ii+1]) ||
 916                                      IN6_ARE_ADDR_EQUAL(&ip6[ii], &ip6[ii+1])))
 917                                 {
 918                                         error = EINVAL;
 919                                         goto done_free;
 920                                 }
 921                         }
 922                 }
 923         }
 924 #endif
 925
 926 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
 927         if ((ch_flags & PR_VNET) && (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
 928                 error = EINVAL;
 929                 vfs_opterror(opts,
 930                     "vnet jails cannot have IP address restrictions");
 931                 goto done_errmsg;
 932         }
 933 #endif
 934
 935         fullpath_disabled = 0;
 936         root = NULL;
 937         error = vfs_getopt(opts, "path", (void **)&path, &len);
 938         if (error == ENOENT)
 939                 path = NULL;
 940         else if (error != 0)
 941                 goto done_free;
 942         else {
 943                 if (flags & JAIL_UPDATE) {
 944                         error = EINVAL;
 945                         vfs_opterror(opts,
 946                             "path cannot be changed after creation");
 947                         goto done_errmsg;
 948                 }
 949                 if (len == 0 || path[len - 1] != '\0') {
 950                         error = EINVAL;
 951                         goto done_free;
 952                 }
 953                 NDINIT(&nd, LOOKUP, FOLLOW | LOCKLEAF, UIO_SYSSPACE,
 954                     path, td);
 955                 error = namei(&nd);
 956                 if (error)
 957                         goto done_free;
 958                 root = nd.ni_vp;
 959                 NDFREE(&nd, NDF_ONLY_PNBUF);
 960                 g_path = malloc(MAXPATHLEN, M_TEMP, M_WAITOK);
 961                 strlcpy(g_path, path, MAXPATHLEN);
 962                 error = vn_path_to_global_path(td, root, g_path, MAXPATHLEN);
 963                 if (error == 0)
 964                         path = g_path;
 965                 else if (error == ENODEV) {
 966                         /* proceed if sysctl debug.disablefullpath == 1 */
 967                         fullpath_disabled = 1;
 968                         if (len < 2 || (len == 2 && path[0] == '/'))
 969                                 path = NULL;
 970                 } else {
 971                         /* exit on other errors */
 972                         goto done_free;
 973                 }
 974                 if (root->v_type != VDIR) {
 975                         error = ENOTDIR;
 976                         vput(root);
 977                         goto done_free;
 978                 }
 979                 VOP_UNLOCK(root, 0);
 980                 if (fullpath_disabled) {
 981                         /* Leave room for a real-root full pathname. */
 982                         if (len + (path[0] == '/' && strcmp(mypr->pr_path, "/")
 983                             ? strlen(mypr->pr_path) : 0) > MAXPATHLEN) {
 984                                 error = ENAMETOOLONG;
 985                                 goto done_free;
 986                         }
 987                 }
 988         }
 989
 990         error = vfs_getopt(opts, "osrelease", (void **)&osrelstr, &len);
 991         if (error == ENOENT)
 992                 osrelstr = NULL;
 993         else if (error != 0)
 994                 goto done_free;
 995         else {
 996                 if (flags & JAIL_UPDATE) {
 997                         error = EINVAL;
 998                         vfs_opterror(opts,
 999                             "osrelease cannot be changed after creation");
1000                         goto done_errmsg;
1001                 }
1002                 if (len == 0 || len >= OSRELEASELEN) {
1003                         error = EINVAL;
1004                         vfs_opterror(opts,
1005                             "osrelease string must be 1-%d bytes long",
1006                             OSRELEASELEN - 1);
1007                         goto done_errmsg;
1008                 }
1009         }
1010
1011         error = vfs_copyopt(opts, "osreldate", &osreldt, sizeof(osreldt));
1012         if (error == ENOENT)
1013                 osreldt = 0;
1014         else if (error != 0)
1015                 goto done_free;
1016         else {
1017                 if (flags & JAIL_UPDATE) {
1018                         error = EINVAL;
1019                         vfs_opterror(opts,
1020                             "osreldate cannot be changed after creation");
1021                         goto done_errmsg;
1022                 }
1023                 if (osreldt == 0) {
1024                         error = EINVAL;
1025                         vfs_opterror(opts, "osreldate cannot be 0");
1026                         goto done_errmsg;
1027                 }
1028         }
1029
1030         /*
1031          * Find the specified jail, or at least its parent.
1032          * This abuses the file error codes ENOENT and EEXIST.
1033          */
1034         pr = NULL;
1035         ppr = mypr;
1036         if (cuflags == JAIL_CREATE && jid == 0 && name != NULL) {
1037                 namelc = strrchr(name, '.');
1038                 jid = strtoul(namelc != NULL ? namelc + 1 : name, &p, 10);
1039                 if (*p != '\0')
1040                         jid = 0;
1041         }
1042         sx_xlock(&allprison_lock);
1043         if (jid != 0) {
1044                 /*
1045                  * See if a requested jid already exists.  There is an
1046                  * information leak here if the jid exists but is not within
1047                  * the caller's jail hierarchy.  Jail creators will get EEXIST
1048                  * even though they cannot see the jail, and CREATE | UPDATE
1049                  * will return ENOENT which is not normally a valid error.
1050                  */
1051                 if (jid < 0) {
1052                         error = EINVAL;
1053                         vfs_opterror(opts, "negative jid");
1054                         goto done_unlock_list;
1055                 }
1056                 pr = prison_find(jid);
1057                 if (pr != NULL) {
1058                         ppr = pr->pr_parent;
1059                         /* Create: jid must not exist. */
1060                         if (cuflags == JAIL_CREATE) {
1061                                 mtx_unlock(&pr->pr_mtx);
1062                                 error = EEXIST;
1063                                 vfs_opterror(opts, "jail %d already exists",
1064                                     jid);
1065                                 goto done_unlock_list;
1066                         }
1067                         if (!prison_ischild(mypr, pr)) {
1068                                 mtx_unlock(&pr->pr_mtx);
1069                                 pr = NULL;
1070                         } else if (pr->pr_uref == 0) {
1071                                 if (!(flags & JAIL_DYING)) {
1072                                         mtx_unlock(&pr->pr_mtx);
1073                                         error = ENOENT;
1074                                         vfs_opterror(opts, "jail %d is dying",
1075                                             jid);
1076                                         goto done_unlock_list;
1077                                 } else if ((flags & JAIL_ATTACH) ||
1078                                     (pr_flags & PR_PERSIST)) {
1079                                         /*
1080                                          * A dying jail might be resurrected
1081                                          * (via attach or persist), but first
1082                                          * it must determine if another jail
1083                                          * has claimed its name.  Accomplish
1084                                          * this by implicitly re-setting the
1085                                          * name.
1086                                          */
1087                                         if (name == NULL)
1088                                                 name = prison_name(mypr, pr);
1089                                 }
1090                         }
1091                 }
1092                 if (pr == NULL) {
1093                         /* Update: jid must exist. */
1094                         if (cuflags == JAIL_UPDATE) {
1095                                 error = ENOENT;
1096                                 vfs_opterror(opts, "jail %d not found", jid);
1097                                 goto done_unlock_list;
1098                         }
1099                 }
1100         }
1101         /*
1102          * If the caller provided a name, look for a jail by that name.
1103          * This has different semantics for creates and updates keyed by jid
1104          * (where the name must not already exist in a different jail),
1105          * and updates keyed by the name itself (where the name must exist
1106          * because that is the jail being updated).
1107          */
1108         namelc = NULL;
1109         if (name != NULL) {
1110                 namelc = strrchr(name, '.');
1111                 if (namelc == NULL)
1112                         namelc = name;
1113                 else {
1114                         /*
1115                          * This is a hierarchical name.  Split it into the
1116                          * parent and child names, and make sure the parent
1117                          * exists or matches an already found jail.
1118                          */
1119                         if (pr != NULL) {
1120                                 if (strncmp(name, ppr->pr_name, namelc - name)
1121                                     || ppr->pr_name[namelc - name] != '\0') {
1122                                         mtx_unlock(&pr->pr_mtx);
1123                                         error = EINVAL;
1124                                         vfs_opterror(opts,
1125                                             "cannot change jail's parent");
1126                                         goto done_unlock_list;
1127                                 }
1128                         } else {
1129                                 *namelc = '\0';
1130                                 ppr = prison_find_name(mypr, name);
1131                                 if (ppr == NULL) {
1132                                         error = ENOENT;
1133                                         vfs_opterror(opts,
1134                                             "jail \"%s\" not found", name);
1135                                         goto done_unlock_list;
1136                                 }
1137                                 mtx_unlock(&ppr->pr_mtx);
1138                                 *namelc = '.';
1139                         }
1140                         namelc++;
1141                 }
1142                 if (namelc[0] != '\0') {
1143                         pnamelen =
1144                             (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1145  name_again:
1146                         deadpr = NULL;
1147                         FOREACH_PRISON_CHILD(ppr, tpr) {
1148                                 if (tpr != pr && tpr->pr_ref > 0 &&
1149                                     !strcmp(tpr->pr_name + pnamelen, namelc)) {
1150                                         if (pr == NULL &&
1151                                             cuflags != JAIL_CREATE) {
1152                                                 mtx_lock(&tpr->pr_mtx);
1153                                                 if (tpr->pr_ref > 0) {
1154                                                         /*
1155                                                          * Use this jail
1156                                                          * for updates.
1157                                                          */
1158                                                         if (tpr->pr_uref > 0) {
1159                                                                 pr = tpr;
1160                                                                 break;
1161                                                         }
1162                                                         deadpr = tpr;
1163                                                 }
1164                                                 mtx_unlock(&tpr->pr_mtx);
1165                                         } else if (tpr->pr_uref > 0) {
1166                                                 /*
1167                                                  * Create, or update(jid):
1168                                                  * name must not exist in an
1169                                                  * active sibling jail.
1170                                                  */
1171                                                 error = EEXIST;
1172                                                 if (pr != NULL)
1173                                                         mtx_unlock(&pr->pr_mtx);
1174                                                 vfs_opterror(opts,
1175                                                    "jail \"%s\" already exists",
1176                                                    name);
1177                                                 goto done_unlock_list;
1178                                         }
1179                                 }
1180                         }
1181                         /* If no active jail is found, use a dying one. */
1182                         if (deadpr != NULL && pr == NULL) {
1183                                 if (flags & JAIL_DYING) {
1184                                         mtx_lock(&deadpr->pr_mtx);
1185                                         if (deadpr->pr_ref == 0) {
1186                                                 mtx_unlock(&deadpr->pr_mtx);
1187                                                 goto name_again;
1188                                         }
1189                                         pr = deadpr;
1190                                 } else if (cuflags == JAIL_UPDATE) {
1191                                         error = ENOENT;
1192                                         vfs_opterror(opts,
1193                                             "jail \"%s\" is dying", name);
1194                                         goto done_unlock_list;
1195                                 }
1196                         }
1197                         /* Update: name must exist if no jid. */
1198                         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1199                                 error = ENOENT;
1200                                 vfs_opterror(opts, "jail \"%s\" not found",
1201                                     name);
1202                                 goto done_unlock_list;
1203                         }
1204                 }
1205         }
1206         /* Update: must provide a jid or name. */
1207         else if (cuflags == JAIL_UPDATE && pr == NULL) {
1208                 error = ENOENT;
1209                 vfs_opterror(opts, "update specified no jail");
1210                 goto done_unlock_list;
1211         }
1212
1213         /* If there's no prison to update, create a new one and link it in. */
1214         if (pr == NULL) {
1215                 for (tpr = mypr; tpr != NULL; tpr = tpr->pr_parent)
1216                         if (tpr->pr_childcount >= tpr->pr_childmax) {
1217                                 error = EPERM;
1218                                 vfs_opterror(opts, "prison limit exceeded");
1219                                 goto done_unlock_list;
1220                         }
1221                 created = 1;
1222                 mtx_lock(&ppr->pr_mtx);
1223                 if (ppr->pr_ref == 0) {
1224                         mtx_unlock(&ppr->pr_mtx);
1225                         error = ENOENT;
1226                         vfs_opterror(opts, "jail \"%s\" not found",
1227                             prison_name(mypr, ppr));
1228                         goto done_unlock_list;
1229                 }
1230                 ppr->pr_ref++;
1231                 ppr->pr_uref++;
1232                 mtx_unlock(&ppr->pr_mtx);
1233                 pr = malloc(sizeof(*pr), M_PRISON, M_WAITOK | M_ZERO);
1234                 if (jid == 0) {
1235                         /* Find the next free jid. */
1236                         jid = lastprid + 1;
1237  findnext:
1238                         if (jid == JAIL_MAX)
1239                                 jid = 1;
1240                         TAILQ_FOREACH(tpr, &allprison, pr_list) {
1241                                 if (tpr->pr_id < jid)
1242                                         continue;
1243                                 if (tpr->pr_id > jid || tpr->pr_ref == 0) {
1244                                         TAILQ_INSERT_BEFORE(tpr, pr, pr_list);
1245                                         break;
1246                                 }
1247                                 if (jid == lastprid) {
1248                                         error = EAGAIN;
1249                                         vfs_opterror(opts,
1250                                             "no available jail IDs");
1251                                         free(pr, M_PRISON);
1252                                         prison_deref(ppr, PD_DEREF |
1253                                             PD_DEUREF | PD_LIST_XLOCKED);
1254                                         goto done_releroot;
1255                                 }
1256                                 jid++;
1257                                 goto findnext;
1258                         }
1259                         lastprid = jid;
1260                 } else {
1261                         /*
1262                          * The jail already has a jid (that did not yet exist),
1263                          * so just find where to insert it.
1264                          */
1265                         TAILQ_FOREACH(tpr, &allprison, pr_list)
1266                                 if (tpr->pr_id >= jid) {
1267                                         TAILQ_INSERT_BEFORE(tpr, pr, pr_list);
1268                                         break;
1269                                 }
1270                 }
1271                 if (tpr == NULL)
1272                         TAILQ_INSERT_TAIL(&allprison, pr, pr_list);
1273                 LIST_INSERT_HEAD(&ppr->pr_children, pr, pr_sibling);
1274                 for (tpr = ppr; tpr != NULL; tpr = tpr->pr_parent)
1275                         tpr->pr_childcount++;
1276
1277                 pr->pr_parent = ppr;
1278                 pr->pr_id = jid;
1279
1280                 /* Set some default values, and inherit some from the parent. */
1281                 if (namelc == NULL)
1282                         namelc = "";
1283                 if (path == NULL) {
1284                         path = "/";
1285                         root = mypr->pr_root;
1286                         vref(root);
1287                 }
1288                 strlcpy(pr->pr_hostuuid, DEFAULT_HOSTUUID, HOSTUUIDLEN);
1289                 pr->pr_flags |= PR_HOST;
1290 #if defined(INET) || defined(INET6)
1291 #ifdef VIMAGE
1292                 if (!(pr_flags & PR_VNET))
1293 #endif
1294                 {
1295 #ifdef INET
1296                         if (!(ch_flags & PR_IP4_USER))
1297                                 pr->pr_flags |=
1298                                     PR_IP4 | PR_IP4_USER | PR_IP4_DISABLE;
1299                         else if (!(pr_flags & PR_IP4_USER)) {
1300                                 pr->pr_flags |= ppr->pr_flags & PR_IP4;
1301                                 if (ppr->pr_ip4 != NULL) {
1302                                         pr->pr_ip4s = ppr->pr_ip4s;
1303                                         pr->pr_ip4 = malloc(pr->pr_ip4s *
1304                                             sizeof(struct in_addr), M_PRISON,
1305                                             M_WAITOK);
1306                                         bcopy(ppr->pr_ip4, pr->pr_ip4,
1307                                             pr->pr_ip4s * sizeof(*pr->pr_ip4));
1308                                 }
1309                         }
1310 #endif
1311 #ifdef INET6
1312                         if (!(ch_flags & PR_IP6_USER))
1313                                 pr->pr_flags |=
1314                                     PR_IP6 | PR_IP6_USER | PR_IP6_DISABLE;
1315                         else if (!(pr_flags & PR_IP6_USER)) {
1316                                 pr->pr_flags |= ppr->pr_flags & PR_IP6;
1317                                 if (ppr->pr_ip6 != NULL) {
1318                                         pr->pr_ip6s = ppr->pr_ip6s;
1319                                         pr->pr_ip6 = malloc(pr->pr_ip6s *
1320                                             sizeof(struct in6_addr), M_PRISON,
1321                                             M_WAITOK);
1322                                         bcopy(ppr->pr_ip6, pr->pr_ip6,
1323                                             pr->pr_ip6s * sizeof(*pr->pr_ip6));
1324                                 }
1325                         }
1326 #endif
1327                 }
1328 #endif
1329                 /* Source address selection is always on by default. */
1330                 pr->pr_flags |= _PR_IP_SADDRSEL;
1331
1332                 pr->pr_securelevel = ppr->pr_securelevel;
1333                 pr->pr_allow = JAIL_DEFAULT_ALLOW & ppr->pr_allow;
1334                 pr->pr_enforce_statfs = JAIL_DEFAULT_ENFORCE_STATFS;
1335                 pr->pr_devfs_rsnum = ppr->pr_devfs_rsnum;
1336
1337                 pr->pr_osreldate = osreldt ? osreldt : ppr->pr_osreldate;
1338                 if (osrelstr == NULL)
1339                     strcpy(pr->pr_osrelease, ppr->pr_osrelease);
1340                 else
1341                     strcpy(pr->pr_osrelease, osrelstr);
1342
1343                 LIST_INIT(&pr->pr_children);
1344                 mtx_init(&pr->pr_mtx, "jail mutex", NULL, MTX_DEF | MTX_DUPOK);
1345                 TASK_INIT(&pr->pr_task, 0, prison_complete, pr);
1346
1347 #ifdef VIMAGE
1348                 /* Allocate a new vnet if specified. */
1349                 pr->pr_vnet = (pr_flags & PR_VNET)
1350                     ? vnet_alloc() : ppr->pr_vnet;
1351 #endif
1352                 /*
1353                  * Allocate a dedicated cpuset for each jail.
1354                  * Unlike other initial settings, this may return an erorr.
1355                  */
1356                 error = cpuset_create_root(ppr, &pr->pr_cpuset);
1357                 if (error) {
1358                         prison_deref(pr, PD_LIST_XLOCKED);
1359                         goto done_releroot;
1360                 }
1361
1362                 mtx_lock(&pr->pr_mtx);
1363                 /*
1364                  * New prisons do not yet have a reference, because we do not
1365                  * want others to see the incomplete prison once the
1366                  * allprison_lock is downgraded.
1367                  */
1368         } else {
1369                 created = 0;
1370                 /*
1371                  * Grab a reference for existing prisons, to ensure they
1372                  * continue to exist for the duration of the call.
1373                  */
1374                 pr->pr_ref++;
1375 #if defined(VIMAGE) && (defined(INET) || defined(INET6))
1376                 if ((pr->pr_flags & PR_VNET) &&
1377                     (ch_flags & (PR_IP4_USER | PR_IP6_USER))) {
1378                         error = EINVAL;
1379                         vfs_opterror(opts,
1380                             "vnet jails cannot have IP address restrictions");
1381                         goto done_deref_locked;
1382                 }
1383 #endif
1384 #ifdef INET
1385                 if (PR_IP4_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1386                         error = EINVAL;
1387                         vfs_opterror(opts,
1388                             "ip4 cannot be changed after creation");
1389                         goto done_deref_locked;
1390                 }
1391 #endif
1392 #ifdef INET6
1393                 if (PR_IP6_USER & ch_flags & (pr_flags ^ pr->pr_flags)) {
1394                         error = EINVAL;
1395                         vfs_opterror(opts,
1396                             "ip6 cannot be changed after creation");
1397                         goto done_deref_locked;
1398                 }
1399 #endif
1400         }
1401
1402         /* Do final error checking before setting anything. */
1403         if (gotslevel) {
1404                 if (slevel < ppr->pr_securelevel) {
1405                         error = EPERM;
1406                         goto done_deref_locked;
1407                 }
1408         }
1409         if (gotchildmax) {
1410                 if (childmax >= ppr->pr_childmax) {
1411                         error = EPERM;
1412                         goto done_deref_locked;
1413                 }
1414         }
1415         if (gotenforce) {
1416                 if (enforce < ppr->pr_enforce_statfs) {
1417                         error = EPERM;
1418                         goto done_deref_locked;
1419                 }
1420         }
1421         if (gotrsnum) {
1422                 /*
1423                  * devfs_rsnum is a uint16_t
1424                  */
1425                 if (rsnum < 0 || rsnum > 65535) {
1426                         error = EINVAL;
1427                         goto done_deref_locked;
1428                 }
1429                 /*
1430                  * Nested jails always inherit parent's devfs ruleset
1431                  */
1432                 if (jailed(td->td_ucred)) {
1433                         if (rsnum > 0 && rsnum != ppr->pr_devfs_rsnum) {
1434                                 error = EPERM;
1435                                 goto done_deref_locked;
1436                         } else
1437                                 rsnum = ppr->pr_devfs_rsnum;
1438                 }
1439         }
1440 #ifdef INET
1441         if (ip4s > 0) {
1442                 if (ppr->pr_flags & PR_IP4) {
1443                         /*
1444                          * Make sure the new set of IP addresses is a
1445                          * subset of the parent's list.  Don't worry
1446                          * about the parent being unlocked, as any
1447                          * setting is done with allprison_lock held.
1448                          */
1449                         for (ij = 0; ij < ppr->pr_ip4s; ij++)
1450                                 if (ip4[0].s_addr == ppr->pr_ip4[ij].s_addr)
1451                                         break;
1452                         if (ij == ppr->pr_ip4s) {
1453                                 error = EPERM;
1454                                 goto done_deref_locked;
1455                         }
1456                         if (ip4s > 1) {
1457                                 for (ii = ij = 1; ii < ip4s; ii++) {
1458                                         if (ip4[ii].s_addr ==
1459                                             ppr->pr_ip4[0].s_addr)
1460                                                 continue;
1461                                         for (; ij < ppr->pr_ip4s; ij++)
1462                                                 if (ip4[ii].s_addr ==
1463                                                     ppr->pr_ip4[ij].s_addr)
1464                                                         break;
1465                                         if (ij == ppr->pr_ip4s)
1466                                                 break;
1467                                 }
1468                                 if (ij == ppr->pr_ip4s) {
1469                                         error = EPERM;
1470                                         goto done_deref_locked;
1471                                 }
1472                         }
1473                 }
1474                 /*
1475                  * Check for conflicting IP addresses.  We permit them
1476                  * if there is no more than one IP on each jail.  If
1477                  * there is a duplicate on a jail with more than one
1478                  * IP stop checking and return error.
1479                  */
1480                 tppr = ppr;
1481 #ifdef VIMAGE
1482                 for (; tppr != &prison0; tppr = tppr->pr_parent)
1483                         if (tppr->pr_flags & PR_VNET)
1484                                 break;
1485 #endif
1486                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1487                         if (tpr == pr ||
1488 #ifdef VIMAGE
1489                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1490 #endif
1491                             tpr->pr_uref == 0) {
1492                                 descend = 0;
1493                                 continue;
1494                         }
1495                         if (!(tpr->pr_flags & PR_IP4_USER))
1496                                 continue;
1497                         descend = 0;
1498                         if (tpr->pr_ip4 == NULL ||
1499                             (ip4s == 1 && tpr->pr_ip4s == 1))
1500                                 continue;
1501                         for (ii = 0; ii < ip4s; ii++) {
1502                                 if (_prison_check_ip4(tpr, &ip4[ii]) == 0) {
1503                                         error = EADDRINUSE;
1504                                         vfs_opterror(opts,
1505                                             "IPv4 addresses clash");
1506                                         goto done_deref_locked;
1507                                 }
1508                         }
1509                 }
1510         }
1511 #endif
1512 #ifdef INET6
1513         if (ip6s > 0) {
1514                 if (ppr->pr_flags & PR_IP6) {
1515                         /*
1516                          * Make sure the new set of IP addresses is a
1517                          * subset of the parent's list.
1518                          */
1519                         for (ij = 0; ij < ppr->pr_ip6s; ij++)
1520                                 if (IN6_ARE_ADDR_EQUAL(&ip6[0],
1521                                     &ppr->pr_ip6[ij]))
1522                                         break;
1523                         if (ij == ppr->pr_ip6s) {
1524                                 error = EPERM;
1525                                 goto done_deref_locked;
1526                         }
1527                         if (ip6s > 1) {
1528                                 for (ii = ij = 1; ii < ip6s; ii++) {
1529                                         if (IN6_ARE_ADDR_EQUAL(&ip6[ii],
1530                                              &ppr->pr_ip6[0]))
1531                                                 continue;
1532                                         for (; ij < ppr->pr_ip6s; ij++)
1533                                                 if (IN6_ARE_ADDR_EQUAL(
1534                                                     &ip6[ii], &ppr->pr_ip6[ij]))
1535                                                         break;
1536                                         if (ij == ppr->pr_ip6s)
1537                                                 break;
1538                                 }
1539                                 if (ij == ppr->pr_ip6s) {
1540                                         error = EPERM;
1541                                         goto done_deref_locked;
1542                                 }
1543                         }
1544                 }
1545                 /* Check for conflicting IP addresses. */
1546                 tppr = ppr;
1547 #ifdef VIMAGE
1548                 for (; tppr != &prison0; tppr = tppr->pr_parent)
1549                         if (tppr->pr_flags & PR_VNET)
1550                                 break;
1551 #endif
1552                 FOREACH_PRISON_DESCENDANT(tppr, tpr, descend) {
1553                         if (tpr == pr ||
1554 #ifdef VIMAGE
1555                             (tpr != tppr && (tpr->pr_flags & PR_VNET)) ||
1556 #endif
1557                             tpr->pr_uref == 0) {
1558                                 descend = 0;
1559                                 continue;
1560                         }
1561                         if (!(tpr->pr_flags & PR_IP6_USER))
1562                                 continue;
1563                         descend = 0;
1564                         if (tpr->pr_ip6 == NULL ||
1565                             (ip6s == 1 && tpr->pr_ip6s == 1))
1566                                 continue;
1567                         for (ii = 0; ii < ip6s; ii++) {
1568                                 if (_prison_check_ip6(tpr, &ip6[ii]) == 0) {
1569                                         error = EADDRINUSE;
1570                                         vfs_opterror(opts,
1571                                             "IPv6 addresses clash");
1572                                         goto done_deref_locked;
1573                                 }
1574                         }
1575                 }
1576         }
1577 #endif
1578         onamelen = namelen = 0;
1579         if (namelc != NULL) {
1580                 /* Give a default name of the jid.  Also allow the name to be
1581                  * explicitly the jid - but not any other number, and only in
1582                  * normal form (no leading zero/etc).
1583                  */
1584                 if (namelc[0] == '\0')
1585                         snprintf(namelc = numbuf, sizeof(numbuf), "%d", jid);
1586                 else if ((strtoul(namelc, &p, 10) != jid ||
1587                           namelc[0] < '1' || namelc[0] > '9') && *p == '\0') {
1588                         error = EINVAL;
1589                         vfs_opterror(opts,
1590                             "name cannot be numeric (unless it is the jid)");
1591                         goto done_deref_locked;
1592                 }
1593                 /*
1594                  * Make sure the name isn't too long for the prison or its
1595                  * children.
1596                  */
1597                 pnamelen = (ppr == &prison0) ? 0 : strlen(ppr->pr_name) + 1;
1598                 onamelen = strlen(pr->pr_name + pnamelen);
1599                 namelen = strlen(namelc);
1600                 if (pnamelen + namelen + 1 > sizeof(pr->pr_name)) {
1601                         error = ENAMETOOLONG;
1602                         goto done_deref_locked;
1603                 }
1604                 FOREACH_PRISON_DESCENDANT(pr, tpr, descend) {
1605                         if (strlen(tpr->pr_name) + (namelen - onamelen) >=
1606                             sizeof(pr->pr_name)) {
1607                                 error = ENAMETOOLONG;
1608                                 goto done_deref_locked;
1609                         }
1610                 }
1611         }
1612         if (pr_allow & ~ppr->pr_allow) {
1613                 error = EPERM;
1614                 goto done_deref_locked;
1615         }
1616
1617         /*
1618          * Let modules check their parameters.  This requires unlocking and
1619          * then re-locking the prison, but this is still a valid state as long
1620          * as allprison_lock remains xlocked.
1621          */
1622         mtx_unlock(&pr->pr_mtx);
1623         error = osd_jail_call(pr, PR_METHOD_CHECK, opts);
1624         if (error != 0) {
1625                 prison_deref(pr, created
1626                     ? PD_LIST_XLOCKED
1627                     : PD_DEREF | PD_LIST_XLOCKED);
1628                 goto done_releroot;
1629         }
1630         mtx_lock(&pr->pr_mtx);
1631
1632         /* At this point, all valid parameters should have been noted. */
1633         TAILQ_FOREACH(opt, opts, link) {
1634                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
1635                         error = EINVAL;
1636                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
1637                         goto done_deref_locked;
1638                 }
1639         }
1640
1641         /* Set the parameters of the prison. */
1642 #ifdef INET
1643         redo_ip4 = 0;
1644         if (pr_flags & PR_IP4_USER) {
1645                 pr->pr_flags |= PR_IP4;
1646                 free(pr->pr_ip4, M_PRISON);
1647                 pr->pr_ip4s = ip4s;
1648                 pr->pr_ip4 = ip4;
1649                 ip4 = NULL;
1650                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1651 #ifdef VIMAGE
1652                         if (tpr->pr_flags & PR_VNET) {
1653                                 descend = 0;
1654                                 continue;
1655                         }
1656 #endif
1657                         if (prison_restrict_ip4(tpr, NULL)) {
1658                                 redo_ip4 = 1;
1659                                 descend = 0;
1660                         }
1661                 }
1662         }
1663 #endif
1664 #ifdef INET6
1665         redo_ip6 = 0;
1666         if (pr_flags & PR_IP6_USER) {
1667                 pr->pr_flags |= PR_IP6;
1668                 free(pr->pr_ip6, M_PRISON);
1669                 pr->pr_ip6s = ip6s;
1670                 pr->pr_ip6 = ip6;
1671                 ip6 = NULL;
1672                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1673 #ifdef VIMAGE
1674                         if (tpr->pr_flags & PR_VNET) {
1675                                 descend = 0;
1676                                 continue;
1677                         }
1678 #endif
1679                         if (prison_restrict_ip6(tpr, NULL)) {
1680                                 redo_ip6 = 1;
1681                                 descend = 0;
1682                         }
1683                 }
1684         }
1685 #endif
1686         if (gotslevel) {
1687                 pr->pr_securelevel = slevel;
1688                 /* Set all child jails to be at least this level. */
1689                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1690                         if (tpr->pr_securelevel < slevel)
1691                                 tpr->pr_securelevel = slevel;
1692         }
1693         if (gotchildmax) {
1694                 pr->pr_childmax = childmax;
1695                 /* Set all child jails to under this limit. */
1696                 FOREACH_PRISON_DESCENDANT_LOCKED_LEVEL(pr, tpr, descend, level)
1697                         if (tpr->pr_childmax > childmax - level)
1698                                 tpr->pr_childmax = childmax > level
1699                                     ? childmax - level : 0;
1700         }
1701         if (gotenforce) {
1702                 pr->pr_enforce_statfs = enforce;
1703                 /* Pass this restriction on to the children. */
1704                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1705                         if (tpr->pr_enforce_statfs < enforce)
1706                                 tpr->pr_enforce_statfs = enforce;
1707         }
1708         if (gotrsnum) {
1709                 pr->pr_devfs_rsnum = rsnum;
1710                 /* Pass this restriction on to the children. */
1711                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1712                         tpr->pr_devfs_rsnum = rsnum;
1713         }
1714         if (namelc != NULL) {
1715                 if (ppr == &prison0)
1716                         strlcpy(pr->pr_name, namelc, sizeof(pr->pr_name));
1717                 else
1718                         snprintf(pr->pr_name, sizeof(pr->pr_name), "%s.%s",
1719                             ppr->pr_name, namelc);
1720                 /* Change this component of child names. */
1721                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1722                         bcopy(tpr->pr_name + onamelen, tpr->pr_name + namelen,
1723                             strlen(tpr->pr_name + onamelen) + 1);
1724                         bcopy(pr->pr_name, tpr->pr_name, namelen);
1725                 }
1726         }
1727         if (path != NULL) {
1728                 /* Try to keep a real-rooted full pathname. */
1729                 if (fullpath_disabled && path[0] == '/' &&
1730                     strcmp(mypr->pr_path, "/"))
1731                         snprintf(pr->pr_path, sizeof(pr->pr_path), "%s%s",
1732                             mypr->pr_path, path);
1733                 else
1734                         strlcpy(pr->pr_path, path, sizeof(pr->pr_path));
1735                 pr->pr_root = root;
1736         }
1737         if (PR_HOST & ch_flags & ~pr_flags) {
1738                 if (pr->pr_flags & PR_HOST) {
1739                         /*
1740                          * Copy the parent's host info.  As with pr_ip4 above,
1741                          * the lack of a lock on the parent is not a problem;
1742                          * it is always set with allprison_lock at least
1743                          * shared, and is held exclusively here.
1744                          */
1745                         strlcpy(pr->pr_hostname, pr->pr_parent->pr_hostname,
1746                             sizeof(pr->pr_hostname));
1747                         strlcpy(pr->pr_domainname, pr->pr_parent->pr_domainname,
1748                             sizeof(pr->pr_domainname));
1749                         strlcpy(pr->pr_hostuuid, pr->pr_parent->pr_hostuuid,
1750                             sizeof(pr->pr_hostuuid));
1751                         pr->pr_hostid = pr->pr_parent->pr_hostid;
1752                 }
1753         } else if (host != NULL || domain != NULL || uuid != NULL || gothid) {
1754                 /* Set this prison, and any descendants without PR_HOST. */
1755                 if (host != NULL)
1756                         strlcpy(pr->pr_hostname, host, sizeof(pr->pr_hostname));
1757                 if (domain != NULL)
1758                         strlcpy(pr->pr_domainname, domain,
1759                             sizeof(pr->pr_domainname));
1760                 if (uuid != NULL)
1761                         strlcpy(pr->pr_hostuuid, uuid, sizeof(pr->pr_hostuuid));
1762                 if (gothid)
1763                         pr->pr_hostid = hid;
1764                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1765                         if (tpr->pr_flags & PR_HOST)
1766                                 descend = 0;
1767                         else {
1768                                 if (host != NULL)
1769                                         strlcpy(tpr->pr_hostname,
1770                                             pr->pr_hostname,
1771                                             sizeof(tpr->pr_hostname));
1772                                 if (domain != NULL)
1773                                         strlcpy(tpr->pr_domainname,
1774                                             pr->pr_domainname,
1775                                             sizeof(tpr->pr_domainname));
1776                                 if (uuid != NULL)
1777                                         strlcpy(tpr->pr_hostuuid,
1778                                             pr->pr_hostuuid,
1779                                             sizeof(tpr->pr_hostuuid));
1780                                 if (gothid)
1781                                         tpr->pr_hostid = hid;
1782                         }
1783                 }
1784         }
1785         if ((tallow = ch_allow & ~pr_allow)) {
1786                 /* Clear allow bits in all children. */
1787                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend)
1788                         tpr->pr_allow &= ~tallow;
1789         }
1790         pr->pr_allow = (pr->pr_allow & ~ch_allow) | pr_allow;
1791         /*
1792          * Persistent prisons get an extra reference, and prisons losing their
1793          * persist flag lose that reference.  Only do this for existing prisons
1794          * for now, so new ones will remain unseen until after the module
1795          * handlers have completed.
1796          */
1797         born = pr->pr_uref == 0;
1798         if (!created && (ch_flags & PR_PERSIST & (pr_flags ^ pr->pr_flags))) {
1799                 if (pr_flags & PR_PERSIST) {
1800                         pr->pr_ref++;
1801                         pr->pr_uref++;
1802                 } else {
1803                         pr->pr_ref--;
1804                         pr->pr_uref--;
1805                 }
1806         }
1807         pr->pr_flags = (pr->pr_flags & ~ch_flags) | pr_flags;
1808         mtx_unlock(&pr->pr_mtx);
1809
1810 #ifdef RACCT
1811         if (racct_enable && created)
1812                 prison_racct_attach(pr);
1813 #endif
1814
1815         /* Locks may have prevented a complete restriction of child IP
1816          * addresses.  If so, allocate some more memory and try again.
1817          */
1818 #ifdef INET
1819         while (redo_ip4) {
1820                 ip4s = pr->pr_ip4s;
1821                 ip4 = malloc(ip4s * sizeof(*ip4), M_PRISON, M_WAITOK);
1822                 mtx_lock(&pr->pr_mtx);
1823                 redo_ip4 = 0;
1824                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1825 #ifdef VIMAGE
1826                         if (tpr->pr_flags & PR_VNET) {
1827                                 descend = 0;
1828                                 continue;
1829                         }
1830 #endif
1831                         if (prison_restrict_ip4(tpr, ip4)) {
1832                                 if (ip4 != NULL)
1833                                         ip4 = NULL;
1834                                 else
1835                                         redo_ip4 = 1;
1836                         }
1837                 }
1838                 mtx_unlock(&pr->pr_mtx);
1839         }
1840 #endif
1841 #ifdef INET6
1842         while (redo_ip6) {
1843                 ip6s = pr->pr_ip6s;
1844                 ip6 = malloc(ip6s * sizeof(*ip6), M_PRISON, M_WAITOK);
1845                 mtx_lock(&pr->pr_mtx);
1846                 redo_ip6 = 0;
1847                 FOREACH_PRISON_DESCENDANT_LOCKED(pr, tpr, descend) {
1848 #ifdef VIMAGE
1849                         if (tpr->pr_flags & PR_VNET) {
1850                                 descend = 0;
1851                                 continue;
1852                         }
1853 #endif
1854                         if (prison_restrict_ip6(tpr, ip6)) {
1855                                 if (ip6 != NULL)
1856                                         ip6 = NULL;
1857                                 else
1858                                         redo_ip6 = 1;
1859                         }
1860                 }
1861                 mtx_unlock(&pr->pr_mtx);
1862         }
1863 #endif
1864
1865         /* Let the modules do their work. */
1866         sx_downgrade(&allprison_lock);
1867         if (born) {
1868                 error = osd_jail_call(pr, PR_METHOD_CREATE, opts);
1869                 if (error) {
1870                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1871                         prison_deref(pr, created
1872                             ? PD_LIST_SLOCKED
1873                             : PD_DEREF | PD_LIST_SLOCKED);
1874                         goto done_errmsg;
1875                 }
1876         }
1877         error = osd_jail_call(pr, PR_METHOD_SET, opts);
1878         if (error) {
1879                 if (born)
1880                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
1881                 prison_deref(pr, created
1882                     ? PD_LIST_SLOCKED
1883                     : PD_DEREF | PD_LIST_SLOCKED);
1884                 goto done_errmsg;
1885         }
1886
1887         /* Attach this process to the prison if requested. */
1888         if (flags & JAIL_ATTACH) {
1889                 mtx_lock(&pr->pr_mtx);
1890                 error = do_jail_attach(td, pr);
1891                 if (error) {
1892                         vfs_opterror(opts, "attach failed");
1893                         if (!created)
1894                                 prison_deref(pr, PD_DEREF);
1895                         goto done_errmsg;
1896                 }
1897         }
1898
1899 #ifdef RACCT
1900         if (racct_enable && !created) {
1901                 if (!(flags & JAIL_ATTACH))
1902                         sx_sunlock(&allprison_lock);
1903                 prison_racct_modify(pr);
1904                 if (!(flags & JAIL_ATTACH))
1905                         sx_slock(&allprison_lock);
1906         }
1907 #endif
1908
1909         td->td_retval[0] = pr->pr_id;
1910
1911         /*
1912          * Now that it is all there, drop the temporary reference from existing
1913          * prisons.  Or add a reference to newly created persistent prisons
1914          * (which was not done earlier so that the prison would not be publicly
1915          * visible).
1916          */
1917         if (!created) {
1918                 prison_deref(pr, (flags & JAIL_ATTACH)
1919                     ? PD_DEREF
1920                     : PD_DEREF | PD_LIST_SLOCKED);
1921         } else {
1922                 if (pr_flags & PR_PERSIST) {
1923                         mtx_lock(&pr->pr_mtx);
1924                         pr->pr_ref++;
1925                         pr->pr_uref++;
1926                         mtx_unlock(&pr->pr_mtx);
1927                 }
1928                 if (!(flags & JAIL_ATTACH))
1929                         sx_sunlock(&allprison_lock);
1930         }
1931
1932         goto done_free;
1933
1934  done_deref_locked:
1935         prison_deref(pr, created
1936             ? PD_LOCKED | PD_LIST_XLOCKED
1937             : PD_DEREF | PD_LOCKED | PD_LIST_XLOCKED);
1938         goto done_releroot;
1939  done_unlock_list:
1940         sx_xunlock(&allprison_lock);
1941  done_releroot:
1942         if (root != NULL)
1943                 vrele(root);
1944  done_errmsg:
1945         if (error) {
1946                 vfs_getopt(opts, "errmsg", (void **)&errmsg, &errmsg_len);
1947                 if (errmsg_len > 0) {
1948                         errmsg_pos = 2 * vfs_getopt_pos(opts, "errmsg") + 1;
1949                         if (errmsg_pos > 0) {
1950                                 if (optuio->uio_segflg == UIO_SYSSPACE)
1951                                         bcopy(errmsg,
1952                                            optuio->uio_iov[errmsg_pos].iov_base,
1953                                            errmsg_len);
1954                                 else
1955                                         copyout(errmsg,
1956                                            optuio->uio_iov[errmsg_pos].iov_base,
1957                                            errmsg_len);
1958                         }
1959                 }
1960         }
1961  done_free:
1962 #ifdef INET
1963         free(ip4, M_PRISON);
1964 #endif
1965 #ifdef INET6
1966         free(ip6, M_PRISON);
1967 #endif
1968         if (g_path != NULL)
1969                 free(g_path, M_TEMP);
1970         vfs_freeopts(opts);
1971         return (error);
1972 }
1973
1974
1975 /*
1976  * struct jail_get_args {
1977  *      struct iovec *iovp;
1978  *      unsigned int iovcnt;
1979  *      int flags;
1980  * };
1981  */
1982 int
1983 sys_jail_get(struct thread *td, struct jail_get_args *uap)
1984 {
1985         struct uio *auio;
1986         int error;
1987
1988         /* Check that we have an even number of iovecs. */
1989         if (uap->iovcnt & 1)
1990                 return (EINVAL);
1991
1992         error = copyinuio(uap->iovp, uap->iovcnt, &auio);
1993         if (error)
1994                 return (error);
1995         error = kern_jail_get(td, auio, uap->flags);
1996         if (error == 0)
1997                 error = copyout(auio->uio_iov, uap->iovp,
1998                     uap->iovcnt * sizeof (struct iovec));
1999         free(auio, M_IOV);
2000         return (error);
2001 }
2002
2003 int
2004 kern_jail_get(struct thread *td, struct uio *optuio, int flags)
2005 {
2006         struct prison *pr, *mypr;
2007         struct vfsopt *opt;
2008         struct vfsoptlist *opts;
2009         char *errmsg, *name;
2010         int error, errmsg_len, errmsg_pos, fi, i, jid, len, locked, pos;
2011
2012         if (flags & ~JAIL_GET_MASK)
2013                 return (EINVAL);
2014
2015         /* Get the parameter list. */
2016         error = vfs_buildopts(optuio, &opts);
2017         if (error)
2018                 return (error);
2019         errmsg_pos = vfs_getopt_pos(opts, "errmsg");
2020         mypr = td->td_ucred->cr_prison;
2021
2022         /*
2023          * Find the prison specified by one of: lastjid, jid, name.
2024          */
2025         sx_slock(&allprison_lock);
2026         error = vfs_copyopt(opts, "lastjid", &jid, sizeof(jid));
2027         if (error == 0) {
2028                 TAILQ_FOREACH(pr, &allprison, pr_list) {
2029                         if (pr->pr_id > jid && prison_ischild(mypr, pr)) {
2030                                 mtx_lock(&pr->pr_mtx);
2031                                 if (pr->pr_ref > 0 &&
2032                                     (pr->pr_uref > 0 || (flags & JAIL_DYING)))
2033                                         break;
2034                                 mtx_unlock(&pr->pr_mtx);
2035                         }
2036                 }
2037                 if (pr != NULL)
2038                         goto found_prison;
2039                 error = ENOENT;
2040                 vfs_opterror(opts, "no jail after %d", jid);
2041                 goto done_unlock_list;
2042         } else if (error != ENOENT)
2043                 goto done_unlock_list;
2044
2045         error = vfs_copyopt(opts, "jid", &jid, sizeof(jid));
2046         if (error == 0) {
2047                 if (jid != 0) {
2048                         pr = prison_find_child(mypr, jid);
2049                         if (pr != NULL) {
2050                                 if (pr->pr_uref == 0 && !(flags & JAIL_DYING)) {
2051                                         mtx_unlock(&pr->pr_mtx);
2052                                         error = ENOENT;
2053                                         vfs_opterror(opts, "jail %d is dying",
2054                                             jid);
2055                                         goto done_unlock_list;
2056                                 }
2057                                 goto found_prison;
2058                         }
2059                         error = ENOENT;
2060                         vfs_opterror(opts, "jail %d not found", jid);
2061                         goto done_unlock_list;
2062                 }
2063         } else if (error != ENOENT)
2064                 goto done_unlock_list;
2065
2066         error = vfs_getopt(opts, "name", (void **)&name, &len);
2067         if (error == 0) {
2068                 if (len == 0 || name[len - 1] != '\0') {
2069                         error = EINVAL;
2070                         goto done_unlock_list;
2071                 }
2072                 pr = prison_find_name(mypr, name);
2073                 if (pr != NULL) {
2074                         if (pr->pr_uref == 0 && !(flags & JAIL_DYING)) {
2075                                 mtx_unlock(&pr->pr_mtx);
2076                                 error = ENOENT;
2077                                 vfs_opterror(opts, "jail \"%s\" is dying",
2078                                     name);
2079                                 goto done_unlock_list;
2080                         }
2081                         goto found_prison;
2082                 }
2083                 error = ENOENT;
2084                 vfs_opterror(opts, "jail \"%s\" not found", name);
2085                 goto done_unlock_list;
2086         } else if (error != ENOENT)
2087                 goto done_unlock_list;
2088
2089         vfs_opterror(opts, "no jail specified");
2090         error = ENOENT;
2091         goto done_unlock_list;
2092
2093  found_prison:
2094         /* Get the parameters of the prison. */
2095         pr->pr_ref++;
2096         locked = PD_LOCKED;
2097         td->td_retval[0] = pr->pr_id;
2098         error = vfs_setopt(opts, "jid", &pr->pr_id, sizeof(pr->pr_id));
2099         if (error != 0 && error != ENOENT)
2100                 goto done_deref;
2101         i = (pr->pr_parent == mypr) ? 0 : pr->pr_parent->pr_id;
2102         error = vfs_setopt(opts, "parent", &i, sizeof(i));
2103         if (error != 0 && error != ENOENT)
2104                 goto done_deref;
2105         error = vfs_setopts(opts, "name", prison_name(mypr, pr));
2106         if (error != 0 && error != ENOENT)
2107                 goto done_deref;
2108         error = vfs_setopt(opts, "cpuset.id", &pr->pr_cpuset->cs_id,
2109             sizeof(pr->pr_cpuset->cs_id));
2110         if (error != 0 && error != ENOENT)
2111                 goto done_deref;
2112         error = vfs_setopts(opts, "path", prison_path(mypr, pr));
2113         if (error != 0 && error != ENOENT)
2114                 goto done_deref;
2115 #ifdef INET
2116         error = vfs_setopt_part(opts, "ip4.addr", pr->pr_ip4,
2117             pr->pr_ip4s * sizeof(*pr->pr_ip4));
2118         if (error != 0 && error != ENOENT)
2119                 goto done_deref;
2120 #endif
2121 #ifdef INET6
2122         error = vfs_setopt_part(opts, "ip6.addr", pr->pr_ip6,
2123             pr->pr_ip6s * sizeof(*pr->pr_ip6));
2124         if (error != 0 && error != ENOENT)
2125                 goto done_deref;
2126 #endif
2127         error = vfs_setopt(opts, "securelevel", &pr->pr_securelevel,
2128             sizeof(pr->pr_securelevel));
2129         if (error != 0 && error != ENOENT)
2130                 goto done_deref;
2131         error = vfs_setopt(opts, "children.cur", &pr->pr_childcount,
2132             sizeof(pr->pr_childcount));
2133         if (error != 0 && error != ENOENT)
2134                 goto done_deref;
2135         error = vfs_setopt(opts, "children.max", &pr->pr_childmax,
2136             sizeof(pr->pr_childmax));
2137         if (error != 0 && error != ENOENT)
2138                 goto done_deref;
2139         error = vfs_setopts(opts, "host.hostname", pr->pr_hostname);
2140         if (error != 0 && error != ENOENT)
2141                 goto done_deref;
2142         error = vfs_setopts(opts, "host.domainname", pr->pr_domainname);
2143         if (error != 0 && error != ENOENT)
2144                 goto done_deref;
2145         error = vfs_setopts(opts, "host.hostuuid", pr->pr_hostuuid);
2146         if (error != 0 && error != ENOENT)
2147                 goto done_deref;
2148 #ifdef COMPAT_FREEBSD32
2149         if (SV_PROC_FLAG(td->td_proc, SV_ILP32)) {
2150                 uint32_t hid32 = pr->pr_hostid;
2151
2152                 error = vfs_setopt(opts, "host.hostid", &hid32, sizeof(hid32));
2153         } else
2154 #endif
2155         error = vfs_setopt(opts, "host.hostid", &pr->pr_hostid,
2156             sizeof(pr->pr_hostid));
2157         if (error != 0 && error != ENOENT)
2158                 goto done_deref;
2159         error = vfs_setopt(opts, "enforce_statfs", &pr->pr_enforce_statfs,
2160             sizeof(pr->pr_enforce_statfs));
2161         if (error != 0 && error != ENOENT)
2162                 goto done_deref;
2163         error = vfs_setopt(opts, "devfs_ruleset", &pr->pr_devfs_rsnum,
2164             sizeof(pr->pr_devfs_rsnum));
2165         if (error != 0 && error != ENOENT)
2166                 goto done_deref;
2167         for (fi = 0; fi < sizeof(pr_flag_names) / sizeof(pr_flag_names[0]);
2168             fi++) {
2169                 if (pr_flag_names[fi] == NULL)
2170                         continue;
2171                 i = (pr->pr_flags & (1 << fi)) ? 1 : 0;
2172                 error = vfs_setopt(opts, pr_flag_names[fi], &i, sizeof(i));
2173                 if (error != 0 && error != ENOENT)
2174                         goto done_deref;
2175                 i = !i;
2176                 error = vfs_setopt(opts, pr_flag_nonames[fi], &i, sizeof(i));
2177                 if (error != 0 && error != ENOENT)
2178                         goto done_deref;
2179         }
2180         for (fi = 0; fi < sizeof(pr_flag_jailsys) / sizeof(pr_flag_jailsys[0]);
2181             fi++) {
2182                 i = pr->pr_flags &
2183                     (pr_flag_jailsys[fi].disable | pr_flag_jailsys[fi].new);
2184                 i = pr_flag_jailsys[fi].disable &&
2185                       (i == pr_flag_jailsys[fi].disable) ? JAIL_SYS_DISABLE
2186                     : (i == pr_flag_jailsys[fi].new) ? JAIL_SYS_NEW
2187                     : JAIL_SYS_INHERIT;
2188                 error =
2189                     vfs_setopt(opts, pr_flag_jailsys[fi].name, &i, sizeof(i));
2190                 if (error != 0 && error != ENOENT)
2191                         goto done_deref;
2192         }
2193         for (fi = 0; fi < sizeof(pr_allow_names) / sizeof(pr_allow_names[0]);
2194             fi++) {
2195                 if (pr_allow_names[fi] == NULL)
2196                         continue;
2197                 i = (pr->pr_allow & (1 << fi)) ? 1 : 0;
2198                 error = vfs_setopt(opts, pr_allow_names[fi], &i, sizeof(i));
2199                 if (error != 0 && error != ENOENT)
2200                         goto done_deref;
2201                 i = !i;
2202                 error = vfs_setopt(opts, pr_allow_nonames[fi], &i, sizeof(i));
2203                 if (error != 0 && error != ENOENT)
2204                         goto done_deref;
2205         }
2206         i = (pr->pr_uref == 0);
2207         error = vfs_setopt(opts, "dying", &i, sizeof(i));
2208         if (error != 0 && error != ENOENT)
2209                 goto done_deref;
2210         i = !i;
2211         error = vfs_setopt(opts, "nodying", &i, sizeof(i));
2212         if (error != 0 && error != ENOENT)
2213                 goto done_deref;
2214         error = vfs_setopt(opts, "osreldate", &pr->pr_osreldate,
2215             sizeof(pr->pr_osreldate));
2216         if (error != 0 && error != ENOENT)
2217                 goto done_deref;
2218         error = vfs_setopts(opts, "osrelease", pr->pr_osrelease);
2219         if (error != 0 && error != ENOENT)
2220                 goto done_deref;
2221
2222         /* Get the module parameters. */
2223         mtx_unlock(&pr->pr_mtx);
2224         locked = 0;
2225         error = osd_jail_call(pr, PR_METHOD_GET, opts);
2226         if (error)
2227                 goto done_deref;
2228         prison_deref(pr, PD_DEREF | PD_LIST_SLOCKED);
2229
2230         /* By now, all parameters should have been noted. */
2231         TAILQ_FOREACH(opt, opts, link) {
2232                 if (!opt->seen && strcmp(opt->name, "errmsg")) {
2233                         error = EINVAL;
2234                         vfs_opterror(opts, "unknown parameter: %s", opt->name);
2235                         goto done_errmsg;
2236                 }
2237         }
2238
2239         /* Write the fetched parameters back to userspace. */
2240         error = 0;
2241         TAILQ_FOREACH(opt, opts, link) {
2242                 if (opt->pos >= 0 && opt->pos != errmsg_pos) {
2243                         pos = 2 * opt->pos + 1;
2244                         optuio->uio_iov[pos].iov_len = opt->len;
2245                         if (opt->value != NULL) {
2246                                 if (optuio->uio_segflg == UIO_SYSSPACE) {
2247                                         bcopy(opt->value,
2248                                             optuio->uio_iov[pos].iov_base,
2249                                             opt->len);
2250                                 } else {
2251                                         error = copyout(opt->value,
2252                                             optuio->uio_iov[pos].iov_base,
2253                                             opt->len);
2254                                         if (error)
2255                                                 break;
2256                                 }
2257                         }
2258                 }
2259         }
2260         goto done_errmsg;
2261
2262  done_deref:
2263         prison_deref(pr, locked | PD_DEREF | PD_LIST_SLOCKED);
2264         goto done_errmsg;
2265
2266  done_unlock_list:
2267         sx_sunlock(&allprison_lock);
2268  done_errmsg:
2269         if (error && errmsg_pos >= 0) {
2270                 vfs_getopt(opts, "errmsg", (void **)&errmsg, &errmsg_len);
2271                 errmsg_pos = 2 * errmsg_pos + 1;
2272                 if (errmsg_len > 0) {
2273                         if (optuio->uio_segflg == UIO_SYSSPACE)
2274                                 bcopy(errmsg,
2275                                     optuio->uio_iov[errmsg_pos].iov_base,
2276                                     errmsg_len);
2277                         else
2278                                 copyout(errmsg,
2279                                     optuio->uio_iov[errmsg_pos].iov_base,
2280                                     errmsg_len);
2281                 }
2282         }
2283         vfs_freeopts(opts);
2284         return (error);
2285 }
2286
2287
2288 /*
2289  * struct jail_remove_args {
2290  *      int jid;
2291  * };
2292  */
2293 int
2294 sys_jail_remove(struct thread *td, struct jail_remove_args *uap)
2295 {
2296         struct prison *pr, *cpr, *lpr, *tpr;
2297         int descend, error;
2298
2299         error = priv_check(td, PRIV_JAIL_REMOVE);
2300         if (error)
2301                 return (error);
2302
2303         sx_xlock(&allprison_lock);
2304         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2305         if (pr == NULL) {
2306                 sx_xunlock(&allprison_lock);
2307                 return (EINVAL);
2308         }
2309
2310         /* Remove all descendants of this prison, then remove this prison. */
2311         pr->pr_ref++;
2312         if (!LIST_EMPTY(&pr->pr_children)) {
2313                 mtx_unlock(&pr->pr_mtx);
2314                 lpr = NULL;
2315                 FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
2316                         mtx_lock(&cpr->pr_mtx);
2317                         if (cpr->pr_ref > 0) {
2318                                 tpr = cpr;
2319                                 cpr->pr_ref++;
2320                         } else {
2321                                 /* Already removed - do not do it again. */
2322                                 tpr = NULL;
2323                         }
2324                         mtx_unlock(&cpr->pr_mtx);
2325                         if (lpr != NULL) {
2326                                 mtx_lock(&lpr->pr_mtx);
2327                                 prison_remove_one(lpr);
2328                                 sx_xlock(&allprison_lock);
2329                         }
2330                         lpr = tpr;
2331                 }
2332                 if (lpr != NULL) {
2333                         mtx_lock(&lpr->pr_mtx);
2334                         prison_remove_one(lpr);
2335                         sx_xlock(&allprison_lock);
2336                 }
2337                 mtx_lock(&pr->pr_mtx);
2338         }
2339         prison_remove_one(pr);
2340         return (0);
2341 }
2342
2343 static void
2344 prison_remove_one(struct prison *pr)
2345 {
2346         struct proc *p;
2347         int deuref;
2348
2349         /* If the prison was persistent, it is not anymore. */
2350         deuref = 0;
2351         if (pr->pr_flags & PR_PERSIST) {
2352                 pr->pr_ref--;
2353                 deuref = PD_DEUREF;
2354                 pr->pr_flags &= ~PR_PERSIST;
2355         }
2356
2357         /*
2358          * jail_remove added a reference.  If that's the only one, remove
2359          * the prison now.
2360          */
2361         KASSERT(pr->pr_ref > 0,
2362             ("prison_remove_one removing a dead prison (jid=%d)", pr->pr_id));
2363         if (pr->pr_ref == 1) {
2364                 prison_deref(pr,
2365                     deuref | PD_DEREF | PD_LOCKED | PD_LIST_XLOCKED);
2366                 return;
2367         }
2368
2369         mtx_unlock(&pr->pr_mtx);
2370         sx_xunlock(&allprison_lock);
2371         /*
2372          * Kill all processes unfortunate enough to be attached to this prison.
2373          */
2374         sx_slock(&allproc_lock);
2375         LIST_FOREACH(p, &allproc, p_list) {
2376                 PROC_LOCK(p);
2377                 if (p->p_state != PRS_NEW && p->p_ucred &&
2378                     p->p_ucred->cr_prison == pr)
2379                         kern_psignal(p, SIGKILL);
2380                 PROC_UNLOCK(p);
2381         }
2382         sx_sunlock(&allproc_lock);
2383         /* Remove the temporary reference added by jail_remove. */
2384         prison_deref(pr, deuref | PD_DEREF);
2385 }
2386
2387
2388 /*
2389  * struct jail_attach_args {
2390  *      int jid;
2391  * };
2392  */
2393 int
2394 sys_jail_attach(struct thread *td, struct jail_attach_args *uap)
2395 {
2396         struct prison *pr;
2397         int error;
2398
2399         error = priv_check(td, PRIV_JAIL_ATTACH);
2400         if (error)
2401                 return (error);
2402
2403         sx_slock(&allprison_lock);
2404         pr = prison_find_child(td->td_ucred->cr_prison, uap->jid);
2405         if (pr == NULL) {
2406                 sx_sunlock(&allprison_lock);
2407                 return (EINVAL);
2408         }
2409
2410         /*
2411          * Do not allow a process to attach to a prison that is not
2412          * considered to be "alive".
2413          */
2414         if (pr->pr_uref == 0) {
2415                 mtx_unlock(&pr->pr_mtx);
2416                 sx_sunlock(&allprison_lock);
2417                 return (EINVAL);
2418         }
2419
2420         return (do_jail_attach(td, pr));
2421 }
2422
2423 static int
2424 do_jail_attach(struct thread *td, struct prison *pr)
2425 {
2426         struct proc *p;
2427         struct ucred *newcred, *oldcred;
2428         int error;
2429
2430         /*
2431          * XXX: Note that there is a slight race here if two threads
2432          * in the same privileged process attempt to attach to two
2433          * different jails at the same time.  It is important for
2434          * user processes not to do this, or they might end up with
2435          * a process root from one prison, but attached to the jail
2436          * of another.
2437          */
2438         pr->pr_ref++;
2439         pr->pr_uref++;
2440         mtx_unlock(&pr->pr_mtx);
2441
2442         /* Let modules do whatever they need to prepare for attaching. */
2443         error = osd_jail_call(pr, PR_METHOD_ATTACH, td);
2444         if (error) {
2445                 prison_deref(pr, PD_DEREF | PD_DEUREF | PD_LIST_SLOCKED);
2446                 return (error);
2447         }
2448         sx_sunlock(&allprison_lock);
2449
2450         /*
2451          * Reparent the newly attached process to this jail.
2452          */
2453         p = td->td_proc;
2454         error = cpuset_setproc_update_set(p, pr->pr_cpuset);
2455         if (error)
2456                 goto e_revert_osd;
2457
2458         vn_lock(pr->pr_root, LK_EXCLUSIVE | LK_RETRY);
2459         if ((error = change_dir(pr->pr_root, td)) != 0)
2460                 goto e_unlock;
2461 #ifdef MAC
2462         if ((error = mac_vnode_check_chroot(td->td_ucred, pr->pr_root)))
2463                 goto e_unlock;
2464 #endif
2465         VOP_UNLOCK(pr->pr_root, 0);
2466         if ((error = change_root(pr->pr_root, td)))
2467                 goto e_revert_osd;
2468
2469         newcred = crget();
2470         PROC_LOCK(p);
2471         oldcred = crcopysafe(p, newcred);
2472         newcred->cr_prison = pr;
2473         p->p_ucred = newcred;
2474         setsugid(p);
2475         PROC_UNLOCK(p);
2476 #ifdef RACCT
2477         racct_proc_ucred_changed(p, oldcred, newcred);
2478 #endif
2479         prison_deref(oldcred->cr_prison, PD_DEREF | PD_DEUREF);
2480         crfree(oldcred);
2481         return (0);
2482
2483  e_unlock:
2484         VOP_UNLOCK(pr->pr_root, 0);
2485  e_revert_osd:
2486         /* Tell modules this thread is still in its old jail after all. */
2487         (void)osd_jail_call(td->td_ucred->cr_prison, PR_METHOD_ATTACH, td);
2488         prison_deref(pr, PD_DEREF | PD_DEUREF);
2489         return (error);
2490 }
2491
2492
2493 /*
2494  * Returns a locked prison instance, or NULL on failure.
2495  */
2496 struct prison *
2497 prison_find(int prid)
2498 {
2499         struct prison *pr;
2500
2501         sx_assert(&allprison_lock, SX_LOCKED);
2502         TAILQ_FOREACH(pr, &allprison, pr_list) {
2503                 if (pr->pr_id == prid) {
2504                         mtx_lock(&pr->pr_mtx);
2505                         if (pr->pr_ref > 0)
2506                                 return (pr);
2507                         mtx_unlock(&pr->pr_mtx);
2508                 }
2509         }
2510         return (NULL);
2511 }
2512
2513 /*
2514  * Find a prison that is a descendant of mypr.  Returns a locked prison or NULL.
2515  */
2516 struct prison *
2517 prison_find_child(struct prison *mypr, int prid)
2518 {
2519         struct prison *pr;
2520         int descend;
2521
2522         sx_assert(&allprison_lock, SX_LOCKED);
2523         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2524                 if (pr->pr_id == prid) {
2525                         mtx_lock(&pr->pr_mtx);
2526                         if (pr->pr_ref > 0)
2527                                 return (pr);
2528                         mtx_unlock(&pr->pr_mtx);
2529                 }
2530         }
2531         return (NULL);
2532 }
2533
2534 /*
2535  * Look for the name relative to mypr.  Returns a locked prison or NULL.
2536  */
2537 struct prison *
2538 prison_find_name(struct prison *mypr, const char *name)
2539 {
2540         struct prison *pr, *deadpr;
2541         size_t mylen;
2542         int descend;
2543
2544         sx_assert(&allprison_lock, SX_LOCKED);
2545         mylen = (mypr == &prison0) ? 0 : strlen(mypr->pr_name) + 1;
2546  again:
2547         deadpr = NULL;
2548         FOREACH_PRISON_DESCENDANT(mypr, pr, descend) {
2549                 if (!strcmp(pr->pr_name + mylen, name)) {
2550                         mtx_lock(&pr->pr_mtx);
2551                         if (pr->pr_ref > 0) {
2552                                 if (pr->pr_uref > 0)
2553                                         return (pr);
2554                                 deadpr = pr;
2555                         }
2556                         mtx_unlock(&pr->pr_mtx);
2557                 }
2558         }
2559         /* There was no valid prison - perhaps there was a dying one. */
2560         if (deadpr != NULL) {
2561                 mtx_lock(&deadpr->pr_mtx);
2562                 if (deadpr->pr_ref == 0) {
2563                         mtx_unlock(&deadpr->pr_mtx);
2564                         goto again;
2565                 }
2566         }
2567         return (deadpr);
2568 }
2569
2570 /*
2571  * See if a prison has the specific flag set.
2572  */
2573 int
2574 prison_flag(struct ucred *cred, unsigned flag)
2575 {
2576
2577         /* This is an atomic read, so no locking is necessary. */
2578         return (cred->cr_prison->pr_flags & flag);
2579 }
2580
2581 int
2582 prison_allow(struct ucred *cred, unsigned flag)
2583 {
2584
2585         /* This is an atomic read, so no locking is necessary. */
2586         return (cred->cr_prison->pr_allow & flag);
2587 }
2588
2589 /*
2590  * Remove a prison reference.  If that was the last reference, remove the
2591  * prison itself - but not in this context in case there are locks held.
2592  */
2593 void
2594 prison_free_locked(struct prison *pr)
2595 {
2596         int ref;
2597
2598         mtx_assert(&pr->pr_mtx, MA_OWNED);
2599         ref = --pr->pr_ref;
2600         mtx_unlock(&pr->pr_mtx);
2601         if (ref == 0)
2602                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2603 }
2604
2605 void
2606 prison_free(struct prison *pr)
2607 {
2608
2609         mtx_lock(&pr->pr_mtx);
2610         prison_free_locked(pr);
2611 }
2612
2613 /*
2614  * Complete a call to either prison_free or prison_proc_free.
2615  */
2616 static void
2617 prison_complete(void *context, int pending)
2618 {
2619         struct prison *pr = context;
2620
2621         mtx_lock(&pr->pr_mtx);
2622         prison_deref(pr, pr->pr_uref
2623             ? PD_DEREF | PD_DEUREF | PD_LOCKED : PD_LOCKED);
2624 }
2625
2626 /*
2627  * Remove a prison reference (usually).  This internal version assumes no
2628  * mutexes are held, except perhaps the prison itself.  If there are no more
2629  * references, release and delist the prison.  On completion, the prison lock
2630  * and the allprison lock are both unlocked.
2631  */
2632 static void
2633 prison_deref(struct prison *pr, int flags)
2634 {
2635         struct prison *ppr, *tpr;
2636         int ref, lasturef;
2637
2638         if (!(flags & PD_LOCKED))
2639                 mtx_lock(&pr->pr_mtx);
2640         for (;;) {
2641                 if (flags & PD_DEUREF) {
2642                         KASSERT(pr->pr_uref > 0,
2643                             ("prison_deref PD_DEUREF on a dead prison (jid=%d)",
2644                              pr->pr_id));
2645                         pr->pr_uref--;
2646                         lasturef = pr->pr_uref == 0;
2647                         if (lasturef)
2648                                 pr->pr_ref++;
2649                         KASSERT(prison0.pr_uref != 0, ("prison0 pr_uref=0"));
2650                 } else
2651                         lasturef = 0;
2652                 if (flags & PD_DEREF) {
2653                         KASSERT(pr->pr_ref > 0,
2654                             ("prison_deref PD_DEREF on a dead prison (jid=%d)",
2655                              pr->pr_id));
2656                         pr->pr_ref--;
2657                 }
2658                 ref = pr->pr_ref;
2659                 mtx_unlock(&pr->pr_mtx);
2660
2661                 /*
2662                  * Tell the modules if the last user reference was removed
2663                  * (even it sticks around in dying state).
2664                  */
2665                 if (lasturef) {
2666                         if (!(flags & (PD_LIST_SLOCKED | PD_LIST_XLOCKED))) {
2667                                 if (ref > 1) {
2668                                         sx_slock(&allprison_lock);
2669                                         flags |= PD_LIST_SLOCKED;
2670                                 } else {
2671                                         sx_xlock(&allprison_lock);
2672                                         flags |= PD_LIST_XLOCKED;
2673                                 }
2674                         }
2675                         (void)osd_jail_call(pr, PR_METHOD_REMOVE, NULL);
2676                         mtx_lock(&pr->pr_mtx);
2677                         ref = --pr->pr_ref;
2678                         mtx_unlock(&pr->pr_mtx);
2679                 }
2680
2681                 /* If the prison still has references, nothing else to do. */
2682                 if (ref > 0) {
2683                         if (flags & PD_LIST_SLOCKED)
2684                                 sx_sunlock(&allprison_lock);
2685                         else if (flags & PD_LIST_XLOCKED)
2686                                 sx_xunlock(&allprison_lock);
2687                         return;
2688                 }
2689
2690                 if (flags & PD_LIST_SLOCKED) {
2691                         if (!sx_try_upgrade(&allprison_lock)) {
2692                                 sx_sunlock(&allprison_lock);
2693                                 sx_xlock(&allprison_lock);
2694                         }
2695                 } else if (!(flags & PD_LIST_XLOCKED))
2696                         sx_xlock(&allprison_lock);
2697
2698                 TAILQ_REMOVE(&allprison, pr, pr_list);
2699                 LIST_REMOVE(pr, pr_sibling);
2700                 ppr = pr->pr_parent;
2701                 for (tpr = ppr; tpr != NULL; tpr = tpr->pr_parent)
2702                         tpr->pr_childcount--;
2703                 sx_xunlock(&allprison_lock);
2704
2705 #ifdef VIMAGE
2706                 if (pr->pr_vnet != ppr->pr_vnet)
2707                         vnet_destroy(pr->pr_vnet);
2708 #endif
2709                 if (pr->pr_root != NULL)
2710                         vrele(pr->pr_root);
2711                 mtx_destroy(&pr->pr_mtx);
2712 #ifdef INET
2713                 free(pr->pr_ip4, M_PRISON);
2714 #endif
2715 #ifdef INET6
2716                 free(pr->pr_ip6, M_PRISON);
2717 #endif
2718                 if (pr->pr_cpuset != NULL)
2719                         cpuset_rel(pr->pr_cpuset);
2720                 osd_jail_exit(pr);
2721 #ifdef RACCT
2722                 if (racct_enable)
2723                         prison_racct_detach(pr);
2724 #endif
2725                 free(pr, M_PRISON);
2726
2727                 /* Removing a prison frees a reference on its parent. */
2728                 pr = ppr;
2729                 mtx_lock(&pr->pr_mtx);
2730                 flags = PD_DEREF | PD_DEUREF;
2731         }
2732 }
2733
2734 void
2735 prison_hold_locked(struct prison *pr)
2736 {
2737
2738         mtx_assert(&pr->pr_mtx, MA_OWNED);
2739         KASSERT(pr->pr_ref > 0,
2740             ("Trying to hold dead prison (jid=%d).", pr->pr_id));
2741         pr->pr_ref++;
2742 }
2743
2744 void
2745 prison_hold(struct prison *pr)
2746 {
2747
2748         mtx_lock(&pr->pr_mtx);
2749         prison_hold_locked(pr);
2750         mtx_unlock(&pr->pr_mtx);
2751 }
2752
2753 void
2754 prison_proc_hold(struct prison *pr)
2755 {
2756
2757         mtx_lock(&pr->pr_mtx);
2758         KASSERT(pr->pr_uref > 0,
2759             ("Cannot add a process to a non-alive prison (jid=%d)", pr->pr_id));
2760         pr->pr_uref++;
2761         mtx_unlock(&pr->pr_mtx);
2762 }
2763
2764 void
2765 prison_proc_free(struct prison *pr)
2766 {
2767
2768         mtx_lock(&pr->pr_mtx);
2769         KASSERT(pr->pr_uref > 0,
2770             ("Trying to kill a process in a dead prison (jid=%d)", pr->pr_id));
2771         if (pr->pr_uref > 1)
2772                 pr->pr_uref--;
2773         else {
2774                 /*
2775                  * Don't remove the last user reference in this context, which
2776                  * is expected to be a process that is not only locked, but
2777                  * also half dead.
2778                  */
2779                 pr->pr_ref++;
2780                 mtx_unlock(&pr->pr_mtx);
2781                 taskqueue_enqueue(taskqueue_thread, &pr->pr_task);
2782                 return;
2783         }
2784         mtx_unlock(&pr->pr_mtx);
2785 }
2786
2787
2788 #ifdef INET
2789 /*
2790  * Restrict a prison's IP address list with its parent's, possibly replacing
2791  * it.  Return true if the replacement buffer was used (or would have been).
2792  */
2793 static int
2794 prison_restrict_ip4(struct prison *pr, struct in_addr *newip4)
2795 {
2796         int ii, ij, used;
2797         struct prison *ppr;
2798
2799         ppr = pr->pr_parent;
2800         if (!(pr->pr_flags & PR_IP4_USER)) {
2801                 /* This has no user settings, so just copy the parent's list. */
2802                 if (pr->pr_ip4s < ppr->pr_ip4s) {
2803                         /*
2804                          * There's no room for the parent's list.  Use the
2805                          * new list buffer, which is assumed to be big enough
2806                          * (if it was passed).  If there's no buffer, try to
2807                          * allocate one.
2808                          */
2809                         used = 1;
2810                         if (newip4 == NULL) {
2811                                 newip4 = malloc(ppr->pr_ip4s * sizeof(*newip4),
2812                                     M_PRISON, M_NOWAIT);
2813                                 if (newip4 != NULL)
2814                                         used = 0;
2815                         }
2816                         if (newip4 != NULL) {
2817                                 bcopy(ppr->pr_ip4, newip4,
2818                                     ppr->pr_ip4s * sizeof(*newip4));
2819                                 free(pr->pr_ip4, M_PRISON);
2820                                 pr->pr_ip4 = newip4;
2821                                 pr->pr_ip4s = ppr->pr_ip4s;
2822                         }
2823                         return (used);
2824                 }
2825                 pr->pr_ip4s = ppr->pr_ip4s;
2826                 if (pr->pr_ip4s > 0)
2827                         bcopy(ppr->pr_ip4, pr->pr_ip4,
2828                             pr->pr_ip4s * sizeof(*newip4));
2829                 else if (pr->pr_ip4 != NULL) {
2830                         free(pr->pr_ip4, M_PRISON);
2831                         pr->pr_ip4 = NULL;
2832                 }
2833         } else if (pr->pr_ip4s > 0) {
2834                 /* Remove addresses that aren't in the parent. */
2835                 for (ij = 0; ij < ppr->pr_ip4s; ij++)
2836                         if (pr->pr_ip4[0].s_addr == ppr->pr_ip4[ij].s_addr)
2837                                 break;
2838                 if (ij < ppr->pr_ip4s)
2839                         ii = 1;
2840                 else {
2841                         bcopy(pr->pr_ip4 + 1, pr->pr_ip4,
2842                             --pr->pr_ip4s * sizeof(*pr->pr_ip4));
2843                         ii = 0;
2844                 }
2845                 for (ij = 1; ii < pr->pr_ip4s; ) {
2846                         if (pr->pr_ip4[ii].s_addr == ppr->pr_ip4[0].s_addr) {
2847                                 ii++;
2848                                 continue;
2849                         }
2850                         switch (ij >= ppr->pr_ip4s ? -1 :
2851                                 qcmp_v4(&pr->pr_ip4[ii], &ppr->pr_ip4[ij])) {
2852                         case -1:
2853                                 bcopy(pr->pr_ip4 + ii + 1, pr->pr_ip4 + ii,
2854                                     (--pr->pr_ip4s - ii) * sizeof(*pr->pr_ip4));
2855                                 break;
2856                         case 0:
2857                                 ii++;
2858                                 ij++;
2859                                 break;
2860                         case 1:
2861                                 ij++;
2862                                 break;
2863                         }
2864                 }
2865                 if (pr->pr_ip4s == 0) {
2866                         pr->pr_flags |= PR_IP4_DISABLE;
2867                         free(pr->pr_ip4, M_PRISON);
2868                         pr->pr_ip4 = NULL;
2869                 }
2870         }
2871         return (0);
2872 }
2873
2874 /*
2875  * Pass back primary IPv4 address of this jail.
2876  *
2877  * If not restricted return success but do not alter the address.  Caller has
2878  * to make sure to initialize it correctly (e.g. INADDR_ANY).
2879  *
2880  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv4.
2881  * Address returned in NBO.
2882  */
2883 int
2884 prison_get_ip4(struct ucred *cred, struct in_addr *ia)
2885 {
2886         struct prison *pr;
2887
2888         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2889         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2890
2891         pr = cred->cr_prison;
2892         if (!(pr->pr_flags & PR_IP4))
2893                 return (0);
2894         mtx_lock(&pr->pr_mtx);
2895         if (!(pr->pr_flags & PR_IP4)) {
2896                 mtx_unlock(&pr->pr_mtx);
2897                 return (0);
2898         }
2899         if (pr->pr_ip4 == NULL) {
2900                 mtx_unlock(&pr->pr_mtx);
2901                 return (EAFNOSUPPORT);
2902         }
2903
2904         ia->s_addr = pr->pr_ip4[0].s_addr;
2905         mtx_unlock(&pr->pr_mtx);
2906         return (0);
2907 }
2908
2909 /*
2910  * Return 1 if we should do proper source address selection or are not jailed.
2911  * We will return 0 if we should bypass source address selection in favour
2912  * of the primary jail IPv4 address. Only in this case *ia will be updated and
2913  * returned in NBO.
2914  * Return EAFNOSUPPORT, in case this jail does not allow IPv4.
2915  */
2916 int
2917 prison_saddrsel_ip4(struct ucred *cred, struct in_addr *ia)
2918 {
2919         struct prison *pr;
2920         struct in_addr lia;
2921         int error;
2922
2923         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2924         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2925
2926         if (!jailed(cred))
2927                 return (1);
2928
2929         pr = cred->cr_prison;
2930         if (pr->pr_flags & PR_IP4_SADDRSEL)
2931                 return (1);
2932
2933         lia.s_addr = INADDR_ANY;
2934         error = prison_get_ip4(cred, &lia);
2935         if (error)
2936                 return (error);
2937         if (lia.s_addr == INADDR_ANY)
2938                 return (1);
2939
2940         ia->s_addr = lia.s_addr;
2941         return (0);
2942 }
2943
2944 /*
2945  * Return true if pr1 and pr2 have the same IPv4 address restrictions.
2946  */
2947 int
2948 prison_equal_ip4(struct prison *pr1, struct prison *pr2)
2949 {
2950
2951         if (pr1 == pr2)
2952                 return (1);
2953
2954         /*
2955          * No need to lock since the PR_IP4_USER flag can't be altered for
2956          * existing prisons.
2957          */
2958         while (pr1 != &prison0 &&
2959 #ifdef VIMAGE
2960                !(pr1->pr_flags & PR_VNET) &&
2961 #endif
2962                !(pr1->pr_flags & PR_IP4_USER))
2963                 pr1 = pr1->pr_parent;
2964         while (pr2 != &prison0 &&
2965 #ifdef VIMAGE
2966                !(pr2->pr_flags & PR_VNET) &&
2967 #endif
2968                !(pr2->pr_flags & PR_IP4_USER))
2969                 pr2 = pr2->pr_parent;
2970         return (pr1 == pr2);
2971 }
2972
2973 /*
2974  * Make sure our (source) address is set to something meaningful to this
2975  * jail.
2976  *
2977  * Returns 0 if jail doesn't restrict IPv4 or if address belongs to jail,
2978  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
2979  * doesn't allow IPv4.  Address passed in in NBO and returned in NBO.
2980  */
2981 int
2982 prison_local_ip4(struct ucred *cred, struct in_addr *ia)
2983 {
2984         struct prison *pr;
2985         struct in_addr ia0;
2986         int error;
2987
2988         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
2989         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
2990
2991         pr = cred->cr_prison;
2992         if (!(pr->pr_flags & PR_IP4))
2993                 return (0);
2994         mtx_lock(&pr->pr_mtx);
2995         if (!(pr->pr_flags & PR_IP4)) {
2996                 mtx_unlock(&pr->pr_mtx);
2997                 return (0);
2998         }
2999         if (pr->pr_ip4 == NULL) {
3000                 mtx_unlock(&pr->pr_mtx);
3001                 return (EAFNOSUPPORT);
3002         }
3003
3004         ia0.s_addr = ntohl(ia->s_addr);
3005         if (ia0.s_addr == INADDR_LOOPBACK) {
3006                 ia->s_addr = pr->pr_ip4[0].s_addr;
3007                 mtx_unlock(&pr->pr_mtx);
3008                 return (0);
3009         }
3010
3011         if (ia0.s_addr == INADDR_ANY) {
3012                 /*
3013                  * In case there is only 1 IPv4 address, bind directly.
3014                  */
3015                 if (pr->pr_ip4s == 1)
3016                         ia->s_addr = pr->pr_ip4[0].s_addr;
3017                 mtx_unlock(&pr->pr_mtx);
3018                 return (0);
3019         }
3020
3021         error = _prison_check_ip4(pr, ia);
3022         mtx_unlock(&pr->pr_mtx);
3023         return (error);
3024 }
3025
3026 /*
3027  * Rewrite destination address in case we will connect to loopback address.
3028  *
3029  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv4.
3030  * Address passed in in NBO and returned in NBO.
3031  */
3032 int
3033 prison_remote_ip4(struct ucred *cred, struct in_addr *ia)
3034 {
3035         struct prison *pr;
3036
3037         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3038         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
3039
3040         pr = cred->cr_prison;
3041         if (!(pr->pr_flags & PR_IP4))
3042                 return (0);
3043         mtx_lock(&pr->pr_mtx);
3044         if (!(pr->pr_flags & PR_IP4)) {
3045                 mtx_unlock(&pr->pr_mtx);
3046                 return (0);
3047         }
3048         if (pr->pr_ip4 == NULL) {
3049                 mtx_unlock(&pr->pr_mtx);
3050                 return (EAFNOSUPPORT);
3051         }
3052
3053         if (ntohl(ia->s_addr) == INADDR_LOOPBACK) {
3054                 ia->s_addr = pr->pr_ip4[0].s_addr;
3055                 mtx_unlock(&pr->pr_mtx);
3056                 return (0);
3057         }
3058
3059         /*
3060          * Return success because nothing had to be changed.
3061          */
3062         mtx_unlock(&pr->pr_mtx);
3063         return (0);
3064 }
3065
3066 /*
3067  * Check if given address belongs to the jail referenced by cred/prison.
3068  *
3069  * Returns 0 if jail doesn't restrict IPv4 or if address belongs to jail,
3070  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3071  * doesn't allow IPv4.  Address passed in in NBO.
3072  */
3073 static int
3074 _prison_check_ip4(struct prison *pr, struct in_addr *ia)
3075 {
3076         int i, a, z, d;
3077
3078         /*
3079          * Check the primary IP.
3080          */
3081         if (pr->pr_ip4[0].s_addr == ia->s_addr)
3082                 return (0);
3083
3084         /*
3085          * All the other IPs are sorted so we can do a binary search.
3086          */
3087         a = 0;
3088         z = pr->pr_ip4s - 2;
3089         while (a <= z) {
3090                 i = (a + z) / 2;
3091                 d = qcmp_v4(&pr->pr_ip4[i+1], ia);
3092                 if (d > 0)
3093                         z = i - 1;
3094                 else if (d < 0)
3095                         a = i + 1;
3096                 else
3097                         return (0);
3098         }
3099
3100         return (EADDRNOTAVAIL);
3101 }
3102
3103 int
3104 prison_check_ip4(struct ucred *cred, struct in_addr *ia)
3105 {
3106         struct prison *pr;
3107         int error;
3108
3109         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3110         KASSERT(ia != NULL, ("%s: ia is NULL", __func__));
3111
3112         pr = cred->cr_prison;
3113         if (!(pr->pr_flags & PR_IP4))
3114                 return (0);
3115         mtx_lock(&pr->pr_mtx);
3116         if (!(pr->pr_flags & PR_IP4)) {
3117                 mtx_unlock(&pr->pr_mtx);
3118                 return (0);
3119         }
3120         if (pr->pr_ip4 == NULL) {
3121                 mtx_unlock(&pr->pr_mtx);
3122                 return (EAFNOSUPPORT);
3123         }
3124
3125         error = _prison_check_ip4(pr, ia);
3126         mtx_unlock(&pr->pr_mtx);
3127         return (error);
3128 }
3129 #endif
3130
3131 #ifdef INET6
3132 static int
3133 prison_restrict_ip6(struct prison *pr, struct in6_addr *newip6)
3134 {
3135         int ii, ij, used;
3136         struct prison *ppr;
3137
3138         ppr = pr->pr_parent;
3139         if (!(pr->pr_flags & PR_IP6_USER)) {
3140                 /* This has no user settings, so just copy the parent's list. */
3141                 if (pr->pr_ip6s < ppr->pr_ip6s) {
3142                         /*
3143                          * There's no room for the parent's list.  Use the
3144                          * new list buffer, which is assumed to be big enough
3145                          * (if it was passed).  If there's no buffer, try to
3146                          * allocate one.
3147                          */
3148                         used = 1;
3149                         if (newip6 == NULL) {
3150                                 newip6 = malloc(ppr->pr_ip6s * sizeof(*newip6),
3151                                     M_PRISON, M_NOWAIT);
3152                                 if (newip6 != NULL)
3153                                         used = 0;
3154                         }
3155                         if (newip6 != NULL) {
3156                                 bcopy(ppr->pr_ip6, newip6,
3157                                     ppr->pr_ip6s * sizeof(*newip6));
3158                                 free(pr->pr_ip6, M_PRISON);
3159                                 pr->pr_ip6 = newip6;
3160                                 pr->pr_ip6s = ppr->pr_ip6s;
3161                         }
3162                         return (used);
3163                 }
3164                 pr->pr_ip6s = ppr->pr_ip6s;
3165                 if (pr->pr_ip6s > 0)
3166                         bcopy(ppr->pr_ip6, pr->pr_ip6,
3167                             pr->pr_ip6s * sizeof(*newip6));
3168                 else if (pr->pr_ip6 != NULL) {
3169                         free(pr->pr_ip6, M_PRISON);
3170                         pr->pr_ip6 = NULL;
3171                 }
3172         } else if (pr->pr_ip6s > 0) {
3173                 /* Remove addresses that aren't in the parent. */
3174                 for (ij = 0; ij < ppr->pr_ip6s; ij++)
3175                         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[0],
3176                             &ppr->pr_ip6[ij]))
3177                                 break;
3178                 if (ij < ppr->pr_ip6s)
3179                         ii = 1;
3180                 else {
3181                         bcopy(pr->pr_ip6 + 1, pr->pr_ip6,
3182                             --pr->pr_ip6s * sizeof(*pr->pr_ip6));
3183                         ii = 0;
3184                 }
3185                 for (ij = 1; ii < pr->pr_ip6s; ) {
3186                         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[ii],
3187                             &ppr->pr_ip6[0])) {
3188                                 ii++;
3189                                 continue;
3190                         }
3191                         switch (ij >= ppr->pr_ip6s ? -1 :
3192                                 qcmp_v6(&pr->pr_ip6[ii], &ppr->pr_ip6[ij])) {
3193                         case -1:
3194                                 bcopy(pr->pr_ip6 + ii + 1, pr->pr_ip6 + ii,
3195                                     (--pr->pr_ip6s - ii) * sizeof(*pr->pr_ip6));
3196                                 break;
3197                         case 0:
3198                                 ii++;
3199                                 ij++;
3200                                 break;
3201                         case 1:
3202                                 ij++;
3203                                 break;
3204                         }
3205                 }
3206                 if (pr->pr_ip6s == 0) {
3207                         pr->pr_flags |= PR_IP6_DISABLE;
3208                         free(pr->pr_ip6, M_PRISON);
3209                         pr->pr_ip6 = NULL;
3210                 }
3211         }
3212         return 0;
3213 }
3214
3215 /*
3216  * Pass back primary IPv6 address for this jail.
3217  *
3218  * If not restricted return success but do not alter the address.  Caller has
3219  * to make sure to initialize it correctly (e.g. IN6ADDR_ANY_INIT).
3220  *
3221  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv6.
3222  */
3223 int
3224 prison_get_ip6(struct ucred *cred, struct in6_addr *ia6)
3225 {
3226         struct prison *pr;
3227
3228         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3229         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3230
3231         pr = cred->cr_prison;
3232         if (!(pr->pr_flags & PR_IP6))
3233                 return (0);
3234         mtx_lock(&pr->pr_mtx);
3235         if (!(pr->pr_flags & PR_IP6)) {
3236                 mtx_unlock(&pr->pr_mtx);
3237                 return (0);
3238         }
3239         if (pr->pr_ip6 == NULL) {
3240                 mtx_unlock(&pr->pr_mtx);
3241                 return (EAFNOSUPPORT);
3242         }
3243
3244         bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3245         mtx_unlock(&pr->pr_mtx);
3246         return (0);
3247 }
3248
3249 /*
3250  * Return 1 if we should do proper source address selection or are not jailed.
3251  * We will return 0 if we should bypass source address selection in favour
3252  * of the primary jail IPv6 address. Only in this case *ia will be updated and
3253  * returned in NBO.
3254  * Return EAFNOSUPPORT, in case this jail does not allow IPv6.
3255  */
3256 int
3257 prison_saddrsel_ip6(struct ucred *cred, struct in6_addr *ia6)
3258 {
3259         struct prison *pr;
3260         struct in6_addr lia6;
3261         int error;
3262
3263         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3264         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3265
3266         if (!jailed(cred))
3267                 return (1);
3268
3269         pr = cred->cr_prison;
3270         if (pr->pr_flags & PR_IP6_SADDRSEL)
3271                 return (1);
3272
3273         lia6 = in6addr_any;
3274         error = prison_get_ip6(cred, &lia6);
3275         if (error)
3276                 return (error);
3277         if (IN6_IS_ADDR_UNSPECIFIED(&lia6))
3278                 return (1);
3279
3280         bcopy(&lia6, ia6, sizeof(struct in6_addr));
3281         return (0);
3282 }
3283
3284 /*
3285  * Return true if pr1 and pr2 have the same IPv6 address restrictions.
3286  */
3287 int
3288 prison_equal_ip6(struct prison *pr1, struct prison *pr2)
3289 {
3290
3291         if (pr1 == pr2)
3292                 return (1);
3293
3294         while (pr1 != &prison0 &&
3295 #ifdef VIMAGE
3296                !(pr1->pr_flags & PR_VNET) &&
3297 #endif
3298                !(pr1->pr_flags & PR_IP6_USER))
3299                 pr1 = pr1->pr_parent;
3300         while (pr2 != &prison0 &&
3301 #ifdef VIMAGE
3302                !(pr2->pr_flags & PR_VNET) &&
3303 #endif
3304                !(pr2->pr_flags & PR_IP6_USER))
3305                 pr2 = pr2->pr_parent;
3306         return (pr1 == pr2);
3307 }
3308
3309 /*
3310  * Make sure our (source) address is set to something meaningful to this jail.
3311  *
3312  * v6only should be set based on (inp->inp_flags & IN6P_IPV6_V6ONLY != 0)
3313  * when needed while binding.
3314  *
3315  * Returns 0 if jail doesn't restrict IPv6 or if address belongs to jail,
3316  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3317  * doesn't allow IPv6.
3318  */
3319 int
3320 prison_local_ip6(struct ucred *cred, struct in6_addr *ia6, int v6only)
3321 {
3322         struct prison *pr;
3323         int error;
3324
3325         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3326         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3327
3328         pr = cred->cr_prison;
3329         if (!(pr->pr_flags & PR_IP6))
3330                 return (0);
3331         mtx_lock(&pr->pr_mtx);
3332         if (!(pr->pr_flags & PR_IP6)) {
3333                 mtx_unlock(&pr->pr_mtx);
3334                 return (0);
3335         }
3336         if (pr->pr_ip6 == NULL) {
3337                 mtx_unlock(&pr->pr_mtx);
3338                 return (EAFNOSUPPORT);
3339         }
3340
3341         if (IN6_IS_ADDR_LOOPBACK(ia6)) {
3342                 bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3343                 mtx_unlock(&pr->pr_mtx);
3344                 return (0);
3345         }
3346
3347         if (IN6_IS_ADDR_UNSPECIFIED(ia6)) {
3348                 /*
3349                  * In case there is only 1 IPv6 address, and v6only is true,
3350                  * then bind directly.
3351                  */
3352                 if (v6only != 0 && pr->pr_ip6s == 1)
3353                         bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3354                 mtx_unlock(&pr->pr_mtx);
3355                 return (0);
3356         }
3357
3358         error = _prison_check_ip6(pr, ia6);
3359         mtx_unlock(&pr->pr_mtx);
3360         return (error);
3361 }
3362
3363 /*
3364  * Rewrite destination address in case we will connect to loopback address.
3365  *
3366  * Returns 0 on success, EAFNOSUPPORT if the jail doesn't allow IPv6.
3367  */
3368 int
3369 prison_remote_ip6(struct ucred *cred, struct in6_addr *ia6)
3370 {
3371         struct prison *pr;
3372
3373         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3374         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3375
3376         pr = cred->cr_prison;
3377         if (!(pr->pr_flags & PR_IP6))
3378                 return (0);
3379         mtx_lock(&pr->pr_mtx);
3380         if (!(pr->pr_flags & PR_IP6)) {
3381                 mtx_unlock(&pr->pr_mtx);
3382                 return (0);
3383         }
3384         if (pr->pr_ip6 == NULL) {
3385                 mtx_unlock(&pr->pr_mtx);
3386                 return (EAFNOSUPPORT);
3387         }
3388
3389         if (IN6_IS_ADDR_LOOPBACK(ia6)) {
3390                 bcopy(&pr->pr_ip6[0], ia6, sizeof(struct in6_addr));
3391                 mtx_unlock(&pr->pr_mtx);
3392                 return (0);
3393         }
3394
3395         /*
3396          * Return success because nothing had to be changed.
3397          */
3398         mtx_unlock(&pr->pr_mtx);
3399         return (0);
3400 }
3401
3402 /*
3403  * Check if given address belongs to the jail referenced by cred/prison.
3404  *
3405  * Returns 0 if jail doesn't restrict IPv6 or if address belongs to jail,
3406  * EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if the jail
3407  * doesn't allow IPv6.
3408  */
3409 static int
3410 _prison_check_ip6(struct prison *pr, struct in6_addr *ia6)
3411 {
3412         int i, a, z, d;
3413
3414         /*
3415          * Check the primary IP.
3416          */
3417         if (IN6_ARE_ADDR_EQUAL(&pr->pr_ip6[0], ia6))
3418                 return (0);
3419
3420         /*
3421          * All the other IPs are sorted so we can do a binary search.
3422          */
3423         a = 0;
3424         z = pr->pr_ip6s - 2;
3425         while (a <= z) {
3426                 i = (a + z) / 2;
3427                 d = qcmp_v6(&pr->pr_ip6[i+1], ia6);
3428                 if (d > 0)
3429                         z = i - 1;
3430                 else if (d < 0)
3431                         a = i + 1;
3432                 else
3433                         return (0);
3434         }
3435
3436         return (EADDRNOTAVAIL);
3437 }
3438
3439 int
3440 prison_check_ip6(struct ucred *cred, struct in6_addr *ia6)
3441 {
3442         struct prison *pr;
3443         int error;
3444
3445         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3446         KASSERT(ia6 != NULL, ("%s: ia6 is NULL", __func__));
3447
3448         pr = cred->cr_prison;
3449         if (!(pr->pr_flags & PR_IP6))
3450                 return (0);
3451         mtx_lock(&pr->pr_mtx);
3452         if (!(pr->pr_flags & PR_IP6)) {
3453                 mtx_unlock(&pr->pr_mtx);
3454                 return (0);
3455         }
3456         if (pr->pr_ip6 == NULL) {
3457                 mtx_unlock(&pr->pr_mtx);
3458                 return (EAFNOSUPPORT);
3459         }
3460
3461         error = _prison_check_ip6(pr, ia6);
3462         mtx_unlock(&pr->pr_mtx);
3463         return (error);
3464 }
3465 #endif
3466
3467 /*
3468  * Check if a jail supports the given address family.
3469  *
3470  * Returns 0 if not jailed or the address family is supported, EAFNOSUPPORT
3471  * if not.
3472  */
3473 int
3474 prison_check_af(struct ucred *cred, int af)
3475 {
3476         struct prison *pr;
3477         int error;
3478
3479         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3480
3481         pr = cred->cr_prison;
3482 #ifdef VIMAGE
3483         /* Prisons with their own network stack are not limited. */
3484         if (prison_owns_vnet(cred))
3485                 return (0);
3486 #endif
3487
3488         error = 0;
3489         switch (af)
3490         {
3491 #ifdef INET
3492         case AF_INET:
3493                 if (pr->pr_flags & PR_IP4)
3494                 {
3495                         mtx_lock(&pr->pr_mtx);
3496                         if ((pr->pr_flags & PR_IP4) && pr->pr_ip4 == NULL)
3497                                 error = EAFNOSUPPORT;
3498                         mtx_unlock(&pr->pr_mtx);
3499                 }
3500                 break;
3501 #endif
3502 #ifdef INET6
3503         case AF_INET6:
3504                 if (pr->pr_flags & PR_IP6)
3505                 {
3506                         mtx_lock(&pr->pr_mtx);
3507                         if ((pr->pr_flags & PR_IP6) && pr->pr_ip6 == NULL)
3508                                 error = EAFNOSUPPORT;
3509                         mtx_unlock(&pr->pr_mtx);
3510                 }
3511                 break;
3512 #endif
3513         case AF_LOCAL:
3514         case AF_ROUTE:
3515                 break;
3516         default:
3517                 if (!(pr->pr_allow & PR_ALLOW_SOCKET_AF))
3518                         error = EAFNOSUPPORT;
3519         }
3520         return (error);
3521 }
3522
3523 /*
3524  * Check if given address belongs to the jail referenced by cred (wrapper to
3525  * prison_check_ip[46]).
3526  *
3527  * Returns 0 if jail doesn't restrict the address family or if address belongs
3528  * to jail, EADDRNOTAVAIL if the address doesn't belong, or EAFNOSUPPORT if
3529  * the jail doesn't allow the address family.  IPv4 Address passed in in NBO.
3530  */
3531 int
3532 prison_if(struct ucred *cred, struct sockaddr *sa)
3533 {
3534 #ifdef INET
3535         struct sockaddr_in *sai;
3536 #endif
3537 #ifdef INET6
3538         struct sockaddr_in6 *sai6;
3539 #endif
3540         int error;
3541
3542         KASSERT(cred != NULL, ("%s: cred is NULL", __func__));
3543         KASSERT(sa != NULL, ("%s: sa is NULL", __func__));
3544
3545 #ifdef VIMAGE
3546         if (prison_owns_vnet(cred))
3547                 return (0);
3548 #endif
3549
3550         error = 0;
3551         switch (sa->sa_family)
3552         {
3553 #ifdef INET
3554         case AF_INET:
3555                 sai = (struct sockaddr_in *)sa;
3556                 error = prison_check_ip4(cred, &sai->sin_addr);
3557                 break;
3558 #endif
3559 #ifdef INET6
3560         case AF_INET6:
3561                 sai6 = (struct sockaddr_in6 *)sa;
3562                 error = prison_check_ip6(cred, &sai6->sin6_addr);
3563                 break;
3564 #endif
3565         default:
3566                 if (!(cred->cr_prison->pr_allow & PR_ALLOW_SOCKET_AF))
3567                         error = EAFNOSUPPORT;
3568         }
3569         return (error);
3570 }
3571
3572 /*
3573  * Return 0 if jails permit p1 to frob p2, otherwise ESRCH.
3574  */
3575 int
3576 prison_check(struct ucred *cred1, struct ucred *cred2)
3577 {
3578
3579         return ((cred1->cr_prison == cred2->cr_prison ||
3580             prison_ischild(cred1->cr_prison, cred2->cr_prison)) ? 0 : ESRCH);
3581 }
3582
3583 /*
3584  * Return 1 if p2 is a child of p1, otherwise 0.
3585  */
3586 int
3587 prison_ischild(struct prison *pr1, struct prison *pr2)
3588 {
3589
3590         for (pr2 = pr2->pr_parent; pr2 != NULL; pr2 = pr2->pr_parent)
3591                 if (pr1 == pr2)
3592                         return (1);
3593         return (0);
3594 }
3595
3596 /*
3597  * Return 1 if the passed credential is in a jail, otherwise 0.
3598  */
3599 int
3600 jailed(struct ucred *cred)
3601 {
3602
3603         return (cred->cr_prison != &prison0);
3604 }
3605
3606 /*
3607  * Return 1 if the passed credential is in a jail and that jail does not
3608  * have its own virtual network stack, otherwise 0.
3609  */
3610 int
3611 jailed_without_vnet(struct ucred *cred)
3612 {
3613
3614         if (!jailed(cred))
3615                 return (0);
3616 #ifdef VIMAGE
3617         if (prison_owns_vnet(cred))
3618                 return (0);
3619 #endif
3620
3621         return (1);
3622 }
3623
3624 /*
3625  * Return the correct hostname (domainname, et al) for the passed credential.
3626  */
3627 void
3628 getcredhostname(struct ucred *cred, char *buf, size_t size)
3629 {
3630         struct prison *pr;
3631
3632         /*
3633          * A NULL credential can be used to shortcut to the physical
3634          * system's hostname.
3635          */
3636         pr = (cred != NULL) ? cred->cr_prison : &prison0;
3637         mtx_lock(&pr->pr_mtx);
3638         strlcpy(buf, pr->pr_hostname, size);
3639         mtx_unlock(&pr->pr_mtx);
3640 }
3641
3642 void
3643 getcreddomainname(struct ucred *cred, char *buf, size_t size)
3644 {
3645
3646         mtx_lock(&cred->cr_prison->pr_mtx);
3647         strlcpy(buf, cred->cr_prison->pr_domainname, size);
3648         mtx_unlock(&cred->cr_prison->pr_mtx);
3649 }
3650
3651 void
3652 getcredhostuuid(struct ucred *cred, char *buf, size_t size)
3653 {
3654
3655         mtx_lock(&cred->cr_prison->pr_mtx);
3656         strlcpy(buf, cred->cr_prison->pr_hostuuid, size);
3657         mtx_unlock(&cred->cr_prison->pr_mtx);
3658 }
3659
3660 void
3661 getcredhostid(struct ucred *cred, unsigned long *hostid)
3662 {
3663
3664         mtx_lock(&cred->cr_prison->pr_mtx);
3665         *hostid = cred->cr_prison->pr_hostid;
3666         mtx_unlock(&cred->cr_prison->pr_mtx);
3667 }
3668
3669 #ifdef VIMAGE
3670 /*
3671  * Determine whether the prison represented by cred owns
3672  * its vnet rather than having it inherited.
3673  *
3674  * Returns 1 in case the prison owns the vnet, 0 otherwise.
3675  */
3676 int
3677 prison_owns_vnet(struct ucred *cred)
3678 {
3679
3680         /*
3681          * vnets cannot be added/removed after jail creation,
3682          * so no need to lock here.
3683          */
3684         return (cred->cr_prison->pr_flags & PR_VNET ? 1 : 0);
3685 }
3686 #endif
3687
3688 /*
3689  * Determine whether the subject represented by cred can "see"
3690  * status of a mount point.
3691  * Returns: 0 for permitted, ENOENT otherwise.
3692  * XXX: This function should be called cr_canseemount() and should be
3693  *      placed in kern_prot.c.
3694  */
3695 int
3696 prison_canseemount(struct ucred *cred, struct mount *mp)
3697 {
3698         struct prison *pr;
3699         struct statfs *sp;
3700         size_t len;
3701
3702         pr = cred->cr_prison;
3703         if (pr->pr_enforce_statfs == 0)
3704                 return (0);
3705         if (pr->pr_root->v_mount == mp)
3706                 return (0);
3707         if (pr->pr_enforce_statfs == 2)
3708                 return (ENOENT);
3709         /*
3710          * If jail's chroot directory is set to "/" we should be able to see
3711          * all mount-points from inside a jail.
3712          * This is ugly check, but this is the only situation when jail's
3713          * directory ends with '/'.
3714          */
3715         if (strcmp(pr->pr_path, "/") == 0)
3716                 return (0);
3717         len = strlen(pr->pr_path);
3718         sp = &mp->mnt_stat;
3719         if (strncmp(pr->pr_path, sp->f_mntonname, len) != 0)
3720                 return (ENOENT);
3721         /*
3722          * Be sure that we don't have situation where jail's root directory
3723          * is "/some/path" and mount point is "/some/pathpath".
3724          */
3725         if (sp->f_mntonname[len] != '\0' && sp->f_mntonname[len] != '/')
3726                 return (ENOENT);
3727         return (0);
3728 }
3729
3730 void
3731 prison_enforce_statfs(struct ucred *cred, struct mount *mp, struct statfs *sp)
3732 {
3733         char jpath[MAXPATHLEN];
3734         struct prison *pr;
3735         size_t len;
3736
3737         pr = cred->cr_prison;
3738         if (pr->pr_enforce_statfs == 0)
3739                 return;
3740         if (prison_canseemount(cred, mp) != 0) {
3741                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3742                 strlcpy(sp->f_mntonname, "[restricted]",
3743                     sizeof(sp->f_mntonname));
3744                 return;
3745         }
3746         if (pr->pr_root->v_mount == mp) {
3747                 /*
3748                  * Clear current buffer data, so we are sure nothing from
3749                  * the valid path left there.
3750                  */
3751                 bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3752                 *sp->f_mntonname = '/';
3753                 return;
3754         }
3755         /*
3756          * If jail's chroot directory is set to "/" we should be able to see
3757          * all mount-points from inside a jail.
3758          */
3759         if (strcmp(pr->pr_path, "/") == 0)
3760                 return;
3761         len = strlen(pr->pr_path);
3762         strlcpy(jpath, sp->f_mntonname + len, sizeof(jpath));
3763         /*
3764          * Clear current buffer data, so we are sure nothing from
3765          * the valid path left there.
3766          */
3767         bzero(sp->f_mntonname, sizeof(sp->f_mntonname));
3768         if (*jpath == '\0') {
3769                 /* Should never happen. */
3770                 *sp->f_mntonname = '/';
3771         } else {
3772                 strlcpy(sp->f_mntonname, jpath, sizeof(sp->f_mntonname));
3773         }
3774 }
3775
3776 /*
3777  * Check with permission for a specific privilege is granted within jail.  We
3778  * have a specific list of accepted privileges; the rest are denied.
3779  */
3780 int
3781 prison_priv_check(struct ucred *cred, int priv)
3782 {
3783
3784         if (!jailed(cred))
3785                 return (0);
3786
3787 #ifdef VIMAGE
3788         /*
3789          * Privileges specific to prisons with a virtual network stack.
3790          * There might be a duplicate entry here in case the privilege
3791          * is only granted conditionally in the legacy jail case.
3792          */
3793         switch (priv) {
3794 #ifdef notyet
3795                 /*
3796                  * NFS-specific privileges.
3797                  */
3798         case PRIV_NFS_DAEMON:
3799         case PRIV_NFS_LOCKD:
3800 #endif
3801                 /*
3802                  * Network stack privileges.
3803                  */
3804         case PRIV_NET_BRIDGE:
3805         case PRIV_NET_GRE:
3806         case PRIV_NET_BPF:
3807         case PRIV_NET_RAW:              /* Dup, cond. in legacy jail case. */
3808         case PRIV_NET_ROUTE:
3809         case PRIV_NET_TAP:
3810         case PRIV_NET_SETIFMTU:
3811         case PRIV_NET_SETIFFLAGS:
3812         case PRIV_NET_SETIFCAP:
3813         case PRIV_NET_SETIFDESCR:
3814         case PRIV_NET_SETIFNAME :
3815         case PRIV_NET_SETIFMETRIC:
3816         case PRIV_NET_SETIFPHYS:
3817         case PRIV_NET_SETIFMAC:
3818         case PRIV_NET_ADDMULTI:
3819         case PRIV_NET_DELMULTI:
3820         case PRIV_NET_HWIOCTL:
3821         case PRIV_NET_SETLLADDR:
3822         case PRIV_NET_ADDIFGROUP:
3823         case PRIV_NET_DELIFGROUP:
3824         case PRIV_NET_IFCREATE:
3825         case PRIV_NET_IFDESTROY:
3826         case PRIV_NET_ADDIFADDR:
3827         case PRIV_NET_DELIFADDR:
3828         case PRIV_NET_LAGG:
3829         case PRIV_NET_GIF:
3830         case PRIV_NET_SETIFVNET:
3831         case PRIV_NET_SETIFFIB:
3832
3833                 /*
3834                  * 802.11-related privileges.
3835                  */
3836         case PRIV_NET80211_GETKEY:
3837 #ifdef notyet
3838         case PRIV_NET80211_MANAGE:              /* XXX-BZ discuss with sam@ */
3839 #endif
3840
3841 #ifdef notyet
3842                 /*
3843                  * AppleTalk privileges.
3844                  */
3845         case PRIV_NETATALK_RESERVEDPORT:
3846
3847                 /*
3848                  * ATM privileges.
3849                  */
3850         case PRIV_NETATM_CFG:
3851         case PRIV_NETATM_ADD:
3852         case PRIV_NETATM_DEL:
3853         case PRIV_NETATM_SET:
3854
3855                 /*
3856                  * Bluetooth privileges.
3857                  */
3858         case PRIV_NETBLUETOOTH_RAW:
3859 #endif
3860
3861                 /*
3862                  * Netgraph and netgraph module privileges.
3863                  */
3864         case PRIV_NETGRAPH_CONTROL:
3865 #ifdef notyet
3866         case PRIV_NETGRAPH_TTY:
3867 #endif
3868
3869                 /*
3870                  * IPv4 and IPv6 privileges.
3871                  */
3872         case PRIV_NETINET_IPFW:
3873         case PRIV_NETINET_DIVERT:
3874         case PRIV_NETINET_PF:
3875         case PRIV_NETINET_DUMMYNET:
3876         case PRIV_NETINET_CARP:
3877         case PRIV_NETINET_MROUTE:
3878         case PRIV_NETINET_RAW:
3879         case PRIV_NETINET_ADDRCTRL6:
3880         case PRIV_NETINET_ND6:
3881         case PRIV_NETINET_SCOPE6:
3882         case PRIV_NETINET_ALIFETIME6:
3883         case PRIV_NETINET_IPSEC:
3884         case PRIV_NETINET_BINDANY:
3885
3886 #ifdef notyet
3887                 /*
3888                  * IPX/SPX privileges.
3889                  */
3890         case PRIV_NETIPX_RESERVEDPORT:
3891         case PRIV_NETIPX_RAW:
3892
3893                 /*
3894                  * NCP privileges.
3895                  */
3896         case PRIV_NETNCP:
3897
3898                 /*
3899                  * SMB privileges.
3900                  */
3901         case PRIV_NETSMB:
3902 #endif
3903
3904         /*
3905          * No default: or deny here.
3906          * In case of no permit fall through to next switch().
3907          */
3908                 if (cred->cr_prison->pr_flags & PR_VNET)
3909                         return (0);
3910         }
3911 #endif /* VIMAGE */
3912
3913         switch (priv) {
3914
3915                 /*
3916                  * Allow ktrace privileges for root in jail.
3917                  */
3918         case PRIV_KTRACE:
3919
3920 #if 0
3921                 /*
3922                  * Allow jailed processes to configure audit identity and
3923                  * submit audit records (login, etc).  In the future we may
3924                  * want to further refine the relationship between audit and
3925                  * jail.
3926                  */
3927         case PRIV_AUDIT_GETAUDIT:
3928         case PRIV_AUDIT_SETAUDIT:
3929         case PRIV_AUDIT_SUBMIT:
3930 #endif
3931
3932                 /*
3933                  * Allow jailed processes to manipulate process UNIX
3934                  * credentials in any way they see fit.
3935                  */
3936         case PRIV_CRED_SETUID:
3937         case PRIV_CRED_SETEUID:
3938         case PRIV_CRED_SETGID:
3939         case PRIV_CRED_SETEGID:
3940         case PRIV_CRED_SETGROUPS:
3941         case PRIV_CRED_SETREUID:
3942         case PRIV_CRED_SETREGID:
3943         case PRIV_CRED_SETRESUID:
3944         case PRIV_CRED_SETRESGID:
3945
3946                 /*
3947                  * Jail implements visibility constraints already, so allow
3948                  * jailed root to override uid/gid-based constraints.
3949                  */
3950         case PRIV_SEEOTHERGIDS:
3951         case PRIV_SEEOTHERUIDS:
3952
3953                 /*
3954                  * Jail implements inter-process debugging limits already, so
3955                  * allow jailed root various debugging privileges.
3956                  */
3957         case PRIV_DEBUG_DIFFCRED:
3958         case PRIV_DEBUG_SUGID:
3959         case PRIV_DEBUG_UNPRIV:
3960
3961                 /*
3962                  * Allow jail to set various resource limits and login
3963                  * properties, and for now, exceed process resource limits.
3964                  */
3965         case PRIV_PROC_LIMIT:
3966         case PRIV_PROC_SETLOGIN:
3967         case PRIV_PROC_SETRLIMIT:
3968
3969                 /*
3970                  * System V and POSIX IPC privileges are granted in jail.
3971                  */
3972         case PRIV_IPC_READ:
3973         case PRIV_IPC_WRITE:
3974         case PRIV_IPC_ADMIN:
3975         case PRIV_IPC_MSGSIZE:
3976         case PRIV_MQ_ADMIN:
3977
3978                 /*
3979                  * Jail operations within a jail work on child jails.
3980                  */
3981         case PRIV_JAIL_ATTACH:
3982         case PRIV_JAIL_SET:
3983         case PRIV_JAIL_REMOVE:
3984
3985                 /*
3986                  * Jail implements its own inter-process limits, so allow
3987                  * root processes in jail to change scheduling on other
3988                  * processes in the same jail.  Likewise for signalling.
3989                  */
3990         case PRIV_SCHED_DIFFCRED:
3991         case PRIV_SCHED_CPUSET:
3992         case PRIV_SIGNAL_DIFFCRED:
3993         case PRIV_SIGNAL_SUGID:
3994
3995                 /*
3996                  * Allow jailed processes to write to sysctls marked as jail
3997                  * writable.
3998                  */
3999         case PRIV_SYSCTL_WRITEJAIL:
4000
4001                 /*
4002                  * Allow root in jail to manage a variety of quota
4003                  * properties.  These should likely be conditional on a
4004                  * configuration option.
4005                  */
4006         case PRIV_VFS_GETQUOTA:
4007         case PRIV_VFS_SETQUOTA:
4008
4009                 /*
4010                  * Since Jail relies on chroot() to implement file system
4011                  * protections, grant many VFS privileges to root in jail.
4012                  * Be careful to exclude mount-related and NFS-related
4013                  * privileges.
4014                  */
4015         case PRIV_VFS_READ:
4016         case PRIV_VFS_WRITE:
4017         case PRIV_VFS_ADMIN:
4018         case PRIV_VFS_EXEC:
4019         case PRIV_VFS_LOOKUP:
4020         case PRIV_VFS_BLOCKRESERVE:     /* XXXRW: Slightly surprising. */
4021         case PRIV_VFS_CHFLAGS_DEV:
4022         case PRIV_VFS_CHOWN:
4023         case PRIV_VFS_CHROOT:
4024         case PRIV_VFS_RETAINSUGID:
4025         case PRIV_VFS_FCHROOT:
4026         case PRIV_VFS_LINK:
4027         case PRIV_VFS_SETGID:
4028         case PRIV_VFS_STAT:
4029         case PRIV_VFS_STICKYFILE:
4030
4031                 /*
4032                  * As in the non-jail case, non-root users are expected to be
4033                  * able to read kernel/phyiscal memory (provided /dev/[k]mem
4034                  * exists in the jail and they have permission to access it).
4035                  */
4036         case PRIV_KMEM_READ:
4037                 return (0);
4038
4039                 /*
4040                  * Depending on the global setting, allow privilege of
4041                  * setting system flags.
4042                  */
4043         case PRIV_VFS_SYSFLAGS:
4044                 if (cred->cr_prison->pr_allow & PR_ALLOW_CHFLAGS)
4045                         return (0);
4046                 else
4047                         return (EPERM);
4048
4049                 /*
4050                  * Depending on the global setting, allow privilege of
4051                  * mounting/unmounting file systems.
4052                  */
4053         case PRIV_VFS_MOUNT:
4054         case PRIV_VFS_UNMOUNT:
4055         case PRIV_VFS_MOUNT_NONUSER:
4056         case PRIV_VFS_MOUNT_OWNER:
4057                 if (cred->cr_prison->pr_allow & PR_ALLOW_MOUNT &&
4058                     cred->cr_prison->pr_enforce_statfs < 2)
4059                         return (0);
4060                 else
4061                         return (EPERM);
4062
4063                 /*
4064                  * Allow jailed root to bind reserved ports and reuse in-use
4065                  * ports.
4066                  */
4067         case PRIV_NETINET_RESERVEDPORT:
4068         case PRIV_NETINET_REUSEPORT:
4069                 return (0);
4070
4071                 /*
4072                  * Allow jailed root to set certian IPv4/6 (option) headers.
4073                  */
4074         case PRIV_NETINET_SETHDROPTS:
4075                 return (0);
4076
4077                 /*
4078                  * Conditionally allow creating raw sockets in jail.
4079                  */
4080         case PRIV_NETINET_RAW:
4081                 if (cred->cr_prison->pr_allow & PR_ALLOW_RAW_SOCKETS)
4082                         return (0);
4083                 else
4084                         return (EPERM);
4085
4086                 /*
4087                  * Since jail implements its own visibility limits on netstat
4088                  * sysctls, allow getcred.  This allows identd to work in
4089                  * jail.
4090                  */
4091         case PRIV_NETINET_GETCRED:
4092                 return (0);
4093
4094                 /*
4095                  * Allow jailed root to set loginclass.
4096                  */
4097         case PRIV_PROC_SETLOGINCLASS:
4098                 return (0);
4099
4100         default:
4101                 /*
4102                  * In all remaining cases, deny the privilege request.  This
4103                  * includes almost all network privileges, many system
4104                  * configuration privileges.
4105                  */
4106                 return (EPERM);
4107         }
4108 }
4109
4110 /*
4111  * Return the part of pr2's name that is relative to pr1, or the whole name
4112  * if it does not directly follow.
4113  */
4114
4115 char *
4116 prison_name(struct prison *pr1, struct prison *pr2)
4117 {
4118         char *name;
4119
4120         /* Jails see themselves as "0" (if they see themselves at all). */
4121         if (pr1 == pr2)
4122                 return "0";
4123         name = pr2->pr_name;
4124         if (prison_ischild(pr1, pr2)) {
4125                 /*
4126                  * pr1 isn't locked (and allprison_lock may not be either)
4127                  * so its length can't be counted on.  But the number of dots
4128                  * can be counted on - and counted.
4129                  */
4130                 for (; pr1 != &prison0; pr1 = pr1->pr_parent)
4131                         name = strchr(name, '.') + 1;
4132         }
4133         return (name);
4134 }
4135
4136 /*
4137  * Return the part of pr2's path that is relative to pr1, or the whole path
4138  * if it does not directly follow.
4139  */
4140 static char *
4141 prison_path(struct prison *pr1, struct prison *pr2)
4142 {
4143         char *path1, *path2;
4144         int len1;
4145
4146         path1 = pr1->pr_path;
4147         path2 = pr2->pr_path;
4148         if (!strcmp(path1, "/"))
4149                 return (path2);
4150         len1 = strlen(path1);
4151         if (strncmp(path1, path2, len1))
4152                 return (path2);
4153         if (path2[len1] == '\0')
4154                 return "/";
4155         if (path2[len1] == '/')
4156                 return (path2 + len1);
4157         return (path2);
4158 }
4159
4160
4161 /*
4162  * Jail-related sysctls.
4163  */
4164 static SYSCTL_NODE(_security, OID_AUTO, jail, CTLFLAG_RW, 0,
4165     "Jails");
4166
4167 static int
4168 sysctl_jail_list(SYSCTL_HANDLER_ARGS)
4169 {
4170         struct xprison *xp;
4171         struct prison *pr, *cpr;
4172 #ifdef INET
4173         struct in_addr *ip4 = NULL;
4174         int ip4s = 0;
4175 #endif
4176 #ifdef INET6
4177         struct in6_addr *ip6 = NULL;
4178         int ip6s = 0;
4179 #endif
4180         int descend, error;
4181
4182         xp = malloc(sizeof(*xp), M_TEMP, M_WAITOK);
4183         pr = req->td->td_ucred->cr_prison;
4184         error = 0;
4185         sx_slock(&allprison_lock);
4186         FOREACH_PRISON_DESCENDANT(pr, cpr, descend) {
4187 #if defined(INET) || defined(INET6)
4188  again:
4189 #endif
4190                 mtx_lock(&cpr->pr_mtx);
4191 #ifdef INET
4192                 if (cpr->pr_ip4s > 0) {
4193                         if (ip4s < cpr->pr_ip4s) {
4194                                 ip4s = cpr->pr_ip4s;
4195                                 mtx_unlock(&cpr->pr_mtx);
4196                                 ip4 = realloc(ip4, ip4s *
4197                                     sizeof(struct in_addr), M_TEMP, M_WAITOK);
4198                                 goto again;
4199                         }
4200                         bcopy(cpr->pr_ip4, ip4,
4201                             cpr->pr_ip4s * sizeof(struct in_addr));
4202                 }
4203 #endif
4204 #ifdef INET6
4205                 if (cpr->pr_ip6s > 0) {
4206                         if (ip6s < cpr->pr_ip6s) {
4207                                 ip6s = cpr->pr_ip6s;
4208                                 mtx_unlock(&cpr->pr_mtx);
4209                                 ip6 = realloc(ip6, ip6s *
4210                                     sizeof(struct in6_addr), M_TEMP, M_WAITOK);
4211                                 goto again;
4212                         }
4213                         bcopy(cpr->pr_ip6, ip6,
4214                             cpr->pr_ip6s * sizeof(struct in6_addr));
4215                 }
4216 #endif
4217                 if (cpr->pr_ref == 0) {
4218                         mtx_unlock(&cpr->pr_mtx);
4219                         continue;
4220                 }
4221                 bzero(xp, sizeof(*xp));
4222                 xp->pr_version = XPRISON_VERSION;
4223                 xp->pr_id = cpr->pr_id;
4224                 xp->pr_state = cpr->pr_uref > 0
4225                     ? PRISON_STATE_ALIVE : PRISON_STATE_DYING;
4226                 strlcpy(xp->pr_path, prison_path(pr, cpr), sizeof(xp->pr_path));
4227                 strlcpy(xp->pr_host, cpr->pr_hostname, sizeof(xp->pr_host));
4228                 strlcpy(xp->pr_name, prison_name(pr, cpr), sizeof(xp->pr_name));
4229 #ifdef INET
4230                 xp->pr_ip4s = cpr->pr_ip4s;
4231 #endif
4232 #ifdef INET6
4233                 xp->pr_ip6s = cpr->pr_ip6s;
4234 #endif
4235                 mtx_unlock(&cpr->pr_mtx);
4236                 error = SYSCTL_OUT(req, xp, sizeof(*xp));
4237                 if (error)
4238                         break;
4239 #ifdef INET
4240                 if (xp->pr_ip4s > 0) {
4241                         error = SYSCTL_OUT(req, ip4,
4242                             xp->pr_ip4s * sizeof(struct in_addr));
4243                         if (error)
4244                                 break;
4245                 }
4246 #endif
4247 #ifdef INET6
4248                 if (xp->pr_ip6s > 0) {
4249                         error = SYSCTL_OUT(req, ip6,
4250                             xp->pr_ip6s * sizeof(struct in6_addr));
4251                         if (error)
4252                                 break;
4253                 }
4254 #endif
4255         }
4256         sx_sunlock(&allprison_lock);
4257         free(xp, M_TEMP);
4258 #ifdef INET
4259         free(ip4, M_TEMP);
4260 #endif
4261 #ifdef INET6
4262         free(ip6, M_TEMP);
4263 #endif
4264         return (error);
4265 }
4266
4267 SYSCTL_OID(_security_jail, OID_AUTO, list,
4268     CTLTYPE_STRUCT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4269     sysctl_jail_list, "S", "List of active jails");
4270
4271 static int
4272 sysctl_jail_jailed(SYSCTL_HANDLER_ARGS)
4273 {
4274         int error, injail;
4275
4276         injail = jailed(req->td->td_ucred);
4277         error = SYSCTL_OUT(req, &injail, sizeof(injail));
4278
4279         return (error);
4280 }
4281
4282 SYSCTL_PROC(_security_jail, OID_AUTO, jailed,
4283     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4284     sysctl_jail_jailed, "I", "Process in jail?");
4285
4286 static int
4287 sysctl_jail_vnet(SYSCTL_HANDLER_ARGS)
4288 {
4289         int error, havevnet;
4290 #ifdef VIMAGE
4291         struct ucred *cred = req->td->td_ucred;
4292
4293         havevnet = jailed(cred) && prison_owns_vnet(cred);
4294 #else
4295         havevnet = 0;
4296 #endif
4297         error = SYSCTL_OUT(req, &havevnet, sizeof(havevnet));
4298
4299         return (error);
4300 }
4301
4302 SYSCTL_PROC(_security_jail, OID_AUTO, vnet,
4303     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE, NULL, 0,
4304     sysctl_jail_vnet, "I", "Jail owns VNET?");
4305
4306 #if defined(INET) || defined(INET6)
4307 SYSCTL_UINT(_security_jail, OID_AUTO, jail_max_af_ips, CTLFLAG_RW,
4308     &jail_max_af_ips, 0,
4309     "Number of IP addresses a jail may have at most per address family (deprecated)");
4310 #endif
4311
4312 /*
4313  * Default parameters for jail(2) compatability.  For historical reasons,
4314  * the sysctl names have varying similarity to the parameter names.  Prisons
4315  * just see their own parameters, and can't change them.
4316  */
4317 static int
4318 sysctl_jail_default_allow(SYSCTL_HANDLER_ARGS)
4319 {
4320         struct prison *pr;
4321         int allow, error, i;
4322
4323         pr = req->td->td_ucred->cr_prison;
4324         allow = (pr == &prison0) ? jail_default_allow : pr->pr_allow;
4325
4326         /* Get the current flag value, and convert it to a boolean. */
4327         i = (allow & arg2) ? 1 : 0;
4328         if (arg1 != NULL)
4329                 i = !i;
4330         error = sysctl_handle_int(oidp, &i, 0, req);
4331         if (error || !req->newptr)
4332                 return (error);
4333         i = i ? arg2 : 0;
4334         if (arg1 != NULL)
4335                 i ^= arg2;
4336         /*
4337          * The sysctls don't have CTLFLAGS_PRISON, so assume prison0
4338          * for writing.
4339          */
4340         mtx_lock(&prison0.pr_mtx);
4341         jail_default_allow = (jail_default_allow & ~arg2) | i;
4342         mtx_unlock(&prison0.pr_mtx);
4343         return (0);
4344 }
4345
4346 SYSCTL_PROC(_security_jail, OID_AUTO, set_hostname_allowed,
4347     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4348     NULL, PR_ALLOW_SET_HOSTNAME, sysctl_jail_default_allow, "I",
4349     "Processes in jail can set their hostnames (deprecated)");
4350 SYSCTL_PROC(_security_jail, OID_AUTO, socket_unixiproute_only,
4351     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4352     (void *)1, PR_ALLOW_SOCKET_AF, sysctl_jail_default_allow, "I",
4353     "Processes in jail are limited to creating UNIX/IP/route sockets only (deprecated)");
4354 SYSCTL_PROC(_security_jail, OID_AUTO, sysvipc_allowed,
4355     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4356     NULL, PR_ALLOW_SYSVIPC, sysctl_jail_default_allow, "I",
4357     "Processes in jail can use System V IPC primitives (deprecated)");
4358 SYSCTL_PROC(_security_jail, OID_AUTO, allow_raw_sockets,
4359     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4360     NULL, PR_ALLOW_RAW_SOCKETS, sysctl_jail_default_allow, "I",
4361     "Prison root can create raw sockets (deprecated)");
4362 SYSCTL_PROC(_security_jail, OID_AUTO, chflags_allowed,
4363     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4364     NULL, PR_ALLOW_CHFLAGS, sysctl_jail_default_allow, "I",
4365     "Processes in jail can alter system file flags (deprecated)");
4366 SYSCTL_PROC(_security_jail, OID_AUTO, mount_allowed,
4367     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4368     NULL, PR_ALLOW_MOUNT, sysctl_jail_default_allow, "I",
4369     "Processes in jail can mount/unmount jail-friendly file systems (deprecated)");
4370 SYSCTL_PROC(_security_jail, OID_AUTO, mount_devfs_allowed,
4371     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4372     NULL, PR_ALLOW_MOUNT_DEVFS, sysctl_jail_default_allow, "I",
4373     "Processes in jail can mount the devfs file system (deprecated)");
4374 SYSCTL_PROC(_security_jail, OID_AUTO, mount_fdescfs_allowed,
4375     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4376     NULL, PR_ALLOW_MOUNT_FDESCFS, sysctl_jail_default_allow, "I",
4377     "Processes in jail can mount the fdescfs file system (deprecated)");
4378 SYSCTL_PROC(_security_jail, OID_AUTO, mount_nullfs_allowed,
4379     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4380     NULL, PR_ALLOW_MOUNT_NULLFS, sysctl_jail_default_allow, "I",
4381     "Processes in jail can mount the nullfs file system (deprecated)");
4382 SYSCTL_PROC(_security_jail, OID_AUTO, mount_procfs_allowed,
4383     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4384     NULL, PR_ALLOW_MOUNT_PROCFS, sysctl_jail_default_allow, "I",
4385     "Processes in jail can mount the procfs file system (deprecated)");
4386 SYSCTL_PROC(_security_jail, OID_AUTO, mount_linprocfs_allowed,
4387     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4388     NULL, PR_ALLOW_MOUNT_LINPROCFS, sysctl_jail_default_allow, "I",
4389     "Processes in jail can mount the linprocfs file system (deprecated)");
4390 SYSCTL_PROC(_security_jail, OID_AUTO, mount_linsysfs_allowed,
4391     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4392     NULL, PR_ALLOW_MOUNT_LINSYSFS, sysctl_jail_default_allow, "I",
4393     "Processes in jail can mount the linsysfs file system (deprecated)");
4394 SYSCTL_PROC(_security_jail, OID_AUTO, mount_tmpfs_allowed,
4395     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4396     NULL, PR_ALLOW_MOUNT_TMPFS, sysctl_jail_default_allow, "I",
4397     "Processes in jail can mount the tmpfs file system (deprecated)");
4398 SYSCTL_PROC(_security_jail, OID_AUTO, mount_zfs_allowed,
4399     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4400     NULL, PR_ALLOW_MOUNT_ZFS, sysctl_jail_default_allow, "I",
4401     "Processes in jail can mount the zfs file system (deprecated)");
4402
4403 static int
4404 sysctl_jail_default_level(SYSCTL_HANDLER_ARGS)
4405 {
4406         struct prison *pr;
4407         int level, error;
4408
4409         pr = req->td->td_ucred->cr_prison;
4410         level = (pr == &prison0) ? *(int *)arg1 : *(int *)((char *)pr + arg2);
4411         error = sysctl_handle_int(oidp, &level, 0, req);
4412         if (error || !req->newptr)
4413                 return (error);
4414         *(int *)arg1 = level;
4415         return (0);
4416 }
4417
4418 SYSCTL_PROC(_security_jail, OID_AUTO, enforce_statfs,
4419     CTLTYPE_INT | CTLFLAG_RW | CTLFLAG_MPSAFE,
4420     &jail_default_enforce_statfs, offsetof(struct prison, pr_enforce_statfs),
4421     sysctl_jail_default_level, "I",
4422     "Processes in jail cannot see all mounted file systems (deprecated)");
4423
4424 SYSCTL_PROC(_security_jail, OID_AUTO, devfs_ruleset,
4425     CTLTYPE_INT | CTLFLAG_RD | CTLFLAG_MPSAFE,
4426     &jail_default_devfs_rsnum, offsetof(struct prison, pr_devfs_rsnum),
4427     sysctl_jail_default_level, "I",
4428     "Ruleset for the devfs filesystem in jail (deprecated)");
4429
4430 /*
4431  * Nodes to describe jail parameters.  Maximum length of string parameters
4432  * is returned in the string itself, and the other parameters exist merely
4433  * to make themselves and their types known.
4434  */
4435 SYSCTL_NODE(_security_jail, OID_AUTO, param, CTLFLAG_RW, 0,
4436     "Jail parameters");
4437
4438 int
4439 sysctl_jail_param(SYSCTL_HANDLER_ARGS)
4440 {
4441         int i;
4442         long l;
4443         size_t s;
4444         char numbuf[12];
4445
4446         switch (oidp->oid_kind & CTLTYPE)
4447         {
4448         case CTLTYPE_LONG:
4449         case CTLTYPE_ULONG:
4450                 l = 0;
4451 #ifdef SCTL_MASK32
4452                 if (!(req->flags & SCTL_MASK32))
4453 #endif
4454                         return (SYSCTL_OUT(req, &l, sizeof(l)));
4455         case CTLTYPE_INT:
4456         case CTLTYPE_UINT:
4457                 i = 0;
4458                 return (SYSCTL_OUT(req, &i, sizeof(i)));
4459         case CTLTYPE_STRING:
4460                 snprintf(numbuf, sizeof(numbuf), "%jd", (intmax_t)arg2);
4461                 return
4462                     (sysctl_handle_string(oidp, numbuf, sizeof(numbuf), req));
4463         case CTLTYPE_STRUCT:
4464                 s = (size_t)arg2;
4465                 return (SYSCTL_OUT(req, &s, sizeof(s)));
4466         }
4467         return (0);
4468 }
4469
4470 /*
4471  * CTLFLAG_RDTUN in the following indicates jail parameters that can be set at
4472  * jail creation time but cannot be changed in an existing jail.
4473  */
4474 SYSCTL_JAIL_PARAM(, jid, CTLTYPE_INT | CTLFLAG_RDTUN, "I", "Jail ID");
4475 SYSCTL_JAIL_PARAM(, parent, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail parent ID");
4476 SYSCTL_JAIL_PARAM_STRING(, name, CTLFLAG_RW, MAXHOSTNAMELEN, "Jail name");
4477 SYSCTL_JAIL_PARAM_STRING(, path, CTLFLAG_RDTUN, MAXPATHLEN, "Jail root path");
4478 SYSCTL_JAIL_PARAM(, securelevel, CTLTYPE_INT | CTLFLAG_RW,
4479     "I", "Jail secure level");
4480 SYSCTL_JAIL_PARAM(, osreldate, CTLTYPE_INT | CTLFLAG_RDTUN, "I",
4481     "Jail value for kern.osreldate and uname -K");
4482 SYSCTL_JAIL_PARAM_STRING(, osrelease, CTLFLAG_RDTUN, OSRELEASELEN,
4483     "Jail value for kern.osrelease and uname -r");
4484 SYSCTL_JAIL_PARAM(, enforce_statfs, CTLTYPE_INT | CTLFLAG_RW,
4485     "I", "Jail cannot see all mounted file systems");
4486 SYSCTL_JAIL_PARAM(, devfs_ruleset, CTLTYPE_INT | CTLFLAG_RW,
4487     "I", "Ruleset for in-jail devfs mounts");
4488 SYSCTL_JAIL_PARAM(, persist, CTLTYPE_INT | CTLFLAG_RW,
4489     "B", "Jail persistence");
4490 #ifdef VIMAGE
4491 SYSCTL_JAIL_PARAM(, vnet, CTLTYPE_INT | CTLFLAG_RDTUN,
4492     "E,jailsys", "Virtual network stack");
4493 #endif
4494 SYSCTL_JAIL_PARAM(, dying, CTLTYPE_INT | CTLFLAG_RD,
4495     "B", "Jail is in the process of shutting down");
4496
4497 SYSCTL_JAIL_PARAM_NODE(children, "Number of child jails");
4498 SYSCTL_JAIL_PARAM(_children, cur, CTLTYPE_INT | CTLFLAG_RD,
4499     "I", "Current number of child jails");
4500 SYSCTL_JAIL_PARAM(_children, max, CTLTYPE_INT | CTLFLAG_RW,
4501     "I", "Maximum number of child jails");
4502
4503 SYSCTL_JAIL_PARAM_SYS_NODE(host, CTLFLAG_RW, "Jail host info");
4504 SYSCTL_JAIL_PARAM_STRING(_host, hostname, CTLFLAG_RW, MAXHOSTNAMELEN,
4505     "Jail hostname");
4506 SYSCTL_JAIL_PARAM_STRING(_host, domainname, CTLFLAG_RW, MAXHOSTNAMELEN,
4507     "Jail NIS domainname");
4508 SYSCTL_JAIL_PARAM_STRING(_host, hostuuid, CTLFLAG_RW, HOSTUUIDLEN,
4509     "Jail host UUID");
4510 SYSCTL_JAIL_PARAM(_host, hostid, CTLTYPE_ULONG | CTLFLAG_RW,
4511     "LU", "Jail host ID");
4512
4513 SYSCTL_JAIL_PARAM_NODE(cpuset, "Jail cpuset");
4514 SYSCTL_JAIL_PARAM(_cpuset, id, CTLTYPE_INT | CTLFLAG_RD, "I", "Jail cpuset ID");
4515
4516 #ifdef INET
4517 SYSCTL_JAIL_PARAM_SYS_NODE(ip4, CTLFLAG_RDTUN,
4518     "Jail IPv4 address virtualization");
4519 SYSCTL_JAIL_PARAM_STRUCT(_ip4, addr, CTLFLAG_RW, sizeof(struct in_addr),
4520     "S,in_addr,a", "Jail IPv4 addresses");
4521 SYSCTL_JAIL_PARAM(_ip4, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4522     "B", "Do (not) use IPv4 source address selection rather than the "
4523     "primary jail IPv4 address.");
4524 #endif
4525 #ifdef INET6
4526 SYSCTL_JAIL_PARAM_SYS_NODE(ip6, CTLFLAG_RDTUN,
4527     "Jail IPv6 address virtualization");
4528 SYSCTL_JAIL_PARAM_STRUCT(_ip6, addr, CTLFLAG_RW, sizeof(struct in6_addr),
4529     "S,in6_addr,a", "Jail IPv6 addresses");
4530 SYSCTL_JAIL_PARAM(_ip6, saddrsel, CTLTYPE_INT | CTLFLAG_RW,
4531     "B", "Do (not) use IPv6 source address selection rather than the "
4532     "primary jail IPv6 address.");
4533 #endif
4534
4535 SYSCTL_JAIL_PARAM_NODE(allow, "Jail permission flags");
4536 SYSCTL_JAIL_PARAM(_allow, set_hostname, CTLTYPE_INT | CTLFLAG_RW,
4537     "B", "Jail may set hostname");
4538 SYSCTL_JAIL_PARAM(_allow, sysvipc, CTLTYPE_INT | CTLFLAG_RW,
4539     "B", "Jail may use SYSV IPC");
4540 SYSCTL_JAIL_PARAM(_allow, raw_sockets, CTLTYPE_INT | CTLFLAG_RW,
4541     "B", "Jail may create raw sockets");
4542 SYSCTL_JAIL_PARAM(_allow, chflags, CTLTYPE_INT | CTLFLAG_RW,
4543     "B", "Jail may alter system file flags");
4544 SYSCTL_JAIL_PARAM(_allow, quotas, CTLTYPE_INT | CTLFLAG_RW,
4545     "B", "Jail may set file quotas");
4546 SYSCTL_JAIL_PARAM(_allow, socket_af, CTLTYPE_INT | CTLFLAG_RW,
4547     "B", "Jail may create sockets other than just UNIX/IPv4/IPv6/route");
4548
4549 SYSCTL_JAIL_PARAM_SUBNODE(allow, mount, "Jail mount/unmount permission flags");
4550 SYSCTL_JAIL_PARAM(_allow_mount, , CTLTYPE_INT | CTLFLAG_RW,
4551     "B", "Jail may mount/unmount jail-friendly file systems in general");
4552 SYSCTL_JAIL_PARAM(_allow_mount, devfs, CTLTYPE_INT | CTLFLAG_RW,
4553     "B", "Jail may mount the devfs file system");
4554 SYSCTL_JAIL_PARAM(_allow_mount, fdescfs, CTLTYPE_INT | CTLFLAG_RW,
4555     "B", "Jail may mount the fdescfs file system");
4556 SYSCTL_JAIL_PARAM(_allow_mount, nullfs, CTLTYPE_INT | CTLFLAG_RW,
4557     "B", "Jail may mount the nullfs file system");
4558 SYSCTL_JAIL_PARAM(_allow_mount, procfs, CTLTYPE_INT | CTLFLAG_RW,
4559     "B", "Jail may mount the procfs file system");
4560 SYSCTL_JAIL_PARAM(_allow_mount, linprocfs, CTLTYPE_INT | CTLFLAG_RW,
4561     "B", "Jail may mount the linprocfs file system");
4562 SYSCTL_JAIL_PARAM(_allow_mount, linsysfs, CTLTYPE_INT | CTLFLAG_RW,
4563     "B", "Jail may mount the linsysfs file system");
4564 SYSCTL_JAIL_PARAM(_allow_mount, tmpfs, CTLTYPE_INT | CTLFLAG_RW,
4565     "B", "Jail may mount the tmpfs file system");
4566 SYSCTL_JAIL_PARAM(_allow_mount, zfs, CTLTYPE_INT | CTLFLAG_RW,
4567     "B", "Jail may mount the zfs file system");
4568
4569 #ifdef RACCT
4570 void
4571 prison_racct_foreach(void (*callback)(struct racct *racct,
4572     void *arg2, void *arg3), void *arg2, void *arg3)
4573 {
4574         struct prison_racct *prr;
4575
4576         ASSERT_RACCT_ENABLED();
4577
4578         sx_slock(&allprison_lock);
4579         LIST_FOREACH(prr, &allprison_racct, prr_next)
4580                 (callback)(prr->prr_racct, arg2, arg3);
4581         sx_sunlock(&allprison_lock);
4582 }
4583
4584 static struct prison_racct *
4585 prison_racct_find_locked(const char *name)
4586 {
4587         struct prison_racct *prr;
4588
4589         ASSERT_RACCT_ENABLED();
4590         sx_assert(&allprison_lock, SA_XLOCKED);
4591
4592         if (name[0] == '\0' || strlen(name) >= MAXHOSTNAMELEN)
4593                 return (NULL);
4594
4595         LIST_FOREACH(prr, &allprison_racct, prr_next) {
4596                 if (strcmp(name, prr->prr_name) != 0)
4597                         continue;
4598
4599                 /* Found prison_racct with a matching name? */
4600                 prison_racct_hold(prr);
4601                 return (prr);
4602         }
4603
4604         /* Add new prison_racct. */
4605         prr = malloc(sizeof(*prr), M_PRISON_RACCT, M_ZERO | M_WAITOK);
4606         racct_create(&prr->prr_racct);
4607
4608         strcpy(prr->prr_name, name);
4609         refcount_init(&prr->prr_refcount, 1);
4610         LIST_INSERT_HEAD(&allprison_racct, prr, prr_next);
4611
4612         return (prr);
4613 }
4614
4615 struct prison_racct *
4616 prison_racct_find(const char *name)
4617 {
4618         struct prison_racct *prr;
4619
4620         ASSERT_RACCT_ENABLED();
4621
4622         sx_xlock(&allprison_lock);
4623         prr = prison_racct_find_locked(name);
4624         sx_xunlock(&allprison_lock);
4625         return (prr);
4626 }
4627
4628 void
4629 prison_racct_hold(struct prison_racct *prr)
4630 {
4631
4632         ASSERT_RACCT_ENABLED();
4633
4634         refcount_acquire(&prr->prr_refcount);
4635 }
4636
4637 static void
4638 prison_racct_free_locked(struct prison_racct *prr)
4639 {
4640
4641         ASSERT_RACCT_ENABLED();
4642         sx_assert(&allprison_lock, SA_XLOCKED);
4643
4644         if (refcount_release(&prr->prr_refcount)) {
4645                 racct_destroy(&prr->prr_racct);
4646                 LIST_REMOVE(prr, prr_next);
4647                 free(prr, M_PRISON_RACCT);
4648         }
4649 }
4650
4651 void
4652 prison_racct_free(struct prison_racct *prr)
4653 {
4654         int old;
4655
4656         ASSERT_RACCT_ENABLED();
4657         sx_assert(&allprison_lock, SA_UNLOCKED);
4658
4659         old = prr->prr_refcount;
4660         if (old > 1 && atomic_cmpset_int(&prr->prr_refcount, old, old - 1))
4661                 return;
4662
4663         sx_xlock(&allprison_lock);
4664         prison_racct_free_locked(prr);
4665         sx_xunlock(&allprison_lock);
4666 }
4667
4668 static void
4669 prison_racct_attach(struct prison *pr)
4670 {
4671         struct prison_racct *prr;
4672
4673         ASSERT_RACCT_ENABLED();
4674         sx_assert(&allprison_lock, SA_XLOCKED);
4675
4676         prr = prison_racct_find_locked(pr->pr_name);
4677         KASSERT(prr != NULL, ("cannot find prison_racct"));
4678
4679         pr->pr_prison_racct = prr;
4680 }
4681
4682 /*
4683  * Handle jail renaming.  From the racct point of view, renaming means
4684  * moving from one prison_racct to another.
4685  */
4686 static void
4687 prison_racct_modify(struct prison *pr)
4688 {
4689         struct proc *p;
4690         struct ucred *cred;
4691         struct prison_racct *oldprr;
4692
4693         ASSERT_RACCT_ENABLED();
4694
4695         sx_slock(&allproc_lock);
4696         sx_xlock(&allprison_lock);
4697
4698         if (strcmp(pr->pr_name, pr->pr_prison_racct->prr_name) == 0) {
4699                 sx_xunlock(&allprison_lock);
4700                 sx_sunlock(&allproc_lock);
4701                 return;
4702         }
4703
4704         oldprr = pr->pr_prison_racct;
4705         pr->pr_prison_racct = NULL;
4706
4707         prison_racct_attach(pr);
4708
4709         /*
4710          * Move resource utilisation records.
4711          */
4712         racct_move(pr->pr_prison_racct->prr_racct, oldprr->prr_racct);
4713
4714         /*
4715          * Force rctl to reattach rules to processes.
4716          */
4717         FOREACH_PROC_IN_SYSTEM(p) {
4718                 PROC_LOCK(p);
4719                 cred = crhold(p->p_ucred);
4720                 PROC_UNLOCK(p);
4721                 racct_proc_ucred_changed(p, cred, cred);
4722                 crfree(cred);
4723         }
4724
4725         sx_sunlock(&allproc_lock);
4726         prison_racct_free_locked(oldprr);
4727         sx_xunlock(&allprison_lock);
4728 }
4729
4730 static void
4731 prison_racct_detach(struct prison *pr)
4732 {
4733
4734         ASSERT_RACCT_ENABLED();
4735         sx_assert(&allprison_lock, SA_UNLOCKED);
4736
4737         if (pr->pr_prison_racct == NULL)
4738                 return;
4739         prison_racct_free(pr->pr_prison_racct);
4740         pr->pr_prison_racct = NULL;
4741 }
4742 #endif /* RACCT */
4743
4744 #ifdef DDB
4745
4746 static void
4747 db_show_prison(struct prison *pr)
4748 {
4749         int fi;
4750 #if defined(INET) || defined(INET6)
4751         int ii;
4752 #endif
4753         unsigned jsf;
4754 #ifdef INET6
4755         char ip6buf[INET6_ADDRSTRLEN];
4756 #endif
4757
4758         db_printf("prison %p:\n", pr);
4759         db_printf(" jid             = %d\n", pr->pr_id);
4760         db_printf(" name            = %s\n", pr->pr_name);
4761         db_printf(" parent          = %p\n", pr->pr_parent);
4762         db_printf(" ref             = %d\n", pr->pr_ref);
4763         db_printf(" uref            = %d\n", pr->pr_uref);
4764         db_printf(" path            = %s\n", pr->pr_path);
4765         db_printf(" cpuset          = %d\n", pr->pr_cpuset
4766             ? pr->pr_cpuset->cs_id : -1);
4767 #ifdef VIMAGE
4768         db_printf(" vnet            = %p\n", pr->pr_vnet);
4769 #endif
4770         db_printf(" root            = %p\n", pr->pr_root);
4771         db_printf(" securelevel     = %d\n", pr->pr_securelevel);
4772         db_printf(" devfs_rsnum     = %d\n", pr->pr_devfs_rsnum);
4773         db_printf(" children.max    = %d\n", pr->pr_childmax);
4774         db_printf(" children.cur    = %d\n", pr->pr_childcount);
4775         db_printf(" child           = %p\n", LIST_FIRST(&pr->pr_children));
4776         db_printf(" sibling         = %p\n", LIST_NEXT(pr, pr_sibling));
4777         db_printf(" flags           = 0x%x", pr->pr_flags);
4778         for (fi = 0; fi < sizeof(pr_flag_names) / sizeof(pr_flag_names[0]);
4779             fi++)
4780                 if (pr_flag_names[fi] != NULL && (pr->pr_flags & (1 << fi)))
4781                         db_printf(" %s", pr_flag_names[fi]);
4782         for (fi = 0; fi < sizeof(pr_flag_jailsys) / sizeof(pr_flag_jailsys[0]);
4783             fi++) {
4784                 jsf = pr->pr_flags &
4785                     (pr_flag_jailsys[fi].disable | pr_flag_jailsys[fi].new);
4786                 db_printf(" %-16s= %s\n", pr_flag_jailsys[fi].name,
4787                     pr_flag_jailsys[fi].disable &&
4788                       (jsf == pr_flag_jailsys[fi].disable) ? "disable"
4789                     : (jsf == pr_flag_jailsys[fi].new) ? "new"
4790                     : "inherit");
4791         }
4792         db_printf(" allow           = 0x%x", pr->pr_allow);
4793         for (fi = 0; fi < sizeof(pr_allow_names) / sizeof(pr_allow_names[0]);
4794             fi++)
4795                 if (pr_allow_names[fi] != NULL && (pr->pr_allow & (1 << fi)))
4796                         db_printf(" %s", pr_allow_names[fi]);
4797         db_printf("\n");
4798         db_printf(" enforce_statfs  = %d\n", pr->pr_enforce_statfs);
4799         db_printf(" host.hostname   = %s\n", pr->pr_hostname);
4800         db_printf(" host.domainname = %s\n", pr->pr_domainname);
4801         db_printf(" host.hostuuid   = %s\n", pr->pr_hostuuid);
4802         db_printf(" host.hostid     = %lu\n", pr->pr_hostid);
4803 #ifdef INET
4804         db_printf(" ip4s            = %d\n", pr->pr_ip4s);
4805         for (ii = 0; ii < pr->pr_ip4s; ii++)
4806                 db_printf(" %s %s\n",
4807                     ii == 0 ? "ip4.addr        =" : "                 ",
4808                     inet_ntoa(pr->pr_ip4[ii]));
4809 #endif
4810 #ifdef INET6
4811         db_printf(" ip6s            = %d\n", pr->pr_ip6s);
4812         for (ii = 0; ii < pr->pr_ip6s; ii++)
4813                 db_printf(" %s %s\n",
4814                     ii == 0 ? "ip6.addr        =" : "                 ",
4815                     ip6_sprintf(ip6buf, &pr->pr_ip6[ii]));
4816 #endif
4817 }
4818
4819 DB_SHOW_COMMAND(prison, db_show_prison_command)
4820 {
4821         struct prison *pr;
4822
4823         if (!have_addr) {
4824                 /*
4825                  * Show all prisons in the list, and prison0 which is not
4826                  * listed.
4827                  */
4828                 db_show_prison(&prison0);
4829                 if (!db_pager_quit) {
4830                         TAILQ_FOREACH(pr, &allprison, pr_list) {
4831                                 db_show_prison(pr);
4832                                 if (db_pager_quit)
4833                                         break;
4834                         }
4835                 }
4836                 return;
4837         }
4838
4839         if (addr == 0)
4840                 pr = &prison0;
4841         else {
4842                 /* Look for a prison with the ID and with references. */
4843                 TAILQ_FOREACH(pr, &allprison, pr_list)
4844                         if (pr->pr_id == addr && pr->pr_ref > 0)
4845                                 break;
4846                 if (pr == NULL)
4847                         /* Look again, without requiring a reference. */
4848                         TAILQ_FOREACH(pr, &allprison, pr_list)
4849                                 if (pr->pr_id == addr)
4850                                         break;
4851                 if (pr == NULL)
4852                         /* Assume address points to a valid prison. */
4853                         pr = (struct prison *)addr;
4854         }
4855         db_show_prison(pr);
4856 }
4857
4858 #endif /* DDB */