sys/sys/lockmgr.h

   1 /*-
   2  * SPDX-License-Identifier: BSD-2-Clause-FreeBSD
   3  *
   4  * Copyright (c) 2008 Attilio Rao <attilio@FreeBSD.org>
   5  * All rights reserved.
   6  *
   7  * Redistribution and use in source and binary forms, with or without
   8  * modification, are permitted provided that the following conditions
   9  * are met:
  10  * 1. Redistributions of source code must retain the above copyright
  11  *    notice(s), this list of conditions and the following disclaimer as
  12  *    the first lines of this file unmodified other than the possible
  13  *    addition of one or more copyright notices.
  14  * 2. Redistributions in binary form must reproduce the above copyright
  15  *    notice(s), this list of conditions and the following disclaimer in the
  16  *    documentation and/or other materials provided with the distribution.
  17  *
  18  * THIS SOFTWARE IS PROVIDED BY THE COPYRIGHT HOLDER(S) ``AS IS'' AND ANY
  19  * EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
  20  * WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE ARE
  21  * DISCLAIMED.  IN NO EVENT SHALL THE COPYRIGHT HOLDER(S) BE LIABLE FOR ANY
  22  * DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES
  23  * (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR
  24  * SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER
  25  * CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  26  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  27  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF SUCH
  28  * DAMAGE.
  29  *
  30  * $FreeBSD$
  31  */
  32
  33 #ifndef _SYS_LOCKMGR_H_
  34 #define _SYS_LOCKMGR_H_
  35
  36 #include <sys/_lock.h>
  37 #include <sys/_lockmgr.h>
  38 #include <sys/_mutex.h>
  39 #include <sys/_rwlock.h>
  40
  41 #define LK_SHARE                        0x01
  42 #define LK_SHARED_WAITERS               0x02
  43 #define LK_EXCLUSIVE_WAITERS            0x04
  44 #define LK_EXCLUSIVE_SPINNERS           0x08
  45 #define LK_ALL_WAITERS                                                  \
  46         (LK_SHARED_WAITERS | LK_EXCLUSIVE_WAITERS)
  47 #define LK_FLAGMASK                                                     \
  48         (LK_SHARE | LK_ALL_WAITERS | LK_EXCLUSIVE_SPINNERS)
  49
  50 #define LK_HOLDER(x)                    ((x) & ~LK_FLAGMASK)
  51 #define LK_SHARERS_SHIFT                4
  52 #define LK_SHARERS(x)                   (LK_HOLDER(x) >> LK_SHARERS_SHIFT)
  53 #define LK_SHARERS_LOCK(x)              ((x) << LK_SHARERS_SHIFT | LK_SHARE)
  54 #define LK_ONE_SHARER                   (1 << LK_SHARERS_SHIFT)
  55 #define LK_UNLOCKED                     LK_SHARERS_LOCK(0)
  56 #define LK_KERNPROC                     ((uintptr_t)(-1) & ~LK_FLAGMASK)
  57
  58 #ifdef _KERNEL
  59
  60 #if !defined(LOCK_FILE) || !defined(LOCK_LINE)
  61 #error  "LOCK_FILE and LOCK_LINE not defined, include <sys/lock.h> before"
  62 #endif
  63
  64 struct thread;
  65 #define lk_recurse      lock_object.lo_data
  66
  67 /*
  68  * Function prototipes.  Routines that start with an underscore are not part
  69  * of the public interface and might be wrappered with a macro.
  70  */
  71 int      __lockmgr_args(struct lock *lk, u_int flags, struct lock_object *ilk,
  72             const char *wmesg, int prio, int timo, const char *file, int line);
  73 int      lockmgr_lock_fast_path(struct lock *lk, u_int flags,
  74             struct lock_object *ilk, const char *file, int line);
  75 int      lockmgr_unlock_fast_path(struct lock *lk, u_int flags,
  76             struct lock_object *ilk);
  77 int     lockmgr_slock(struct lock *lk, u_int flags, const char *file, int line);
  78 int     lockmgr_xlock(struct lock *lk, u_int flags, const char *file, int line);
  79 int     lockmgr_unlock(struct lock *lk);
  80
  81 #if defined(INVARIANTS) || defined(INVARIANT_SUPPORT)
  82 void     _lockmgr_assert(const struct lock *lk, int what, const char *file, int line);
  83 #endif
  84 void     _lockmgr_disown(struct lock *lk, const char *file, int line);
  85
  86 void     lockallowrecurse(struct lock *lk);
  87 void     lockallowshare(struct lock *lk);
  88 void     lockdestroy(struct lock *lk);
  89 void     lockdisablerecurse(struct lock *lk);
  90 void     lockdisableshare(struct lock *lk);
  91 void     lockinit(struct lock *lk, int prio, const char *wmesg, int timo,
  92             int flags);
  93 #ifdef DDB
  94 int      lockmgr_chain(struct thread *td, struct thread **ownerp);
  95 #endif
  96 void     lockmgr_printinfo(const struct lock *lk);
  97 int      lockstatus(const struct lock *lk);
  98
  99 /*
 100  * As far as the ilk can be a static NULL pointer these functions need a
 101  * strict prototype in order to safely use the lock_object member.
 102  */
 103 static __inline int
 104 _lockmgr_args(struct lock *lk, u_int flags, struct mtx *ilk, const char *wmesg,
 105     int prio, int timo, const char *file, int line)
 106 {
 107
 108         return (__lockmgr_args(lk, flags, (ilk != NULL) ? &ilk->lock_object :
 109             NULL, wmesg, prio, timo, file, line));
 110 }
 111
 112 static __inline int
 113 _lockmgr_args_rw(struct lock *lk, u_int flags, struct rwlock *ilk,
 114     const char *wmesg, int prio, int timo, const char *file, int line)
 115 {
 116
 117         return (__lockmgr_args(lk, flags, (ilk != NULL) ? &ilk->lock_object :
 118             NULL, wmesg, prio, timo, file, line));
 119 }
 120
 121 /*
 122  * Define aliases in order to complete lockmgr KPI.
 123  */
 124 #define lockmgr(lk, flags, ilk)                                         \
 125         _lockmgr_args((lk), (flags), (ilk), LK_WMESG_DEFAULT,           \
 126             LK_PRIO_DEFAULT, LK_TIMO_DEFAULT, LOCK_FILE, LOCK_LINE)
 127 #define lockmgr_args(lk, flags, ilk, wmesg, prio, timo)                 \
 128         _lockmgr_args((lk), (flags), (ilk), (wmesg), (prio), (timo),    \
 129             LOCK_FILE, LOCK_LINE)
 130 #define lockmgr_args_rw(lk, flags, ilk, wmesg, prio, timo)              \
 131         _lockmgr_args_rw((lk), (flags), (ilk), (wmesg), (prio), (timo), \
 132             LOCK_FILE, LOCK_LINE)
 133 #define lockmgr_disown(lk)                                              \
 134         _lockmgr_disown((lk), LOCK_FILE, LOCK_LINE)
 135 #define lockmgr_recursed(lk)                                            \
 136         ((lk)->lk_recurse != 0)
 137 #define lockmgr_rw(lk, flags, ilk)                                      \
 138         _lockmgr_args_rw((lk), (flags), (ilk), LK_WMESG_DEFAULT,        \
 139             LK_PRIO_DEFAULT, LK_TIMO_DEFAULT, LOCK_FILE, LOCK_LINE)
 140 #ifdef INVARIANTS
 141 #define lockmgr_assert(lk, what)                                        \
 142         _lockmgr_assert((lk), (what), LOCK_FILE, LOCK_LINE)
 143 #else
 144 #define lockmgr_assert(lk, what)
 145 #endif
 146
 147 /*
 148  * Flags for lockinit().
 149  */
 150 #define LK_INIT_MASK    0x0001FF
 151 #define LK_CANRECURSE   0x000001
 152 #define LK_NODUP        0x000002
 153 #define LK_NOPROFILE    0x000004
 154 #define LK_NOSHARE      0x000008
 155 #define LK_NOWITNESS    0x000010
 156 #define LK_QUIET        0x000020
 157 #define LK_UNUSED0      0x000040        /* Was LK_ADAPTIVE */
 158 #define LK_IS_VNODE     0x000080        /* Tell WITNESS about a VNODE lock */
 159 #define LK_NEW          0x000100
 160
 161 /*
 162  * Additional attributes to be used in lockmgr().
 163  */
 164 #define LK_EATTR_MASK   0x00FF00
 165 #define LK_INTERLOCK    0x000100
 166 #define LK_NOWAIT       0x000200
 167 #define LK_RETRY        0x000400
 168 #define LK_SLEEPFAIL    0x000800
 169 #define LK_TIMELOCK     0x001000
 170 #define LK_NODDLKTREAT  0x002000
 171
 172 /*
 173  * Operations for lockmgr().
 174  */
 175 #define LK_TYPE_MASK    0xFF0000
 176 #define LK_DOWNGRADE    0x010000
 177 #define LK_DRAIN        0x020000
 178 #define LK_EXCLOTHER    0x040000
 179 #define LK_EXCLUSIVE    0x080000
 180 #define LK_RELEASE      0x100000
 181 #define LK_SHARED       0x200000
 182 #define LK_UPGRADE      0x400000
 183 #define LK_TRYUPGRADE   0x800000
 184
 185 #define LK_TOTAL_MASK   (LK_INIT_MASK | LK_EATTR_MASK | LK_TYPE_MASK)
 186
 187 /*
 188  * Default values for lockmgr_args().
 189  */
 190 #define LK_WMESG_DEFAULT        (NULL)
 191 #define LK_PRIO_DEFAULT         (0)
 192 #define LK_TIMO_DEFAULT         (0)
 193
 194 /*
 195  * Assertion flags.
 196  */
 197 #if defined(INVARIANTS) || defined(INVARIANT_SUPPORT)
 198 #define KA_LOCKED       LA_LOCKED
 199 #define KA_SLOCKED      LA_SLOCKED
 200 #define KA_XLOCKED      LA_XLOCKED
 201 #define KA_UNLOCKED     LA_UNLOCKED
 202 #define KA_RECURSED     LA_RECURSED
 203 #define KA_NOTRECURSED  LA_NOTRECURSED
 204 #endif
 205
 206 #endif /* _KERNEL */
 207
 208 #endif /* !_SYS_LOCKMGR_H_ */