sys/amd64/amd64/uma_machdep.c

   1 /*-
   2  * Copyright (c) 2003 Alan L. Cox <alc@cs.rice.edu>
   3  * All rights reserved.
   4  *
   5  * Redistribution and use in source and binary forms, with or without
   6  * modification, are permitted provided that the following conditions
   7  * are met:
   8  * 1. Redistributions of source code must retain the above copyright
   9  *    notice, this list of conditions and the following disclaimer.
  10  * 2. Redistributions in binary form must reproduce the above copyright
  11  *    notice, this list of conditions and the following disclaimer in the
  12  *    documentation and/or other materials provided with the distribution.
  13  *
  14  * THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
  15  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  16  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  17  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  18  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  19  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  20  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  21  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  22  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  23  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  24  * SUCH DAMAGE.
  25  */
  26
  27 #include <sys/cdefs.h>
  28 __FBSDID("$FreeBSD$");
  29
  30 #include <sys/param.h>
  31 #include <sys/lock.h>
  32 #include <sys/malloc.h>
  33 #include <sys/mutex.h>
  34 #include <sys/systm.h>
  35 #include <vm/vm.h>
  36 #include <vm/vm_page.h>
  37 #include <vm/vm_pageout.h>
  38 #include <vm/uma.h>
  39 #include <vm/uma_int.h>
  40 #include <machine/md_var.h>
  41 #include <machine/vmparam.h>
  42
  43 void *
  44 uma_small_alloc(uma_zone_t zone, int bytes, u_int8_t *flags, int wait)
  45 {
  46         vm_page_t m;
  47         vm_paddr_t pa;
  48         void *va;
  49         int pflags;
  50
  51         *flags = UMA_SLAB_PRIV;
  52         pflags = malloc2vm_flags(wait) | VM_ALLOC_NOOBJ | VM_ALLOC_WIRED;
  53         for (;;) {
  54                 m = vm_page_alloc(NULL, 0, pflags);
  55                 if (m == NULL) {
  56                         if (wait & M_NOWAIT)
  57                                 return (NULL);
  58                         else
  59                                 VM_WAIT;
  60                 } else
  61                         break;
  62         }
  63         pa = m->phys_addr;
  64         if ((wait & M_NODUMP) == 0)
  65                 dump_add_page(pa);
  66         va = (void *)PHYS_TO_DMAP(pa);
  67         if ((wait & M_ZERO) && (m->flags & PG_ZERO) == 0)
  68                 pagezero(va);
  69         return (va);
  70 }
  71
  72 void
  73 uma_small_free(void *mem, int size, u_int8_t flags)
  74 {
  75         vm_page_t m;
  76         vm_paddr_t pa;
  77
  78         pa = DMAP_TO_PHYS((vm_offset_t)mem);
  79         dump_drop_page(pa);
  80         m = PHYS_TO_VM_PAGE(pa);
  81         m->wire_count--;
  82         vm_page_free(m);
  83         atomic_subtract_int(&cnt.v_wire_count, 1);
  84 }