sys/dev/mfi/mfi_cam.c

   1 /*-
   2  * Copyright 2007 Scott Long
   3  * All rights reserved.
   4  *
   5  * Redistribution and use in source and binary forms, with or without
   6  * modification, are permitted provided that the following conditions
   7  * are met:
   8  * 1. Redistributions of source code must retain the above copyright
   9  *    notice, this list of conditions and the following disclaimer.
  10  * 2. Redistributions in binary form must reproduce the above copyright
  11  *    notice, this list of conditions and the following disclaimer in the
  12  *    documentation and/or other materials provided with the distribution.
  13  *
  14  * THIS SOFTWARE IS PROVIDED BY THE AUTHOR AND CONTRIBUTORS ``AS IS'' AND
  15  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
  16  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
  17  * ARE DISCLAIMED.  IN NO EVENT SHALL THE AUTHOR OR CONTRIBUTORS BE LIABLE
  18  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
  19  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
  20  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
  21  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  22  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
  23  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
  24  * SUCH DAMAGE.
  25  */
  26
  27 #include <sys/cdefs.h>
  28 __FBSDID("$FreeBSD$");
  29
  30 #include "opt_mfi.h"
  31
  32 #include <sys/param.h>
  33 #include <sys/systm.h>
  34 #include <sys/kernel.h>
  35 #include <sys/malloc.h>
  36 #include <sys/module.h>
  37 #include <sys/selinfo.h>
  38 #include <sys/bus.h>
  39 #include <sys/conf.h>
  40 #include <sys/eventhandler.h>
  41 #include <sys/rman.h>
  42 #include <sys/bus_dma.h>
  43 #include <sys/bio.h>
  44 #include <sys/ioccom.h>
  45 #include <sys/uio.h>
  46 #include <sys/proc.h>
  47 #include <sys/signalvar.h>
  48 #include <sys/sysctl.h>
  49
  50 #include <cam/cam.h>
  51 #include <cam/cam_ccb.h>
  52 #include <cam/cam_debug.h>
  53 #include <cam/cam_periph.h>
  54 #include <cam/cam_sim.h>
  55 #include <cam/cam_xpt_periph.h>
  56 #include <cam/cam_xpt_sim.h>
  57 #include <cam/scsi/scsi_all.h>
  58 #include <cam/scsi/scsi_message.h>
  59
  60 #include <machine/md_var.h>
  61 #include <machine/bus.h>
  62 #include <machine/resource.h>
  63
  64 #include <dev/mfi/mfireg.h>
  65 #include <dev/mfi/mfi_ioctl.h>
  66 #include <dev/mfi/mfivar.h>
  67
  68 enum mfip_state {
  69         MFIP_STATE_NONE,
  70         MFIP_STATE_DETACH,
  71         MFIP_STATE_RESCAN
  72 };
  73
  74 struct mfip_softc {
  75         device_t        dev;
  76         struct mfi_softc *mfi_sc;
  77         struct cam_devq *devq;
  78         struct cam_sim  *sim;
  79         struct cam_path *path;
  80         enum mfip_state state;
  81 };
  82
  83 static int      mfip_probe(device_t);
  84 static int      mfip_attach(device_t);
  85 static int      mfip_detach(device_t);
  86 static void     mfip_cam_action(struct cam_sim *, union ccb *);
  87 static void     mfip_cam_poll(struct cam_sim *);
  88 static void     mfip_cam_rescan(struct mfi_softc *, uint32_t tid);
  89 static struct mfi_command * mfip_start(void *);
  90 static void     mfip_done(struct mfi_command *cm);
  91
  92 static int mfi_allow_disks = 0;
  93 TUNABLE_INT("hw.mfi.allow_cam_disk_passthrough", &mfi_allow_disks);
  94 SYSCTL_INT(_hw_mfi, OID_AUTO, allow_cam_disk_passthrough, CTLFLAG_RD,
  95     &mfi_allow_disks, 0, "event message locale");
  96
  97 static devclass_t       mfip_devclass;
  98 static device_method_t  mfip_methods[] = {
  99         DEVMETHOD(device_probe,         mfip_probe),
 100         DEVMETHOD(device_attach,        mfip_attach),
 101         DEVMETHOD(device_detach,        mfip_detach),
 102         {0, 0}
 103 };
 104 static driver_t mfip_driver = {
 105         "mfip",
 106         mfip_methods,
 107         sizeof(struct mfip_softc)
 108 };
 109 DRIVER_MODULE(mfip, mfi, mfip_driver, mfip_devclass, 0, 0);
 110 MODULE_DEPEND(mfip, cam, 1, 1, 1);
 111 MODULE_DEPEND(mfip, mfi, 1, 1, 1);
 112
 113 #define ccb_mfip_ptr sim_priv.entries[0].ptr
 114
 115 static int
 116 mfip_probe(device_t dev)
 117 {
 118
 119         device_set_desc(dev, "SCSI Passthrough Bus");
 120         return (0);
 121 }
 122
 123 static int
 124 mfip_attach(device_t dev)
 125 {
 126         struct mfip_softc *sc;
 127         struct mfi_softc *mfisc;
 128
 129         sc = device_get_softc(dev);
 130         if (sc == NULL)
 131                 return (EINVAL);
 132
 133         mfisc = device_get_softc(device_get_parent(dev));
 134         sc->dev = dev;
 135         sc->state = MFIP_STATE_NONE;
 136         sc->mfi_sc = mfisc;
 137         mfisc->mfi_cam_start = mfip_start;
 138
 139         if ((sc->devq = cam_simq_alloc(MFI_SCSI_MAX_CMDS)) == NULL)
 140                 return (ENOMEM);
 141
 142         sc->sim = cam_sim_alloc(mfip_cam_action, mfip_cam_poll, "mfi", sc,
 143                                 device_get_unit(dev), &mfisc->mfi_io_lock, 1,
 144                                 MFI_SCSI_MAX_CMDS, sc->devq);
 145         if (sc->sim == NULL) {
 146                 cam_simq_free(sc->devq);
 147                 sc->devq = NULL;
 148                 device_printf(dev, "CAM SIM attach failed\n");
 149                 return (EINVAL);
 150         }
 151
 152         mfisc->mfi_cam_rescan_cb = mfip_cam_rescan;
 153
 154         mtx_lock(&mfisc->mfi_io_lock);
 155         if (xpt_bus_register(sc->sim, dev, 0) != 0) {
 156                 device_printf(dev, "XPT bus registration failed\n");
 157                 cam_sim_free(sc->sim, FALSE);
 158                 sc->sim = NULL;
 159                 cam_simq_free(sc->devq);
 160                 sc->devq = NULL;
 161                 mtx_unlock(&mfisc->mfi_io_lock);
 162                 return (EINVAL);
 163         }
 164         mtx_unlock(&mfisc->mfi_io_lock);
 165
 166         return (0);
 167 }
 168
 169 static int
 170 mfip_detach(device_t dev)
 171 {
 172         struct mfip_softc *sc;
 173
 174         sc = device_get_softc(dev);
 175         if (sc == NULL)
 176                 return (EINVAL);
 177
 178         mtx_lock(&sc->mfi_sc->mfi_io_lock);
 179         if (sc->state == MFIP_STATE_RESCAN) {
 180                 mtx_unlock(&sc->mfi_sc->mfi_io_lock);
 181                 return (EBUSY);
 182         }
 183         sc->state = MFIP_STATE_DETACH;
 184         mtx_unlock(&sc->mfi_sc->mfi_io_lock);
 185
 186         sc->mfi_sc->mfi_cam_rescan_cb = NULL;
 187
 188         if (sc->sim != NULL) {
 189                 mtx_lock(&sc->mfi_sc->mfi_io_lock);
 190                 xpt_bus_deregister(cam_sim_path(sc->sim));
 191                 cam_sim_free(sc->sim, FALSE);
 192                 sc->sim = NULL;
 193                 mtx_unlock(&sc->mfi_sc->mfi_io_lock);
 194         }
 195
 196         if (sc->devq != NULL) {
 197                 cam_simq_free(sc->devq);
 198                 sc->devq = NULL;
 199         }
 200
 201         return (0);
 202 }
 203
 204 static void
 205 mfip_cam_action(struct cam_sim *sim, union ccb *ccb)
 206 {
 207         struct mfip_softc *sc = cam_sim_softc(sim);
 208         struct mfi_softc *mfisc = sc->mfi_sc;
 209
 210         mtx_assert(&mfisc->mfi_io_lock, MA_OWNED);
 211
 212         switch (ccb->ccb_h.func_code) {
 213         case XPT_PATH_INQ:
 214         {
 215                 struct ccb_pathinq *cpi = &ccb->cpi;
 216
 217                 cpi->version_num = 1;
 218                 cpi->hba_inquiry = PI_SDTR_ABLE|PI_TAG_ABLE|PI_WIDE_16;
 219                 cpi->target_sprt = 0;
 220                 cpi->hba_misc = PIM_NOBUSRESET|PIM_SEQSCAN;
 221                 cpi->hba_eng_cnt = 0;
 222                 cpi->max_target = MFI_SCSI_MAX_TARGETS;
 223                 cpi->max_lun = MFI_SCSI_MAX_LUNS;
 224                 cpi->initiator_id = MFI_SCSI_INITIATOR_ID;
 225                 strncpy(cpi->sim_vid, "FreeBSD", SIM_IDLEN);
 226                 strncpy(cpi->hba_vid, "LSI", HBA_IDLEN);
 227                 strncpy(cpi->dev_name, cam_sim_name(sim), DEV_IDLEN);
 228                 cpi->unit_number = cam_sim_unit(sim);
 229                 cpi->bus_id = cam_sim_bus(sim);
 230                 cpi->base_transfer_speed = 150000;
 231                 cpi->transport = XPORT_SAS;
 232                 cpi->transport_version = 0;
 233                 cpi->protocol = PROTO_SCSI;
 234                 cpi->protocol_version = SCSI_REV_2;
 235                 cpi->ccb_h.status = CAM_REQ_CMP;
 236                 break;
 237         }
 238         case XPT_RESET_BUS:
 239                 ccb->ccb_h.status = CAM_REQ_CMP;
 240                 break;
 241         case XPT_RESET_DEV:
 242                 ccb->ccb_h.status = CAM_REQ_CMP;
 243                 break;
 244         case XPT_GET_TRAN_SETTINGS:
 245         {
 246                 struct ccb_trans_settings_sas *sas =
 247                     &ccb->cts.xport_specific.sas;
 248
 249                 ccb->cts.protocol = PROTO_SCSI;
 250                 ccb->cts.protocol_version = SCSI_REV_2;
 251                 ccb->cts.transport = XPORT_SAS;
 252                 ccb->cts.transport_version = 0;
 253
 254                 sas->valid &= ~CTS_SAS_VALID_SPEED;
 255                 sas->bitrate = 150000;
 256
 257                 ccb->ccb_h.status = CAM_REQ_CMP;
 258                 break;
 259         }
 260         case XPT_SET_TRAN_SETTINGS:
 261                 ccb->ccb_h.status = CAM_FUNC_NOTAVAIL;
 262                 break;
 263         case XPT_SCSI_IO:
 264         {
 265                 struct ccb_hdr          *ccbh = &ccb->ccb_h;
 266                 struct ccb_scsiio       *csio = &ccb->csio;
 267
 268                 ccbh->status = CAM_REQ_INPROG;
 269                 if (csio->cdb_len > MFI_SCSI_MAX_CDB_LEN) {
 270                         ccbh->status = CAM_REQ_INVALID;
 271                         break;
 272                 }
 273                 ccbh->ccb_mfip_ptr = sc;
 274                 TAILQ_INSERT_TAIL(&mfisc->mfi_cam_ccbq, ccbh, sim_links.tqe);
 275                 mfi_startio(mfisc);
 276                 return;
 277         }
 278         default:
 279                 ccb->ccb_h.status = CAM_REQ_INVALID;
 280                 break;
 281         }
 282
 283         xpt_done(ccb);
 284         return;
 285 }
 286
 287 static void
 288 mfip_cam_rescan(struct mfi_softc *sc, uint32_t tid)
 289 {
 290         union ccb *ccb;
 291         struct mfip_softc *camsc;
 292         struct cam_sim *sim;
 293         device_t mfip_dev;
 294
 295         mtx_lock(&Giant);
 296         mfip_dev = device_find_child(sc->mfi_dev, "mfip", -1);
 297         mtx_unlock(&Giant);
 298         if (mfip_dev == NULL) {
 299                 device_printf(sc->mfi_dev, "Couldn't find mfip child device!\n");
 300                 return;
 301         }
 302
 303         mtx_lock(&sc->mfi_io_lock);
 304         camsc = device_get_softc(mfip_dev);
 305         if (camsc->state == MFIP_STATE_DETACH) {
 306                 mtx_unlock(&sc->mfi_io_lock);
 307                 return;
 308         }
 309         camsc->state = MFIP_STATE_RESCAN;
 310         mtx_unlock(&sc->mfi_io_lock);
 311
 312         ccb = xpt_alloc_ccb_nowait();
 313         if (ccb == NULL) {
 314                 device_printf(sc->mfi_dev,
 315                     "Cannot allocate ccb for bus rescan.\n");
 316                 return;
 317         }
 318
 319         sim = camsc->sim;
 320         mtx_lock(&sc->mfi_io_lock);
 321         if (xpt_create_path(&ccb->ccb_h.path, NULL, cam_sim_path(sim),
 322             tid, CAM_LUN_WILDCARD) != CAM_REQ_CMP) {
 323                 xpt_free_ccb(ccb);
 324                 mtx_unlock(&sc->mfi_io_lock);
 325                 device_printf(sc->mfi_dev,
 326                     "Cannot create path for bus rescan.\n");
 327                 return;
 328         }
 329         mtx_unlock(&sc->mfi_io_lock);
 330
 331         xpt_rescan(ccb);
 332
 333         mtx_lock(&sc->mfi_io_lock);
 334         camsc->state = MFIP_STATE_NONE;
 335         mtx_unlock(&sc->mfi_io_lock);
 336 }
 337
 338 static struct mfi_command *
 339 mfip_start(void *data)
 340 {
 341         union ccb *ccb = data;
 342         struct ccb_hdr *ccbh = &ccb->ccb_h;
 343         struct ccb_scsiio *csio = &ccb->csio;
 344         struct mfip_softc *sc;
 345         struct mfi_pass_frame *pt;
 346         struct mfi_command *cm;
 347         uint32_t context = 0;
 348
 349         sc = ccbh->ccb_mfip_ptr;
 350
 351         if ((cm = mfi_dequeue_free(sc->mfi_sc)) == NULL)
 352                 return (NULL);
 353
 354         /* Zero out the MFI frame */
 355         context = cm->cm_frame->header.context;
 356         bzero(cm->cm_frame, sizeof(union mfi_frame));
 357         cm->cm_frame->header.context = context;
 358
 359         pt = &cm->cm_frame->pass;
 360         pt->header.cmd = MFI_CMD_PD_SCSI_IO;
 361         pt->header.cmd_status = 0;
 362         pt->header.scsi_status = 0;
 363         pt->header.target_id = ccbh->target_id;
 364         pt->header.lun_id = ccbh->target_lun;
 365         pt->header.flags = 0;
 366         pt->header.timeout = 0;
 367         pt->header.data_len = csio->dxfer_len;
 368         pt->header.sense_len = MFI_SENSE_LEN;
 369         pt->header.cdb_len = csio->cdb_len;
 370         pt->sense_addr_lo = (uint32_t)cm->cm_sense_busaddr;
 371         pt->sense_addr_hi = (uint32_t)((uint64_t)cm->cm_sense_busaddr >> 32);
 372         if (ccbh->flags & CAM_CDB_POINTER)
 373                 bcopy(csio->cdb_io.cdb_ptr, &pt->cdb[0], csio->cdb_len);
 374         else
 375                 bcopy(csio->cdb_io.cdb_bytes, &pt->cdb[0], csio->cdb_len);
 376         cm->cm_complete = mfip_done;
 377         cm->cm_private = ccb;
 378         cm->cm_sg = &pt->sgl;
 379         cm->cm_total_frame_size = MFI_PASS_FRAME_SIZE;
 380         cm->cm_data = ccb;
 381         cm->cm_len = csio->dxfer_len;
 382         switch (ccbh->flags & CAM_DIR_MASK) {
 383         case CAM_DIR_IN:
 384                 cm->cm_flags = MFI_CMD_DATAIN | MFI_CMD_CCB;
 385                 break;
 386         case CAM_DIR_OUT:
 387                 cm->cm_flags = MFI_CMD_DATAOUT | MFI_CMD_CCB;
 388                 break;
 389         case CAM_DIR_NONE:
 390         default:
 391                 cm->cm_data = NULL;
 392                 cm->cm_len = 0;
 393                 cm->cm_flags = 0;
 394                 break;
 395         }
 396
 397         TAILQ_REMOVE(&sc->mfi_sc->mfi_cam_ccbq, ccbh, sim_links.tqe);
 398         return (cm);
 399 }
 400
 401 static void
 402 mfip_done(struct mfi_command *cm)
 403 {
 404         union ccb *ccb = cm->cm_private;
 405         struct ccb_hdr *ccbh = &ccb->ccb_h;
 406         struct ccb_scsiio *csio = &ccb->csio;
 407         struct mfip_softc *sc;
 408         struct mfi_pass_frame *pt;
 409
 410         sc = ccbh->ccb_mfip_ptr;
 411         pt = &cm->cm_frame->pass;
 412
 413         switch (pt->header.cmd_status) {
 414         case MFI_STAT_OK:
 415         {
 416                 uint8_t command, device;
 417
 418                 ccbh->status = CAM_REQ_CMP;
 419                 csio->scsi_status = pt->header.scsi_status;
 420                 if (ccbh->flags & CAM_CDB_POINTER)
 421                         command = csio->cdb_io.cdb_ptr[0];
 422                 else
 423                         command = csio->cdb_io.cdb_bytes[0];
 424                 if (command == INQUIRY) {
 425                         device = csio->data_ptr[0] & 0x1f;
 426                         if ((!mfi_allow_disks && device == T_DIRECT) ||
 427                             (device == T_PROCESSOR))
 428                                 csio->data_ptr[0] =
 429                                      (csio->data_ptr[0] & 0xe0) | T_NODEVICE;
 430                 }
 431                 break;
 432         }
 433         case MFI_STAT_SCSI_DONE_WITH_ERROR:
 434         {
 435                 int sense_len;
 436
 437                 ccbh->status = CAM_SCSI_STATUS_ERROR | CAM_AUTOSNS_VALID;
 438                 csio->scsi_status = pt->header.scsi_status;
 439                 if (pt->header.sense_len < csio->sense_len)
 440                         csio->sense_resid = csio->sense_len -
 441                             pt->header.sense_len;
 442                 else
 443                         csio->sense_resid = 0;
 444                 sense_len = min(pt->header.sense_len,
 445                     sizeof(struct scsi_sense_data));
 446                 bzero(&csio->sense_data, sizeof(struct scsi_sense_data));
 447                 bcopy(&cm->cm_sense->data[0], &csio->sense_data, sense_len);
 448                 break;
 449         }
 450         case MFI_STAT_DEVICE_NOT_FOUND:
 451                 ccbh->status = CAM_SEL_TIMEOUT;
 452                 break;
 453         case MFI_STAT_SCSI_IO_FAILED:
 454                 ccbh->status = CAM_REQ_CMP_ERR;
 455                 csio->scsi_status = pt->header.scsi_status;
 456                 break;
 457         default:
 458                 ccbh->status = CAM_REQ_CMP_ERR;
 459                 csio->scsi_status = pt->header.scsi_status;
 460                 break;
 461         }
 462
 463         mfi_release_command(cm);
 464         xpt_done(ccb);
 465 }
 466
 467 static void
 468 mfip_cam_poll(struct cam_sim *sim)
 469 {
 470         struct mfip_softc *sc = cam_sim_softc(sim);
 471         struct mfi_softc *mfisc = sc->mfi_sc;
 472
 473         mfisc->mfi_intr_ptr(mfisc);
 474 }
 475