]> CyberLeo.Net >> Repos - FreeBSD/FreeBSD.git/blob - usr.sbin/bhyve/pci_virtio_net.c
Merge ^/vendor/llvm-project/release-10.x up to its last change (upstream
[FreeBSD/FreeBSD.git] / usr.sbin / bhyve / pci_virtio_net.c
1 /*-
2  * SPDX-License-Identifier: BSD-2-Clause-FreeBSD
3  *
4  * Copyright (c) 2011 NetApp, Inc.
5  * All rights reserved.
6  *
7  * Redistribution and use in source and binary forms, with or without
8  * modification, are permitted provided that the following conditions
9  * are met:
10  * 1. Redistributions of source code must retain the above copyright
11  *    notice, this list of conditions and the following disclaimer.
12  * 2. Redistributions in binary form must reproduce the above copyright
13  *    notice, this list of conditions and the following disclaimer in the
14  *    documentation and/or other materials provided with the distribution.
15  *
16  * THIS SOFTWARE IS PROVIDED BY NETAPP, INC ``AS IS'' AND
17  * ANY EXPRESS OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE
18  * IMPLIED WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR PURPOSE
19  * ARE DISCLAIMED.  IN NO EVENT SHALL NETAPP, INC OR CONTRIBUTORS BE LIABLE
20  * FOR ANY DIRECT, INDIRECT, INCIDENTAL, SPECIAL, EXEMPLARY, OR CONSEQUENTIAL
21  * DAMAGES (INCLUDING, BUT NOT LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS
22  * OR SERVICES; LOSS OF USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION)
23  * HOWEVER CAUSED AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
24  * LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN ANY WAY
25  * OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE POSSIBILITY OF
26  * SUCH DAMAGE.
27  *
28  * $FreeBSD$
29  */
30
31 #include <sys/cdefs.h>
32 __FBSDID("$FreeBSD$");
33
34 #include <sys/param.h>
35 #include <sys/linker_set.h>
36 #include <sys/select.h>
37 #include <sys/uio.h>
38 #include <sys/ioctl.h>
39 #include <net/ethernet.h>
40 #include <net/if.h> /* IFNAMSIZ */
41
42 #include <err.h>
43 #include <errno.h>
44 #include <fcntl.h>
45 #include <stdio.h>
46 #include <stdlib.h>
47 #include <stdint.h>
48 #include <string.h>
49 #include <strings.h>
50 #include <unistd.h>
51 #include <assert.h>
52 #include <pthread.h>
53 #include <pthread_np.h>
54
55 #include "bhyverun.h"
56 #include "debug.h"
57 #include "pci_emul.h"
58 #include "mevent.h"
59 #include "virtio.h"
60 #include "net_utils.h"
61 #include "net_backends.h"
62 #include "iov.h"
63
64 #define VTNET_RINGSZ    1024
65
66 #define VTNET_MAXSEGS   256
67
68 #define VTNET_MAX_PKT_LEN       (65536 + 64)
69
70 #define VTNET_S_HOSTCAPS      \
71   ( VIRTIO_NET_F_MAC | VIRTIO_NET_F_STATUS | \
72     VIRTIO_F_NOTIFY_ON_EMPTY | VIRTIO_RING_F_INDIRECT_DESC)
73
74 /*
75  * PCI config-space "registers"
76  */
77 struct virtio_net_config {
78         uint8_t  mac[6];
79         uint16_t status;
80 } __packed;
81
82 /*
83  * Queue definitions.
84  */
85 #define VTNET_RXQ       0
86 #define VTNET_TXQ       1
87 #define VTNET_CTLQ      2       /* NB: not yet supported */
88
89 #define VTNET_MAXQ      3
90
91 /*
92  * Debug printf
93  */
94 static int pci_vtnet_debug;
95 #define DPRINTF(params) if (pci_vtnet_debug) PRINTLN params
96 #define WPRINTF(params) PRINTLN params
97
98 /*
99  * Per-device softc
100  */
101 struct pci_vtnet_softc {
102         struct virtio_softc vsc_vs;
103         struct vqueue_info vsc_queues[VTNET_MAXQ - 1];
104         pthread_mutex_t vsc_mtx;
105
106         net_backend_t   *vsc_be;
107
108         int             resetting;      /* protected by tx_mtx */
109
110         uint64_t        vsc_features;   /* negotiated features */
111         
112         pthread_mutex_t rx_mtx;
113         int             rx_merge;       /* merged rx bufs in use */
114
115         pthread_t       tx_tid;
116         pthread_mutex_t tx_mtx;
117         pthread_cond_t  tx_cond;
118         int             tx_in_progress;
119
120         size_t          vhdrlen;
121         size_t          be_vhdrlen;
122
123         struct virtio_net_config vsc_config;
124         struct virtio_consts vsc_consts;
125 };
126
127 static void pci_vtnet_reset(void *);
128 /* static void pci_vtnet_notify(void *, struct vqueue_info *); */
129 static int pci_vtnet_cfgread(void *, int, int, uint32_t *);
130 static int pci_vtnet_cfgwrite(void *, int, int, uint32_t);
131 static void pci_vtnet_neg_features(void *, uint64_t);
132
133 static struct virtio_consts vtnet_vi_consts = {
134         "vtnet",                /* our name */
135         VTNET_MAXQ - 1,         /* we currently support 2 virtqueues */
136         sizeof(struct virtio_net_config), /* config reg size */
137         pci_vtnet_reset,        /* reset */
138         NULL,                   /* device-wide qnotify -- not used */
139         pci_vtnet_cfgread,      /* read PCI config */
140         pci_vtnet_cfgwrite,     /* write PCI config */
141         pci_vtnet_neg_features, /* apply negotiated features */
142         VTNET_S_HOSTCAPS,       /* our capabilities */
143 };
144
145 static void
146 pci_vtnet_reset(void *vsc)
147 {
148         struct pci_vtnet_softc *sc = vsc;
149
150         DPRINTF(("vtnet: device reset requested !"));
151
152         /* Acquire the RX lock to block RX processing. */
153         pthread_mutex_lock(&sc->rx_mtx);
154
155         /*
156          * Make sure receive operation is disabled at least until we
157          * re-negotiate the features, since receive operation depends
158          * on the value of sc->rx_merge and the header length, which
159          * are both set in pci_vtnet_neg_features().
160          * Receive operation will be enabled again once the guest adds
161          * the first receive buffers and kicks us.
162          */
163         netbe_rx_disable(sc->vsc_be);
164
165         /* Set sc->resetting and give a chance to the TX thread to stop. */
166         pthread_mutex_lock(&sc->tx_mtx);
167         sc->resetting = 1;
168         while (sc->tx_in_progress) {
169                 pthread_mutex_unlock(&sc->tx_mtx);
170                 usleep(10000);
171                 pthread_mutex_lock(&sc->tx_mtx);
172         }
173
174         /*
175          * Now reset rings, MSI-X vectors, and negotiated capabilities.
176          * Do that with the TX lock held, since we need to reset
177          * sc->resetting.
178          */
179         vi_reset_dev(&sc->vsc_vs);
180
181         sc->resetting = 0;
182         pthread_mutex_unlock(&sc->tx_mtx);
183         pthread_mutex_unlock(&sc->rx_mtx);
184 }
185
186 static __inline struct iovec *
187 iov_trim_hdr(struct iovec *iov, int *iovcnt, unsigned int hlen)
188 {
189         struct iovec *riov;
190
191         if (iov[0].iov_len < hlen) {
192                 /*
193                  * Not enough header space in the first fragment.
194                  * That's not ok for us.
195                  */
196                 return NULL;
197         }
198
199         iov[0].iov_len -= hlen;
200         if (iov[0].iov_len == 0) {
201                 *iovcnt -= 1;
202                 if (*iovcnt == 0) {
203                         /*
204                          * Only space for the header. That's not
205                          * enough for us.
206                          */
207                         return NULL;
208                 }
209                 riov = &iov[1];
210         } else {
211                 iov[0].iov_base = (void *)((uintptr_t)iov[0].iov_base + hlen);
212                 riov = &iov[0];
213         }
214
215         return (riov);
216 }
217
218 struct virtio_mrg_rxbuf_info {
219         uint16_t idx;
220         uint16_t pad;
221         uint32_t len;
222 };
223
224 static void
225 pci_vtnet_rx(struct pci_vtnet_softc *sc)
226 {
227         int prepend_hdr_len = sc->vhdrlen - sc->be_vhdrlen;
228         struct virtio_mrg_rxbuf_info info[VTNET_MAXSEGS];
229         struct iovec iov[VTNET_MAXSEGS + 1];
230         struct vqueue_info *vq;
231         uint32_t riov_bytes;
232         struct iovec *riov;
233         int riov_len;
234         uint32_t ulen;
235         int n_chains;
236         int len;
237
238         vq = &sc->vsc_queues[VTNET_RXQ];
239         for (;;) {
240                 struct virtio_net_rxhdr *hdr;
241
242                 /*
243                  * Get a descriptor chain to store the next ingress
244                  * packet. In case of mergeable rx buffers, get as
245                  * many chains as necessary in order to make room
246                  * for a maximum sized LRO packet.
247                  */
248                 riov_bytes = 0;
249                 riov_len = 0;
250                 riov = iov;
251                 n_chains = 0;
252                 do {
253                         int n = vq_getchain(vq, &info[n_chains].idx, riov,
254                             VTNET_MAXSEGS - riov_len, NULL);
255
256                         if (n == 0) {
257                                 /*
258                                  * No rx buffers. Enable RX kicks and double
259                                  * check.
260                                  */
261                                 vq_kick_enable(vq);
262                                 if (!vq_has_descs(vq)) {
263                                         /*
264                                          * Still no buffers. Return the unused
265                                          * chains (if any), interrupt if needed
266                                          * (including for NOTIFY_ON_EMPTY), and
267                                          * disable the backend until the next
268                                          * kick.
269                                          */
270                                         vq_retchains(vq, n_chains);
271                                         vq_endchains(vq, /*used_all_avail=*/1);
272                                         netbe_rx_disable(sc->vsc_be);
273                                         return;
274                                 }
275
276                                 /* More rx buffers found, so keep going. */
277                                 vq_kick_disable(vq);
278                                 continue;
279                         }
280                         assert(n >= 1 && riov_len + n <= VTNET_MAXSEGS);
281                         riov_len += n;
282                         if (!sc->rx_merge) {
283                                 n_chains = 1;
284                                 break;
285                         }
286                         info[n_chains].len = (uint32_t)count_iov(riov, n);
287                         riov_bytes += info[n_chains].len;
288                         riov += n;
289                         n_chains++;
290                 } while (riov_bytes < VTNET_MAX_PKT_LEN &&
291                             riov_len < VTNET_MAXSEGS);
292
293                 riov = iov;
294                 hdr = riov[0].iov_base;
295                 if (prepend_hdr_len > 0) {
296                         /*
297                          * The frontend uses a virtio-net header, but the
298                          * backend does not. We need to prepend a zeroed
299                          * header.
300                          */
301                         riov = iov_trim_hdr(riov, &riov_len, prepend_hdr_len);
302                         if (riov == NULL) {
303                                 /*
304                                  * The first collected chain is nonsensical,
305                                  * as it is not even enough to store the
306                                  * virtio-net header. Just drop it.
307                                  */
308                                 vq_relchain(vq, info[0].idx, 0);
309                                 vq_retchains(vq, n_chains - 1);
310                                 continue;
311                         }
312                         memset(hdr, 0, prepend_hdr_len);
313                 }
314
315                 len = netbe_recv(sc->vsc_be, riov, riov_len);
316
317                 if (len <= 0) {
318                         /*
319                          * No more packets (len == 0), or backend errored
320                          * (err < 0). Return unused available buffers
321                          * and stop.
322                          */
323                         vq_retchains(vq, n_chains);
324                         /* Interrupt if needed/appropriate and stop. */
325                         vq_endchains(vq, /*used_all_avail=*/0);
326                         return;
327                 }
328
329                 ulen = (uint32_t)(len + prepend_hdr_len);
330
331                 /*
332                  * Publish the used buffers to the guest, reporting the
333                  * number of bytes that we wrote.
334                  */
335                 if (!sc->rx_merge) {
336                         vq_relchain(vq, info[0].idx, ulen);
337                 } else {
338                         uint32_t iolen;
339                         int i = 0;
340
341                         do {
342                                 iolen = info[i].len;
343                                 if (iolen > ulen) {
344                                         iolen = ulen;
345                                 }
346                                 vq_relchain_prepare(vq, info[i].idx, iolen);
347                                 ulen -= iolen;
348                                 i++;
349                                 assert(i <= n_chains);
350                         } while (ulen > 0);
351
352                         hdr->vrh_bufs = i;
353                         vq_relchain_publish(vq);
354                         vq_retchains(vq, n_chains - i);
355                 }
356         }
357
358 }
359
360 /*
361  * Called when there is read activity on the backend file descriptor.
362  * Each buffer posted by the guest is assumed to be able to contain
363  * an entire ethernet frame + rx header.
364  */
365 static void
366 pci_vtnet_rx_callback(int fd, enum ev_type type, void *param)
367 {
368         struct pci_vtnet_softc *sc = param;
369
370         pthread_mutex_lock(&sc->rx_mtx);
371         pci_vtnet_rx(sc);
372         pthread_mutex_unlock(&sc->rx_mtx);
373
374 }
375
376 /* Called on RX kick. */
377 static void
378 pci_vtnet_ping_rxq(void *vsc, struct vqueue_info *vq)
379 {
380         struct pci_vtnet_softc *sc = vsc;
381
382         /*
383          * A qnotify means that the rx process can now begin.
384          */
385         pthread_mutex_lock(&sc->rx_mtx);
386         vq_kick_disable(vq);
387         netbe_rx_enable(sc->vsc_be);
388         pthread_mutex_unlock(&sc->rx_mtx);
389 }
390
391 /* TX virtqueue processing, called by the TX thread. */
392 static void
393 pci_vtnet_proctx(struct pci_vtnet_softc *sc, struct vqueue_info *vq)
394 {
395         struct iovec iov[VTNET_MAXSEGS + 1];
396         struct iovec *siov = iov;
397         uint16_t idx;
398         ssize_t len;
399         int n;
400
401         /*
402          * Obtain chain of descriptors. The first descriptor also
403          * contains the virtio-net header.
404          */
405         n = vq_getchain(vq, &idx, iov, VTNET_MAXSEGS, NULL);
406         assert(n >= 1 && n <= VTNET_MAXSEGS);
407
408         if (sc->vhdrlen != sc->be_vhdrlen) {
409                 /*
410                  * The frontend uses a virtio-net header, but the backend
411                  * does not. We simply strip the header and ignore it, as
412                  * it should be zero-filled.
413                  */
414                 siov = iov_trim_hdr(siov, &n, sc->vhdrlen);
415         }
416
417         if (siov == NULL) {
418                 /* The chain is nonsensical. Just drop it. */
419                 len = 0;
420         } else {
421                 len = netbe_send(sc->vsc_be, siov, n);
422                 if (len < 0) {
423                         /*
424                          * If send failed, report that 0 bytes
425                          * were read.
426                          */
427                         len = 0;
428                 }
429         }
430
431         /*
432          * Return the processed chain to the guest, reporting
433          * the number of bytes that we read.
434          */
435         vq_relchain(vq, idx, len);
436 }
437
438 /* Called on TX kick. */
439 static void
440 pci_vtnet_ping_txq(void *vsc, struct vqueue_info *vq)
441 {
442         struct pci_vtnet_softc *sc = vsc;
443
444         /*
445          * Any ring entries to process?
446          */
447         if (!vq_has_descs(vq))
448                 return;
449
450         /* Signal the tx thread for processing */
451         pthread_mutex_lock(&sc->tx_mtx);
452         vq_kick_disable(vq);
453         if (sc->tx_in_progress == 0)
454                 pthread_cond_signal(&sc->tx_cond);
455         pthread_mutex_unlock(&sc->tx_mtx);
456 }
457
458 /*
459  * Thread which will handle processing of TX desc
460  */
461 static void *
462 pci_vtnet_tx_thread(void *param)
463 {
464         struct pci_vtnet_softc *sc = param;
465         struct vqueue_info *vq;
466         int error;
467
468         vq = &sc->vsc_queues[VTNET_TXQ];
469
470         /*
471          * Let us wait till the tx queue pointers get initialised &
472          * first tx signaled
473          */
474         pthread_mutex_lock(&sc->tx_mtx);
475         error = pthread_cond_wait(&sc->tx_cond, &sc->tx_mtx);
476         assert(error == 0);
477
478         for (;;) {
479                 /* note - tx mutex is locked here */
480                 while (sc->resetting || !vq_has_descs(vq)) {
481                         vq_kick_enable(vq);
482                         if (!sc->resetting && vq_has_descs(vq))
483                                 break;
484
485                         sc->tx_in_progress = 0;
486                         error = pthread_cond_wait(&sc->tx_cond, &sc->tx_mtx);
487                         assert(error == 0);
488                 }
489                 vq_kick_disable(vq);
490                 sc->tx_in_progress = 1;
491                 pthread_mutex_unlock(&sc->tx_mtx);
492
493                 do {
494                         /*
495                          * Run through entries, placing them into
496                          * iovecs and sending when an end-of-packet
497                          * is found
498                          */
499                         pci_vtnet_proctx(sc, vq);
500                 } while (vq_has_descs(vq));
501
502                 /*
503                  * Generate an interrupt if needed.
504                  */
505                 vq_endchains(vq, /*used_all_avail=*/1);
506
507                 pthread_mutex_lock(&sc->tx_mtx);
508         }
509 }
510
511 #ifdef notyet
512 static void
513 pci_vtnet_ping_ctlq(void *vsc, struct vqueue_info *vq)
514 {
515
516         DPRINTF(("vtnet: control qnotify!"));
517 }
518 #endif
519
520 static int
521 pci_vtnet_init(struct vmctx *ctx, struct pci_devinst *pi, char *opts)
522 {
523         struct pci_vtnet_softc *sc;
524         char tname[MAXCOMLEN + 1];
525         int mac_provided;
526
527         /*
528          * Allocate data structures for further virtio initializations.
529          * sc also contains a copy of vtnet_vi_consts, since capabilities
530          * change depending on the backend.
531          */
532         sc = calloc(1, sizeof(struct pci_vtnet_softc));
533
534         sc->vsc_consts = vtnet_vi_consts;
535         pthread_mutex_init(&sc->vsc_mtx, NULL);
536
537         sc->vsc_queues[VTNET_RXQ].vq_qsize = VTNET_RINGSZ;
538         sc->vsc_queues[VTNET_RXQ].vq_notify = pci_vtnet_ping_rxq;
539         sc->vsc_queues[VTNET_TXQ].vq_qsize = VTNET_RINGSZ;
540         sc->vsc_queues[VTNET_TXQ].vq_notify = pci_vtnet_ping_txq;
541 #ifdef notyet
542         sc->vsc_queues[VTNET_CTLQ].vq_qsize = VTNET_RINGSZ;
543         sc->vsc_queues[VTNET_CTLQ].vq_notify = pci_vtnet_ping_ctlq;
544 #endif
545  
546         /*
547          * Attempt to open the backend device and read the MAC address
548          * if specified.
549          */
550         mac_provided = 0;
551         if (opts != NULL) {
552                 char *devname;
553                 char *vtopts;
554                 int err = 0;
555
556                 /* Get the device name. */
557                 devname = vtopts = strdup(opts);
558                 (void) strsep(&vtopts, ",");
559
560                 /*
561                  * Parse the list of options in the form
562                  *     key1=value1,...,keyN=valueN.
563                  */
564                 while (vtopts != NULL) {
565                         char *value = vtopts;
566                         char *key;
567
568                         key = strsep(&value, "=");
569                         if (value == NULL)
570                                 break;
571                         vtopts = value;
572                         (void) strsep(&vtopts, ",");
573
574                         if (strcmp(key, "mac") == 0) {
575                                 err = net_parsemac(value, sc->vsc_config.mac);
576                                 if (err)
577                                         break;
578                                 mac_provided = 1;
579                         }
580                 }
581
582                 if (err) {
583                         free(devname);
584                         free(sc);
585                         return (err);
586                 }
587
588                 err = netbe_init(&sc->vsc_be, devname, pci_vtnet_rx_callback,
589                           sc);
590                 free(devname);
591                 if (err) {
592                         free(sc);
593                         return (err);
594                 }
595                 sc->vsc_consts.vc_hv_caps |= netbe_get_cap(sc->vsc_be);
596         }
597
598         if (!mac_provided) {
599                 net_genmac(pi, sc->vsc_config.mac);
600         }
601
602         /* initialize config space */
603         pci_set_cfgdata16(pi, PCIR_DEVICE, VIRTIO_DEV_NET);
604         pci_set_cfgdata16(pi, PCIR_VENDOR, VIRTIO_VENDOR);
605         pci_set_cfgdata8(pi, PCIR_CLASS, PCIC_NETWORK);
606         pci_set_cfgdata16(pi, PCIR_SUBDEV_0, VIRTIO_TYPE_NET);
607         pci_set_cfgdata16(pi, PCIR_SUBVEND_0, VIRTIO_VENDOR);
608
609         /* Link is up if we managed to open backend device. */
610         sc->vsc_config.status = (opts == NULL || sc->vsc_be);
611         
612         vi_softc_linkup(&sc->vsc_vs, &sc->vsc_consts, sc, pi, sc->vsc_queues);
613         sc->vsc_vs.vs_mtx = &sc->vsc_mtx;
614
615         /* use BAR 1 to map MSI-X table and PBA, if we're using MSI-X */
616         if (vi_intr_init(&sc->vsc_vs, 1, fbsdrun_virtio_msix())) {
617                 free(sc);
618                 return (1);
619         }
620
621         /* use BAR 0 to map config regs in IO space */
622         vi_set_io_bar(&sc->vsc_vs, 0);
623
624         sc->resetting = 0;
625
626         sc->rx_merge = 0;
627         sc->vhdrlen = sizeof(struct virtio_net_rxhdr) - 2;
628         pthread_mutex_init(&sc->rx_mtx, NULL); 
629
630         /* 
631          * Initialize tx semaphore & spawn TX processing thread.
632          * As of now, only one thread for TX desc processing is
633          * spawned. 
634          */
635         sc->tx_in_progress = 0;
636         pthread_mutex_init(&sc->tx_mtx, NULL);
637         pthread_cond_init(&sc->tx_cond, NULL);
638         pthread_create(&sc->tx_tid, NULL, pci_vtnet_tx_thread, (void *)sc);
639         snprintf(tname, sizeof(tname), "vtnet-%d:%d tx", pi->pi_slot,
640             pi->pi_func);
641         pthread_set_name_np(sc->tx_tid, tname);
642
643         return (0);
644 }
645
646 static int
647 pci_vtnet_cfgwrite(void *vsc, int offset, int size, uint32_t value)
648 {
649         struct pci_vtnet_softc *sc = vsc;
650         void *ptr;
651
652         if (offset < (int)sizeof(sc->vsc_config.mac)) {
653                 assert(offset + size <= (int)sizeof(sc->vsc_config.mac));
654                 /*
655                  * The driver is allowed to change the MAC address
656                  */
657                 ptr = &sc->vsc_config.mac[offset];
658                 memcpy(ptr, &value, size);
659         } else {
660                 /* silently ignore other writes */
661                 DPRINTF(("vtnet: write to readonly reg %d", offset));
662         }
663
664         return (0);
665 }
666
667 static int
668 pci_vtnet_cfgread(void *vsc, int offset, int size, uint32_t *retval)
669 {
670         struct pci_vtnet_softc *sc = vsc;
671         void *ptr;
672
673         ptr = (uint8_t *)&sc->vsc_config + offset;
674         memcpy(retval, ptr, size);
675         return (0);
676 }
677
678 static void
679 pci_vtnet_neg_features(void *vsc, uint64_t negotiated_features)
680 {
681         struct pci_vtnet_softc *sc = vsc;
682
683         sc->vsc_features = negotiated_features;
684
685         if (negotiated_features & VIRTIO_NET_F_MRG_RXBUF) {
686                 sc->vhdrlen = sizeof(struct virtio_net_rxhdr);
687                 sc->rx_merge = 1;
688         } else {
689                 /*
690                  * Without mergeable rx buffers, virtio-net header is 2
691                  * bytes shorter than sizeof(struct virtio_net_rxhdr).
692                  */
693                 sc->vhdrlen = sizeof(struct virtio_net_rxhdr) - 2;
694                 sc->rx_merge = 0;
695         }
696
697         /* Tell the backend to enable some capabilities it has advertised. */
698         netbe_set_cap(sc->vsc_be, negotiated_features, sc->vhdrlen);
699         sc->be_vhdrlen = netbe_get_vnet_hdr_len(sc->vsc_be);
700         assert(sc->be_vhdrlen == 0 || sc->be_vhdrlen == sc->vhdrlen);
701 }
702
703 static struct pci_devemu pci_de_vnet = {
704         .pe_emu =       "virtio-net",
705         .pe_init =      pci_vtnet_init,
706         .pe_barwrite =  vi_pci_write,
707         .pe_barread =   vi_pci_read
708 };
709 PCI_EMUL_SET(pci_de_vnet);