hw/pci.h

   1 #ifndef QEMU_PCI_H
   2 #define QEMU_PCI_H
   3
   4 #include "qemu-common.h"
   5
   6 #include "qdev.h"
   7 #include "memory.h"
   8 #include "dma.h"
   9
  10 /* PCI includes legacy ISA access.  */
  11 #include "isa.h"
  12
  13 #include "pcie.h"
  14
  15 /* PCI bus */
  16
  17 #define PCI_DEVFN(slot, func)   ((((slot) & 0x1f) << 3) | ((func) & 0x07))
  18 #define PCI_SLOT(devfn)         (((devfn) >> 3) & 0x1f)
  19 #define PCI_FUNC(devfn)         ((devfn) & 0x07)
  20 #define PCI_SLOT_MAX            32
  21 #define PCI_FUNC_MAX            8
  22
  23 /* Class, Vendor and Device IDs from Linux's pci_ids.h */
  24 #include "pci_ids.h"
  25
  26 /* QEMU-specific Vendor and Device ID definitions */
  27
  28 /* IBM (0x1014) */
  29 #define PCI_DEVICE_ID_IBM_440GX          0x027f
  30 #define PCI_DEVICE_ID_IBM_OPENPIC2       0xffff
  31
  32 /* Hitachi (0x1054) */
  33 #define PCI_VENDOR_ID_HITACHI            0x1054
  34 #define PCI_DEVICE_ID_HITACHI_SH7751R    0x350e
  35
  36 /* Apple (0x106b) */
  37 #define PCI_DEVICE_ID_APPLE_343S1201     0x0010
  38 #define PCI_DEVICE_ID_APPLE_UNI_N_I_PCI  0x001e
  39 #define PCI_DEVICE_ID_APPLE_UNI_N_PCI    0x001f
  40 #define PCI_DEVICE_ID_APPLE_UNI_N_KEYL   0x0022
  41 #define PCI_DEVICE_ID_APPLE_IPID_USB     0x003f
  42
  43 /* Realtek (0x10ec) */
  44 #define PCI_DEVICE_ID_REALTEK_8029       0x8029
  45
  46 /* Xilinx (0x10ee) */
  47 #define PCI_DEVICE_ID_XILINX_XC2VP30     0x0300
  48
  49 /* Marvell (0x11ab) */
  50 #define PCI_DEVICE_ID_MARVELL_GT6412X    0x4620
  51
  52 /* QEMU/Bochs VGA (0x1234) */
  53 #define PCI_VENDOR_ID_QEMU               0x1234
  54 #define PCI_DEVICE_ID_QEMU_VGA           0x1111
  55
  56 /* VMWare (0x15ad) */
  57 #define PCI_VENDOR_ID_VMWARE             0x15ad
  58 #define PCI_DEVICE_ID_VMWARE_SVGA2       0x0405
  59 #define PCI_DEVICE_ID_VMWARE_SVGA        0x0710
  60 #define PCI_DEVICE_ID_VMWARE_NET         0x0720
  61 #define PCI_DEVICE_ID_VMWARE_SCSI        0x0730
  62 #define PCI_DEVICE_ID_VMWARE_IDE         0x1729
  63
  64 /* Intel (0x8086) */
  65 #define PCI_DEVICE_ID_INTEL_82551IT      0x1209
  66 #define PCI_DEVICE_ID_INTEL_82557        0x1229
  67 #define PCI_DEVICE_ID_INTEL_82801IR      0x2922
  68
  69 /* Red Hat / Qumranet (for QEMU) -- see pci-ids.txt */
  70 #define PCI_VENDOR_ID_REDHAT_QUMRANET    0x1af4
  71 #define PCI_SUBVENDOR_ID_REDHAT_QUMRANET 0x1af4
  72 #define PCI_SUBDEVICE_ID_QEMU            0x1100
  73
  74 #define PCI_DEVICE_ID_VIRTIO_NET         0x1000
  75 #define PCI_DEVICE_ID_VIRTIO_BLOCK       0x1001
  76 #define PCI_DEVICE_ID_VIRTIO_BALLOON     0x1002
  77 #define PCI_DEVICE_ID_VIRTIO_CONSOLE     0x1003
  78 #define PCI_DEVICE_ID_VIRTIO_SCSI        0x1004
  79
  80 #define FMT_PCIBUS                      PRIx64
  81
  82 typedef void PCIConfigWriteFunc(PCIDevice *pci_dev,
  83                                 uint32_t address, uint32_t data, int len);
  84 typedef uint32_t PCIConfigReadFunc(PCIDevice *pci_dev,
  85                                    uint32_t address, int len);
  86 typedef void PCIMapIORegionFunc(PCIDevice *pci_dev, int region_num,
  87                                 pcibus_t addr, pcibus_t size, int type);
  88 typedef int PCIUnregisterFunc(PCIDevice *pci_dev);
  89
  90 typedef struct PCIIORegion {
  91     pcibus_t addr; /* current PCI mapping address. -1 means not mapped */
  92 #define PCI_BAR_UNMAPPED (~(pcibus_t)0)
  93     pcibus_t size;
  94     uint8_t type;
  95     MemoryRegion *memory;
  96     MemoryRegion *address_space;
  97 } PCIIORegion;
  98
  99 #define PCI_ROM_SLOT 6
 100 #define PCI_NUM_REGIONS 7
 101
 102 #include "pci_regs.h"
 103
 104 /* PCI HEADER_TYPE */
 105 #define  PCI_HEADER_TYPE_MULTI_FUNCTION 0x80
 106
 107 /* Size of the standard PCI config header */
 108 #define PCI_CONFIG_HEADER_SIZE 0x40
 109 /* Size of the standard PCI config space */
 110 #define PCI_CONFIG_SPACE_SIZE 0x100
 111 /* Size of the standart PCIe config space: 4KB */
 112 #define PCIE_CONFIG_SPACE_SIZE  0x1000
 113
 114 #define PCI_NUM_PINS 4 /* A-D */
 115
 116 /* Bits in cap_present field. */
 117 enum {
 118     QEMU_PCI_CAP_MSI = 0x1,
 119     QEMU_PCI_CAP_MSIX = 0x2,
 120     QEMU_PCI_CAP_EXPRESS = 0x4,
 121
 122     /* multifunction capable device */
 123 #define QEMU_PCI_CAP_MULTIFUNCTION_BITNR        3
 124     QEMU_PCI_CAP_MULTIFUNCTION = (1 << QEMU_PCI_CAP_MULTIFUNCTION_BITNR),
 125
 126     /* command register SERR bit enabled */
 127 #define QEMU_PCI_CAP_SERR_BITNR 4
 128     QEMU_PCI_CAP_SERR = (1 << QEMU_PCI_CAP_SERR_BITNR),
 129     /* Standard hot plug controller. */
 130 #define QEMU_PCI_SHPC_BITNR 5
 131     QEMU_PCI_CAP_SHPC = (1 << QEMU_PCI_SHPC_BITNR),
 132 #define QEMU_PCI_SLOTID_BITNR 6
 133     QEMU_PCI_CAP_SLOTID = (1 << QEMU_PCI_SLOTID_BITNR),
 134 };
 135
 136 #define TYPE_PCI_DEVICE "pci-device"
 137 #define PCI_DEVICE(obj) \
 138      OBJECT_CHECK(PCIDevice, (obj), TYPE_PCI_DEVICE)
 139 #define PCI_DEVICE_CLASS(klass) \
 140      OBJECT_CLASS_CHECK(PCIDeviceClass, (klass), TYPE_PCI_DEVICE)
 141 #define PCI_DEVICE_GET_CLASS(obj) \
 142      OBJECT_GET_CLASS(PCIDeviceClass, (obj), TYPE_PCI_DEVICE)
 143
 144 typedef struct PCIDeviceClass {
 145     DeviceClass parent_class;
 146
 147     int (*init)(PCIDevice *dev);
 148     PCIUnregisterFunc *exit;
 149     PCIConfigReadFunc *config_read;
 150     PCIConfigWriteFunc *config_write;
 151
 152     uint16_t vendor_id;
 153     uint16_t device_id;
 154     uint8_t revision;
 155     uint16_t class_id;
 156     uint16_t subsystem_vendor_id;       /* only for header type = 0 */
 157     uint16_t subsystem_id;              /* only for header type = 0 */
 158
 159     /*
 160      * pci-to-pci bridge or normal device.
 161      * This doesn't mean pci host switch.
 162      * When card bus bridge is supported, this would be enhanced.
 163      */
 164     int is_bridge;
 165
 166     /* pcie stuff */
 167     int is_express;   /* is this device pci express? */
 168
 169     /* device isn't hot-pluggable */
 170     int no_hotplug;
 171
 172     /* rom bar */
 173     const char *romfile;
 174 } PCIDeviceClass;
 175
 176 typedef int (*MSIVectorUseNotifier)(PCIDevice *dev, unsigned int vector,
 177                                       MSIMessage msg);
 178 typedef void (*MSIVectorReleaseNotifier)(PCIDevice *dev, unsigned int vector);
 179
 180 struct PCIDevice {
 181     DeviceState qdev;
 182     /* PCI config space */
 183     uint8_t *config;
 184
 185     /* Used to enable config checks on load. Note that writable bits are
 186      * never checked even if set in cmask. */
 187     uint8_t *cmask;
 188
 189     /* Used to implement R/W bytes */
 190     uint8_t *wmask;
 191
 192     /* Used to implement RW1C(Write 1 to Clear) bytes */
 193     uint8_t *w1cmask;
 194
 195     /* Used to allocate config space for capabilities. */
 196     uint8_t *used;
 197
 198     /* the following fields are read only */
 199     PCIBus *bus;
 200     int32_t devfn;
 201     char name[64];
 202     PCIIORegion io_regions[PCI_NUM_REGIONS];
 203
 204     /* do not access the following fields */
 205     PCIConfigReadFunc *config_read;
 206     PCIConfigWriteFunc *config_write;
 207
 208     /* IRQ objects for the INTA-INTD pins.  */
 209     qemu_irq *irq;
 210
 211     /* Current IRQ levels.  Used internally by the generic PCI code.  */
 212     uint8_t irq_state;
 213
 214     /* Capability bits */
 215     uint32_t cap_present;
 216
 217     /* Offset of MSI-X capability in config space */
 218     uint8_t msix_cap;
 219
 220     /* MSI-X entries */
 221     int msix_entries_nr;
 222
 223     /* Space to store MSIX table */
 224     uint8_t *msix_table_page;
 225     /* MMIO index used to map MSIX table and pending bit entries. */
 226     MemoryRegion msix_mmio;
 227     /* Reference-count for entries actually in use by driver. */
 228     unsigned *msix_entry_used;
 229     /* Region including the MSI-X table */
 230     uint32_t msix_bar_size;
 231     /* MSIX function mask set or MSIX disabled */
 232     bool msix_function_masked;
 233     /* Version id needed for VMState */
 234     int32_t version_id;
 235
 236     /* Offset of MSI capability in config space */
 237     uint8_t msi_cap;
 238
 239     /* PCI Express */
 240     PCIExpressDevice exp;
 241
 242     /* SHPC */
 243     SHPCDevice *shpc;
 244
 245     /* Location of option rom */
 246     char *romfile;
 247     bool has_rom;
 248     MemoryRegion rom;
 249     uint32_t rom_bar;
 250
 251     /* MSI-X notifiers */
 252     MSIVectorUseNotifier msix_vector_use_notifier;
 253     MSIVectorReleaseNotifier msix_vector_release_notifier;
 254 };
 255
 256 void pci_register_bar(PCIDevice *pci_dev, int region_num,
 257                       uint8_t attr, MemoryRegion *memory);
 258 pcibus_t pci_get_bar_addr(PCIDevice *pci_dev, int region_num);
 259
 260 int pci_add_capability(PCIDevice *pdev, uint8_t cap_id,
 261                        uint8_t offset, uint8_t size);
 262
 263 void pci_del_capability(PCIDevice *pci_dev, uint8_t cap_id, uint8_t cap_size);
 264
 265 uint8_t pci_find_capability(PCIDevice *pci_dev, uint8_t cap_id);
 266
 267
 268 uint32_t pci_default_read_config(PCIDevice *d,
 269                                  uint32_t address, int len);
 270 void pci_default_write_config(PCIDevice *d,
 271                               uint32_t address, uint32_t val, int len);
 272 void pci_device_save(PCIDevice *s, QEMUFile *f);
 273 int pci_device_load(PCIDevice *s, QEMUFile *f);
 274 MemoryRegion *pci_address_space(PCIDevice *dev);
 275 MemoryRegion *pci_address_space_io(PCIDevice *dev);
 276
 277 typedef void (*pci_set_irq_fn)(void *opaque, int irq_num, int level);
 278 typedef int (*pci_map_irq_fn)(PCIDevice *pci_dev, int irq_num);
 279
 280 typedef enum {
 281     PCI_HOTPLUG_DISABLED,
 282     PCI_HOTPLUG_ENABLED,
 283     PCI_COLDPLUG_ENABLED,
 284 } PCIHotplugState;
 285
 286 typedef int (*pci_hotplug_fn)(DeviceState *qdev, PCIDevice *pci_dev,
 287                               PCIHotplugState state);
 288 void pci_bus_new_inplace(PCIBus *bus, DeviceState *parent,
 289                          const char *name,
 290                          MemoryRegion *address_space_mem,
 291                          MemoryRegion *address_space_io,
 292                          uint8_t devfn_min);
 293 PCIBus *pci_bus_new(DeviceState *parent, const char *name,
 294                     MemoryRegion *address_space_mem,
 295                     MemoryRegion *address_space_io,
 296                     uint8_t devfn_min);
 297 void pci_bus_irqs(PCIBus *bus, pci_set_irq_fn set_irq, pci_map_irq_fn map_irq,
 298                   void *irq_opaque, int nirq);
 299 int pci_bus_get_irq_level(PCIBus *bus, int irq_num);
 300 void pci_bus_hotplug(PCIBus *bus, pci_hotplug_fn hotplug, DeviceState *dev);
 301 PCIBus *pci_register_bus(DeviceState *parent, const char *name,
 302                          pci_set_irq_fn set_irq, pci_map_irq_fn map_irq,
 303                          void *irq_opaque,
 304                          MemoryRegion *address_space_mem,
 305                          MemoryRegion *address_space_io,
 306                          uint8_t devfn_min, int nirq);
 307 void pci_device_reset(PCIDevice *dev);
 308 void pci_bus_reset(PCIBus *bus);
 309
 310 PCIDevice *pci_nic_init(NICInfo *nd, const char *default_model,
 311                         const char *default_devaddr);
 312 PCIDevice *pci_nic_init_nofail(NICInfo *nd, const char *default_model,
 313                                const char *default_devaddr);
 314 int pci_bus_num(PCIBus *s);
 315 void pci_for_each_device(PCIBus *bus, int bus_num,
 316                          void (*fn)(PCIBus *bus, PCIDevice *d, void *opaque),
 317                          void *opaque);
 318 PCIBus *pci_find_root_bus(int domain);
 319 int pci_find_domain(const PCIBus *bus);
 320 PCIDevice *pci_find_device(PCIBus *bus, int bus_num, uint8_t devfn);
 321 int pci_qdev_find_device(const char *id, PCIDevice **pdev);
 322 PCIBus *pci_get_bus_devfn(int *devfnp, const char *devaddr);
 323
 324 int pci_read_devaddr(Monitor *mon, const char *addr, int *domp, int *busp,
 325                      unsigned *slotp);
 326
 327 void pci_device_deassert_intx(PCIDevice *dev);
 328
 329 static inline void
 330 pci_set_byte(uint8_t *config, uint8_t val)
 331 {
 332     *config = val;
 333 }
 334
 335 static inline uint8_t
 336 pci_get_byte(const uint8_t *config)
 337 {
 338     return *config;
 339 }
 340
 341 static inline void
 342 pci_set_word(uint8_t *config, uint16_t val)
 343 {
 344     cpu_to_le16wu((uint16_t *)config, val);
 345 }
 346
 347 static inline uint16_t
 348 pci_get_word(const uint8_t *config)
 349 {
 350     return le16_to_cpupu((const uint16_t *)config);
 351 }
 352
 353 static inline void
 354 pci_set_long(uint8_t *config, uint32_t val)
 355 {
 356     cpu_to_le32wu((uint32_t *)config, val);
 357 }
 358
 359 static inline uint32_t
 360 pci_get_long(const uint8_t *config)
 361 {
 362     return le32_to_cpupu((const uint32_t *)config);
 363 }
 364
 365 static inline void
 366 pci_set_quad(uint8_t *config, uint64_t val)
 367 {
 368     cpu_to_le64w((uint64_t *)config, val);
 369 }
 370
 371 static inline uint64_t
 372 pci_get_quad(const uint8_t *config)
 373 {
 374     return le64_to_cpup((const uint64_t *)config);
 375 }
 376
 377 static inline void
 378 pci_config_set_vendor_id(uint8_t *pci_config, uint16_t val)
 379 {
 380     pci_set_word(&pci_config[PCI_VENDOR_ID], val);
 381 }
 382
 383 static inline void
 384 pci_config_set_device_id(uint8_t *pci_config, uint16_t val)
 385 {
 386     pci_set_word(&pci_config[PCI_DEVICE_ID], val);
 387 }
 388
 389 static inline void
 390 pci_config_set_revision(uint8_t *pci_config, uint8_t val)
 391 {
 392     pci_set_byte(&pci_config[PCI_REVISION_ID], val);
 393 }
 394
 395 static inline void
 396 pci_config_set_class(uint8_t *pci_config, uint16_t val)
 397 {
 398     pci_set_word(&pci_config[PCI_CLASS_DEVICE], val);
 399 }
 400
 401 static inline void
 402 pci_config_set_prog_interface(uint8_t *pci_config, uint8_t val)
 403 {
 404     pci_set_byte(&pci_config[PCI_CLASS_PROG], val);
 405 }
 406
 407 static inline void
 408 pci_config_set_interrupt_pin(uint8_t *pci_config, uint8_t val)
 409 {
 410     pci_set_byte(&pci_config[PCI_INTERRUPT_PIN], val);
 411 }
 412
 413 /*
 414  * helper functions to do bit mask operation on configuration space.
 415  * Just to set bit, use test-and-set and discard returned value.
 416  * Just to clear bit, use test-and-clear and discard returned value.
 417  * NOTE: They aren't atomic.
 418  */
 419 static inline uint8_t
 420 pci_byte_test_and_clear_mask(uint8_t *config, uint8_t mask)
 421 {
 422     uint8_t val = pci_get_byte(config);
 423     pci_set_byte(config, val & ~mask);
 424     return val & mask;
 425 }
 426
 427 static inline uint8_t
 428 pci_byte_test_and_set_mask(uint8_t *config, uint8_t mask)
 429 {
 430     uint8_t val = pci_get_byte(config);
 431     pci_set_byte(config, val | mask);
 432     return val & mask;
 433 }
 434
 435 static inline uint16_t
 436 pci_word_test_and_clear_mask(uint8_t *config, uint16_t mask)
 437 {
 438     uint16_t val = pci_get_word(config);
 439     pci_set_word(config, val & ~mask);
 440     return val & mask;
 441 }
 442
 443 static inline uint16_t
 444 pci_word_test_and_set_mask(uint8_t *config, uint16_t mask)
 445 {
 446     uint16_t val = pci_get_word(config);
 447     pci_set_word(config, val | mask);
 448     return val & mask;
 449 }
 450
 451 static inline uint32_t
 452 pci_long_test_and_clear_mask(uint8_t *config, uint32_t mask)
 453 {
 454     uint32_t val = pci_get_long(config);
 455     pci_set_long(config, val & ~mask);
 456     return val & mask;
 457 }
 458
 459 static inline uint32_t
 460 pci_long_test_and_set_mask(uint8_t *config, uint32_t mask)
 461 {
 462     uint32_t val = pci_get_long(config);
 463     pci_set_long(config, val | mask);
 464     return val & mask;
 465 }
 466
 467 static inline uint64_t
 468 pci_quad_test_and_clear_mask(uint8_t *config, uint64_t mask)
 469 {
 470     uint64_t val = pci_get_quad(config);
 471     pci_set_quad(config, val & ~mask);
 472     return val & mask;
 473 }
 474
 475 static inline uint64_t
 476 pci_quad_test_and_set_mask(uint8_t *config, uint64_t mask)
 477 {
 478     uint64_t val = pci_get_quad(config);
 479     pci_set_quad(config, val | mask);
 480     return val & mask;
 481 }
 482
 483 /* Access a register specified by a mask */
 484 static inline void
 485 pci_set_byte_by_mask(uint8_t *config, uint8_t mask, uint8_t reg)
 486 {
 487     uint8_t val = pci_get_byte(config);
 488     uint8_t rval = reg << (ffs(mask) - 1);
 489     pci_set_byte(config, (~mask & val) | (mask & rval));
 490 }
 491
 492 static inline uint8_t
 493 pci_get_byte_by_mask(uint8_t *config, uint8_t mask)
 494 {
 495     uint8_t val = pci_get_byte(config);
 496     return (val & mask) >> (ffs(mask) - 1);
 497 }
 498
 499 static inline void
 500 pci_set_word_by_mask(uint8_t *config, uint16_t mask, uint16_t reg)
 501 {
 502     uint16_t val = pci_get_word(config);
 503     uint16_t rval = reg << (ffs(mask) - 1);
 504     pci_set_word(config, (~mask & val) | (mask & rval));
 505 }
 506
 507 static inline uint16_t
 508 pci_get_word_by_mask(uint8_t *config, uint16_t mask)
 509 {
 510     uint16_t val = pci_get_word(config);
 511     return (val & mask) >> (ffs(mask) - 1);
 512 }
 513
 514 static inline void
 515 pci_set_long_by_mask(uint8_t *config, uint32_t mask, uint32_t reg)
 516 {
 517     uint32_t val = pci_get_long(config);
 518     uint32_t rval = reg << (ffs(mask) - 1);
 519     pci_set_long(config, (~mask & val) | (mask & rval));
 520 }
 521
 522 static inline uint32_t
 523 pci_get_long_by_mask(uint8_t *config, uint32_t mask)
 524 {
 525     uint32_t val = pci_get_long(config);
 526     return (val & mask) >> (ffs(mask) - 1);
 527 }
 528
 529 static inline void
 530 pci_set_quad_by_mask(uint8_t *config, uint64_t mask, uint64_t reg)
 531 {
 532     uint64_t val = pci_get_quad(config);
 533     uint64_t rval = reg << (ffs(mask) - 1);
 534     pci_set_quad(config, (~mask & val) | (mask & rval));
 535 }
 536
 537 static inline uint64_t
 538 pci_get_quad_by_mask(uint8_t *config, uint64_t mask)
 539 {
 540     uint64_t val = pci_get_quad(config);
 541     return (val & mask) >> (ffs(mask) - 1);
 542 }
 543
 544 PCIDevice *pci_create_multifunction(PCIBus *bus, int devfn, bool multifunction,
 545                                     const char *name);
 546 PCIDevice *pci_create_simple_multifunction(PCIBus *bus, int devfn,
 547                                            bool multifunction,
 548                                            const char *name);
 549 PCIDevice *pci_create(PCIBus *bus, int devfn, const char *name);
 550 PCIDevice *pci_create_simple(PCIBus *bus, int devfn, const char *name);
 551
 552 static inline int pci_is_express(const PCIDevice *d)
 553 {
 554     return d->cap_present & QEMU_PCI_CAP_EXPRESS;
 555 }
 556
 557 static inline uint32_t pci_config_size(const PCIDevice *d)
 558 {
 559     return pci_is_express(d) ? PCIE_CONFIG_SPACE_SIZE : PCI_CONFIG_SPACE_SIZE;
 560 }
 561
 562 /* DMA access functions */
 563 static inline int pci_dma_rw(PCIDevice *dev, dma_addr_t addr,
 564                              void *buf, dma_addr_t len, DMADirection dir)
 565 {
 566     cpu_physical_memory_rw(addr, buf, len, dir == DMA_DIRECTION_FROM_DEVICE);
 567     return 0;
 568 }
 569
 570 static inline int pci_dma_read(PCIDevice *dev, dma_addr_t addr,
 571                                void *buf, dma_addr_t len)
 572 {
 573     return pci_dma_rw(dev, addr, buf, len, DMA_DIRECTION_TO_DEVICE);
 574 }
 575
 576 static inline int pci_dma_write(PCIDevice *dev, dma_addr_t addr,
 577                                 const void *buf, dma_addr_t len)
 578 {
 579     return pci_dma_rw(dev, addr, (void *) buf, len, DMA_DIRECTION_FROM_DEVICE);
 580 }
 581
 582 #define PCI_DMA_DEFINE_LDST(_l, _s, _bits)                              \
 583     static inline uint##_bits##_t ld##_l##_pci_dma(PCIDevice *dev,      \
 584                                                    dma_addr_t addr)     \
 585     {                                                                   \
 586         return ld##_l##_phys(addr);                                     \
 587     }                                                                   \
 588     static inline void st##_s##_pci_dma(PCIDevice *dev,                 \
 589                           dma_addr_t addr, uint##_bits##_t val)         \
 590     {                                                                   \
 591         st##_s##_phys(addr, val);                                       \
 592     }
 593
 594 PCI_DMA_DEFINE_LDST(ub, b, 8);
 595 PCI_DMA_DEFINE_LDST(uw_le, w_le, 16)
 596 PCI_DMA_DEFINE_LDST(l_le, l_le, 32);
 597 PCI_DMA_DEFINE_LDST(q_le, q_le, 64);
 598 PCI_DMA_DEFINE_LDST(uw_be, w_be, 16)
 599 PCI_DMA_DEFINE_LDST(l_be, l_be, 32);
 600 PCI_DMA_DEFINE_LDST(q_be, q_be, 64);
 601
 602 #undef PCI_DMA_DEFINE_LDST
 603
 604 static inline void *pci_dma_map(PCIDevice *dev, dma_addr_t addr,
 605                                 dma_addr_t *plen, DMADirection dir)
 606 {
 607     target_phys_addr_t len = *plen;
 608     void *buf;
 609
 610     buf = cpu_physical_memory_map(addr, &len, dir == DMA_DIRECTION_FROM_DEVICE);
 611     *plen = len;
 612     return buf;
 613 }
 614
 615 static inline void pci_dma_unmap(PCIDevice *dev, void *buffer, dma_addr_t len,
 616                                  DMADirection dir, dma_addr_t access_len)
 617 {
 618     cpu_physical_memory_unmap(buffer, len, dir == DMA_DIRECTION_FROM_DEVICE,
 619                               access_len);
 620 }
 621
 622 static inline void pci_dma_sglist_init(QEMUSGList *qsg, PCIDevice *dev,
 623                                        int alloc_hint)
 624 {
 625     qemu_sglist_init(qsg, alloc_hint);
 626 }
 627
 628 extern const VMStateDescription vmstate_pci_device;
 629
 630 #define VMSTATE_PCI_DEVICE(_field, _state) {                         \
 631     .name       = (stringify(_field)),                               \
 632     .size       = sizeof(PCIDevice),                                 \
 633     .vmsd       = &vmstate_pci_device,                               \
 634     .flags      = VMS_STRUCT,                                        \
 635     .offset     = vmstate_offset_value(_state, _field, PCIDevice),   \
 636 }
 637
 638 #define VMSTATE_PCI_DEVICE_POINTER(_field, _state) {                 \
 639     .name       = (stringify(_field)),                               \
 640     .size       = sizeof(PCIDevice),                                 \
 641     .vmsd       = &vmstate_pci_device,                               \
 642     .flags      = VMS_STRUCT|VMS_POINTER,                            \
 643     .offset     = vmstate_offset_pointer(_state, _field, PCIDevice), \
 644 }
 645
 646 #endif