hw/s390x/virtio-ccw.c

   1 /*
   2  * virtio ccw target implementation
   3  *
   4  * Copyright 2012,2015 IBM Corp.
   5  * Author(s): Cornelia Huck <[email protected]>
   6  *            Pierre Morel <[email protected]>
   7  *
   8  * This work is licensed under the terms of the GNU GPL, version 2 or (at
   9  * your option) any later version. See the COPYING file in the top-level
  10  * directory.
  11  */
  12
  13 #include "qemu/osdep.h"
  14 #include "qapi/error.h"
  15 #include "hw/hw.h"
  16 #include "sysemu/sysemu.h"
  17 #include "sysemu/kvm.h"
  18 #include "net/net.h"
  19 #include "hw/virtio/virtio.h"
  20 #include "hw/virtio/virtio-serial.h"
  21 #include "hw/virtio/virtio-net.h"
  22 #include "hw/sysbus.h"
  23 #include "qemu/bitops.h"
  24 #include "qemu/error-report.h"
  25 #include "hw/virtio/virtio-access.h"
  26 #include "hw/virtio/virtio-bus.h"
  27 #include "hw/s390x/adapter.h"
  28 #include "hw/s390x/s390_flic.h"
  29
  30 #include "hw/s390x/ioinst.h"
  31 #include "hw/s390x/css.h"
  32 #include "virtio-ccw.h"
  33 #include "trace.h"
  34 #include "hw/s390x/css-bridge.h"
  35 #include "hw/s390x/s390-virtio-ccw.h"
  36
  37 #define NR_CLASSIC_INDICATOR_BITS 64
  38
  39 static int virtio_ccw_dev_post_load(void *opaque, int version_id)
  40 {
  41     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(opaque);
  42     CcwDevice *ccw_dev = CCW_DEVICE(dev);
  43     CCWDeviceClass *ck = CCW_DEVICE_GET_CLASS(ccw_dev);
  44
  45     ccw_dev->sch->driver_data = dev;
  46     if (ccw_dev->sch->thinint_active) {
  47         dev->routes.adapter.adapter_id = css_get_adapter_id(
  48                                          CSS_IO_ADAPTER_VIRTIO,
  49                                          dev->thinint_isc);
  50     }
  51     /* Re-fill subch_id after loading the subchannel states.*/
  52     if (ck->refill_ids) {
  53         ck->refill_ids(ccw_dev);
  54     }
  55     return 0;
  56 }
  57
  58 typedef struct VirtioCcwDeviceTmp {
  59     VirtioCcwDevice *parent;
  60     uint16_t config_vector;
  61 } VirtioCcwDeviceTmp;
  62
  63 static int virtio_ccw_dev_tmp_pre_save(void *opaque)
  64 {
  65     VirtioCcwDeviceTmp *tmp = opaque;
  66     VirtioCcwDevice *dev = tmp->parent;
  67     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
  68
  69     tmp->config_vector = vdev->config_vector;
  70
  71     return 0;
  72 }
  73
  74 static int virtio_ccw_dev_tmp_post_load(void *opaque, int version_id)
  75 {
  76     VirtioCcwDeviceTmp *tmp = opaque;
  77     VirtioCcwDevice *dev = tmp->parent;
  78     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
  79
  80     vdev->config_vector = tmp->config_vector;
  81     return 0;
  82 }
  83
  84 const VMStateDescription vmstate_virtio_ccw_dev_tmp = {
  85     .name = "s390_virtio_ccw_dev_tmp",
  86     .pre_save = virtio_ccw_dev_tmp_pre_save,
  87     .post_load = virtio_ccw_dev_tmp_post_load,
  88     .fields = (VMStateField[]) {
  89         VMSTATE_UINT16(config_vector, VirtioCcwDeviceTmp),
  90         VMSTATE_END_OF_LIST()
  91     }
  92 };
  93
  94 const VMStateDescription vmstate_virtio_ccw_dev = {
  95     .name = "s390_virtio_ccw_dev",
  96     .version_id = 1,
  97     .minimum_version_id = 1,
  98     .post_load = virtio_ccw_dev_post_load,
  99     .fields = (VMStateField[]) {
 100         VMSTATE_CCW_DEVICE(parent_obj, VirtioCcwDevice),
 101         VMSTATE_PTR_TO_IND_ADDR(indicators, VirtioCcwDevice),
 102         VMSTATE_PTR_TO_IND_ADDR(indicators2, VirtioCcwDevice),
 103         VMSTATE_PTR_TO_IND_ADDR(summary_indicator, VirtioCcwDevice),
 104         /*
 105          * Ugly hack because VirtIODevice does not migrate itself.
 106          * This also makes legacy via vmstate_save_state possible.
 107          */
 108         VMSTATE_WITH_TMP(VirtioCcwDevice, VirtioCcwDeviceTmp,
 109                          vmstate_virtio_ccw_dev_tmp),
 110         VMSTATE_STRUCT(routes, VirtioCcwDevice, 1, vmstate_adapter_routes,
 111                        AdapterRoutes),
 112         VMSTATE_UINT8(thinint_isc, VirtioCcwDevice),
 113         VMSTATE_INT32(revision, VirtioCcwDevice),
 114         VMSTATE_END_OF_LIST()
 115     }
 116 };
 117
 118 static void virtio_ccw_bus_new(VirtioBusState *bus, size_t bus_size,
 119                                VirtioCcwDevice *dev);
 120
 121 VirtIODevice *virtio_ccw_get_vdev(SubchDev *sch)
 122 {
 123     VirtIODevice *vdev = NULL;
 124     VirtioCcwDevice *dev = sch->driver_data;
 125
 126     if (dev) {
 127         vdev = virtio_bus_get_device(&dev->bus);
 128     }
 129     return vdev;
 130 }
 131
 132 static void virtio_ccw_start_ioeventfd(VirtioCcwDevice *dev)
 133 {
 134     virtio_bus_start_ioeventfd(&dev->bus);
 135 }
 136
 137 static void virtio_ccw_stop_ioeventfd(VirtioCcwDevice *dev)
 138 {
 139     virtio_bus_stop_ioeventfd(&dev->bus);
 140 }
 141
 142 static bool virtio_ccw_ioeventfd_enabled(DeviceState *d)
 143 {
 144     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
 145
 146     return (dev->flags & VIRTIO_CCW_FLAG_USE_IOEVENTFD) != 0;
 147 }
 148
 149 static int virtio_ccw_ioeventfd_assign(DeviceState *d, EventNotifier *notifier,
 150                                        int n, bool assign)
 151 {
 152     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
 153     CcwDevice *ccw_dev = CCW_DEVICE(dev);
 154     SubchDev *sch = ccw_dev->sch;
 155     uint32_t sch_id = (css_build_subchannel_id(sch) << 16) | sch->schid;
 156
 157     return s390_assign_subch_ioeventfd(notifier, sch_id, n, assign);
 158 }
 159
 160 /* Communication blocks used by several channel commands. */
 161 typedef struct VqInfoBlockLegacy {
 162     uint64_t queue;
 163     uint32_t align;
 164     uint16_t index;
 165     uint16_t num;
 166 } QEMU_PACKED VqInfoBlockLegacy;
 167
 168 typedef struct VqInfoBlock {
 169     uint64_t desc;
 170     uint32_t res0;
 171     uint16_t index;
 172     uint16_t num;
 173     uint64_t avail;
 174     uint64_t used;
 175 } QEMU_PACKED VqInfoBlock;
 176
 177 typedef struct VqConfigBlock {
 178     uint16_t index;
 179     uint16_t num_max;
 180 } QEMU_PACKED VqConfigBlock;
 181
 182 typedef struct VirtioFeatDesc {
 183     uint32_t features;
 184     uint8_t index;
 185 } QEMU_PACKED VirtioFeatDesc;
 186
 187 typedef struct VirtioThinintInfo {
 188     hwaddr summary_indicator;
 189     hwaddr device_indicator;
 190     uint64_t ind_bit;
 191     uint8_t isc;
 192 } QEMU_PACKED VirtioThinintInfo;
 193
 194 typedef struct VirtioRevInfo {
 195     uint16_t revision;
 196     uint16_t length;
 197     uint8_t data[0];
 198 } QEMU_PACKED VirtioRevInfo;
 199
 200 /* Specify where the virtqueues for the subchannel are in guest memory. */
 201 static int virtio_ccw_set_vqs(SubchDev *sch, VqInfoBlock *info,
 202                               VqInfoBlockLegacy *linfo)
 203 {
 204     VirtIODevice *vdev = virtio_ccw_get_vdev(sch);
 205     uint16_t index = info ? info->index : linfo->index;
 206     uint16_t num = info ? info->num : linfo->num;
 207     uint64_t desc = info ? info->desc : linfo->queue;
 208
 209     if (index >= VIRTIO_QUEUE_MAX) {
 210         return -EINVAL;
 211     }
 212
 213     /* Current code in virtio.c relies on 4K alignment. */
 214     if (linfo && desc && (linfo->align != 4096)) {
 215         return -EINVAL;
 216     }
 217
 218     if (!vdev) {
 219         return -EINVAL;
 220     }
 221
 222     if (info) {
 223         virtio_queue_set_rings(vdev, index, desc, info->avail, info->used);
 224     } else {
 225         virtio_queue_set_addr(vdev, index, desc);
 226     }
 227     if (!desc) {
 228         virtio_queue_set_vector(vdev, index, VIRTIO_NO_VECTOR);
 229     } else {
 230         if (info) {
 231             /* virtio-1 allows changing the ring size. */
 232             if (virtio_queue_get_max_num(vdev, index) < num) {
 233                 /* Fail if we exceed the maximum number. */
 234                 return -EINVAL;
 235             }
 236             virtio_queue_set_num(vdev, index, num);
 237         } else if (virtio_queue_get_num(vdev, index) > num) {
 238             /* Fail if we don't have a big enough queue. */
 239             return -EINVAL;
 240         }
 241         /* We ignore possible increased num for legacy for compatibility. */
 242         virtio_queue_set_vector(vdev, index, index);
 243     }
 244     /* tell notify handler in case of config change */
 245     vdev->config_vector = VIRTIO_QUEUE_MAX;
 246     return 0;
 247 }
 248
 249 static void virtio_ccw_reset_virtio(VirtioCcwDevice *dev, VirtIODevice *vdev)
 250 {
 251     CcwDevice *ccw_dev = CCW_DEVICE(dev);
 252
 253     virtio_ccw_stop_ioeventfd(dev);
 254     virtio_reset(vdev);
 255     if (dev->indicators) {
 256         release_indicator(&dev->routes.adapter, dev->indicators);
 257         dev->indicators = NULL;
 258     }
 259     if (dev->indicators2) {
 260         release_indicator(&dev->routes.adapter, dev->indicators2);
 261         dev->indicators2 = NULL;
 262     }
 263     if (dev->summary_indicator) {
 264         release_indicator(&dev->routes.adapter, dev->summary_indicator);
 265         dev->summary_indicator = NULL;
 266     }
 267     ccw_dev->sch->thinint_active = false;
 268 }
 269
 270 static int virtio_ccw_handle_set_vq(SubchDev *sch, CCW1 ccw, bool check_len,
 271                                     bool is_legacy)
 272 {
 273     int ret;
 274     VqInfoBlock info;
 275     VqInfoBlockLegacy linfo;
 276     size_t info_len = is_legacy ? sizeof(linfo) : sizeof(info);
 277
 278     if (check_len) {
 279         if (ccw.count != info_len) {
 280             return -EINVAL;
 281         }
 282     } else if (ccw.count < info_len) {
 283         /* Can't execute command. */
 284         return -EINVAL;
 285     }
 286     if (!ccw.cda) {
 287         return -EFAULT;
 288     }
 289     if (is_legacy) {
 290         ccw_dstream_read(&sch->cds, linfo);
 291         be64_to_cpus(&linfo.queue);
 292         be32_to_cpus(&linfo.align);
 293         be16_to_cpus(&linfo.index);
 294         be16_to_cpus(&linfo.num);
 295         ret = virtio_ccw_set_vqs(sch, NULL, &linfo);
 296     } else {
 297         ccw_dstream_read(&sch->cds, info);
 298         be64_to_cpus(&info.desc);
 299         be16_to_cpus(&info.index);
 300         be16_to_cpus(&info.num);
 301         be64_to_cpus(&info.avail);
 302         be64_to_cpus(&info.used);
 303         ret = virtio_ccw_set_vqs(sch, &info, NULL);
 304     }
 305     sch->curr_status.scsw.count = 0;
 306     return ret;
 307 }
 308
 309 static int virtio_ccw_cb(SubchDev *sch, CCW1 ccw)
 310 {
 311     int ret;
 312     VirtioRevInfo revinfo;
 313     uint8_t status;
 314     VirtioFeatDesc features;
 315     hwaddr indicators;
 316     VqConfigBlock vq_config;
 317     VirtioCcwDevice *dev = sch->driver_data;
 318     VirtIODevice *vdev = virtio_ccw_get_vdev(sch);
 319     bool check_len;
 320     int len;
 321     VirtioThinintInfo thinint;
 322
 323     if (!dev) {
 324         return -EINVAL;
 325     }
 326
 327     trace_virtio_ccw_interpret_ccw(sch->cssid, sch->ssid, sch->schid,
 328                                    ccw.cmd_code);
 329     check_len = !((ccw.flags & CCW_FLAG_SLI) && !(ccw.flags & CCW_FLAG_DC));
 330
 331     if (dev->force_revision_1 && dev->revision < 0 &&
 332         ccw.cmd_code != CCW_CMD_SET_VIRTIO_REV) {
 333         /*
 334          * virtio-1 drivers must start with negotiating to a revision >= 1,
 335          * so post a command reject for all other commands
 336          */
 337         return -ENOSYS;
 338     }
 339
 340     /* Look at the command. */
 341     switch (ccw.cmd_code) {
 342     case CCW_CMD_SET_VQ:
 343         ret = virtio_ccw_handle_set_vq(sch, ccw, check_len, dev->revision < 1);
 344         break;
 345     case CCW_CMD_VDEV_RESET:
 346         virtio_ccw_reset_virtio(dev, vdev);
 347         ret = 0;
 348         break;
 349     case CCW_CMD_READ_FEAT:
 350         if (check_len) {
 351             if (ccw.count != sizeof(features)) {
 352                 ret = -EINVAL;
 353                 break;
 354             }
 355         } else if (ccw.count < sizeof(features)) {
 356             /* Can't execute command. */
 357             ret = -EINVAL;
 358             break;
 359         }
 360         if (!ccw.cda) {
 361             ret = -EFAULT;
 362         } else {
 363             VirtioDeviceClass *vdc = VIRTIO_DEVICE_GET_CLASS(vdev);
 364
 365             ccw_dstream_advance(&sch->cds, sizeof(features.features));
 366             ccw_dstream_read(&sch->cds, features.index);
 367             if (features.index == 0) {
 368                 if (dev->revision >= 1) {
 369                     /* Don't offer legacy features for modern devices. */
 370                     features.features = (uint32_t)
 371                         (vdev->host_features & ~vdc->legacy_features);
 372                 } else {
 373                     features.features = (uint32_t)vdev->host_features;
 374                 }
 375             } else if ((features.index == 1) && (dev->revision >= 1)) {
 376                 /*
 377                  * Only offer feature bits beyond 31 if the guest has
 378                  * negotiated at least revision 1.
 379                  */
 380                 features.features = (uint32_t)(vdev->host_features >> 32);
 381             } else {
 382                 /* Return zeroes if the guest supports more feature bits. */
 383                 features.features = 0;
 384             }
 385             ccw_dstream_rewind(&sch->cds);
 386             cpu_to_le32s(&features.features);
 387             ccw_dstream_write(&sch->cds, features.features);
 388             sch->curr_status.scsw.count = ccw.count - sizeof(features);
 389             ret = 0;
 390         }
 391         break;
 392     case CCW_CMD_WRITE_FEAT:
 393         if (check_len) {
 394             if (ccw.count != sizeof(features)) {
 395                 ret = -EINVAL;
 396                 break;
 397             }
 398         } else if (ccw.count < sizeof(features)) {
 399             /* Can't execute command. */
 400             ret = -EINVAL;
 401             break;
 402         }
 403         if (!ccw.cda) {
 404             ret = -EFAULT;
 405         } else {
 406             ccw_dstream_read(&sch->cds, features);
 407             le32_to_cpus(&features.features);
 408             if (features.index == 0) {
 409                 virtio_set_features(vdev,
 410                                     (vdev->guest_features & 0xffffffff00000000ULL) |
 411                                     features.features);
 412             } else if ((features.index == 1) && (dev->revision >= 1)) {
 413                 /*
 414                  * If the guest did not negotiate at least revision 1,
 415                  * we did not offer it any feature bits beyond 31. Such a
 416                  * guest passing us any bit here is therefore buggy.
 417                  */
 418                 virtio_set_features(vdev,
 419                                     (vdev->guest_features & 0x00000000ffffffffULL) |
 420                                     ((uint64_t)features.features << 32));
 421             } else {
 422                 /*
 423                  * If the guest supports more feature bits, assert that it
 424                  * passes us zeroes for those we don't support.
 425                  */
 426                 if (features.features) {
 427                     qemu_log_mask(LOG_GUEST_ERROR,
 428                                   "Guest bug: features[%i]=%x (expected 0)",
 429                                   features.index, features.features);
 430                     /* XXX: do a unit check here? */
 431                 }
 432             }
 433             sch->curr_status.scsw.count = ccw.count - sizeof(features);
 434             ret = 0;
 435         }
 436         break;
 437     case CCW_CMD_READ_CONF:
 438         if (check_len) {
 439             if (ccw.count > vdev->config_len) {
 440                 ret = -EINVAL;
 441                 break;
 442             }
 443         }
 444         len = MIN(ccw.count, vdev->config_len);
 445         if (!ccw.cda) {
 446             ret = -EFAULT;
 447         } else {
 448             virtio_bus_get_vdev_config(&dev->bus, vdev->config);
 449             ccw_dstream_write_buf(&sch->cds, vdev->config, len);
 450             sch->curr_status.scsw.count = ccw.count - len;
 451             ret = 0;
 452         }
 453         break;
 454     case CCW_CMD_WRITE_CONF:
 455         if (check_len) {
 456             if (ccw.count > vdev->config_len) {
 457                 ret = -EINVAL;
 458                 break;
 459             }
 460         }
 461         len = MIN(ccw.count, vdev->config_len);
 462         if (!ccw.cda) {
 463             ret = -EFAULT;
 464         } else {
 465             ret = ccw_dstream_read_buf(&sch->cds, vdev->config, len);
 466             if (!ret) {
 467                 virtio_bus_set_vdev_config(&dev->bus, vdev->config);
 468                 sch->curr_status.scsw.count = ccw.count - len;
 469             }
 470         }
 471         break;
 472     case CCW_CMD_READ_STATUS:
 473         if (check_len) {
 474             if (ccw.count != sizeof(status)) {
 475                 ret = -EINVAL;
 476                 break;
 477             }
 478         } else if (ccw.count < sizeof(status)) {
 479             /* Can't execute command. */
 480             ret = -EINVAL;
 481             break;
 482         }
 483         if (!ccw.cda) {
 484             ret = -EFAULT;
 485         } else {
 486             address_space_stb(&address_space_memory, ccw.cda, vdev->status,
 487                                         MEMTXATTRS_UNSPECIFIED, NULL);
 488             sch->curr_status.scsw.count = ccw.count - sizeof(vdev->status);
 489             ret = 0;
 490         }
 491         break;
 492     case CCW_CMD_WRITE_STATUS:
 493         if (check_len) {
 494             if (ccw.count != sizeof(status)) {
 495                 ret = -EINVAL;
 496                 break;
 497             }
 498         } else if (ccw.count < sizeof(status)) {
 499             /* Can't execute command. */
 500             ret = -EINVAL;
 501             break;
 502         }
 503         if (!ccw.cda) {
 504             ret = -EFAULT;
 505         } else {
 506             ccw_dstream_read(&sch->cds, status);
 507             if (!(status & VIRTIO_CONFIG_S_DRIVER_OK)) {
 508                 virtio_ccw_stop_ioeventfd(dev);
 509             }
 510             if (virtio_set_status(vdev, status) == 0) {
 511                 if (vdev->status == 0) {
 512                     virtio_ccw_reset_virtio(dev, vdev);
 513                 }
 514                 if (status & VIRTIO_CONFIG_S_DRIVER_OK) {
 515                     virtio_ccw_start_ioeventfd(dev);
 516                 }
 517                 sch->curr_status.scsw.count = ccw.count - sizeof(status);
 518                 ret = 0;
 519             } else {
 520                 /* Trigger a command reject. */
 521                 ret = -ENOSYS;
 522             }
 523         }
 524         break;
 525     case CCW_CMD_SET_IND:
 526         if (check_len) {
 527             if (ccw.count != sizeof(indicators)) {
 528                 ret = -EINVAL;
 529                 break;
 530             }
 531         } else if (ccw.count < sizeof(indicators)) {
 532             /* Can't execute command. */
 533             ret = -EINVAL;
 534             break;
 535         }
 536         if (sch->thinint_active) {
 537             /* Trigger a command reject. */
 538             ret = -ENOSYS;
 539             break;
 540         }
 541         if (virtio_get_num_queues(vdev) > NR_CLASSIC_INDICATOR_BITS) {
 542             /* More queues than indicator bits --> trigger a reject */
 543             ret = -ENOSYS;
 544             break;
 545         }
 546         if (!ccw.cda) {
 547             ret = -EFAULT;
 548         } else {
 549             ccw_dstream_read(&sch->cds, indicators);
 550             be64_to_cpus(&indicators);
 551             dev->indicators = get_indicator(indicators, sizeof(uint64_t));
 552             sch->curr_status.scsw.count = ccw.count - sizeof(indicators);
 553             ret = 0;
 554         }
 555         break;
 556     case CCW_CMD_SET_CONF_IND:
 557         if (check_len) {
 558             if (ccw.count != sizeof(indicators)) {
 559                 ret = -EINVAL;
 560                 break;
 561             }
 562         } else if (ccw.count < sizeof(indicators)) {
 563             /* Can't execute command. */
 564             ret = -EINVAL;
 565             break;
 566         }
 567         if (!ccw.cda) {
 568             ret = -EFAULT;
 569         } else {
 570             ccw_dstream_read(&sch->cds, indicators);
 571             be64_to_cpus(&indicators);
 572             dev->indicators2 = get_indicator(indicators, sizeof(uint64_t));
 573             sch->curr_status.scsw.count = ccw.count - sizeof(indicators);
 574             ret = 0;
 575         }
 576         break;
 577     case CCW_CMD_READ_VQ_CONF:
 578         if (check_len) {
 579             if (ccw.count != sizeof(vq_config)) {
 580                 ret = -EINVAL;
 581                 break;
 582             }
 583         } else if (ccw.count < sizeof(vq_config)) {
 584             /* Can't execute command. */
 585             ret = -EINVAL;
 586             break;
 587         }
 588         if (!ccw.cda) {
 589             ret = -EFAULT;
 590         } else {
 591             ccw_dstream_read(&sch->cds, vq_config.index);
 592             be16_to_cpus(&vq_config.index);
 593             if (vq_config.index >= VIRTIO_QUEUE_MAX) {
 594                 ret = -EINVAL;
 595                 break;
 596             }
 597             vq_config.num_max = virtio_queue_get_num(vdev,
 598                                                      vq_config.index);
 599             cpu_to_be16s(&vq_config.num_max);
 600             ccw_dstream_write(&sch->cds, vq_config.num_max);
 601             sch->curr_status.scsw.count = ccw.count - sizeof(vq_config);
 602             ret = 0;
 603         }
 604         break;
 605     case CCW_CMD_SET_IND_ADAPTER:
 606         if (check_len) {
 607             if (ccw.count != sizeof(thinint)) {
 608                 ret = -EINVAL;
 609                 break;
 610             }
 611         } else if (ccw.count < sizeof(thinint)) {
 612             /* Can't execute command. */
 613             ret = -EINVAL;
 614             break;
 615         }
 616         if (!ccw.cda) {
 617             ret = -EFAULT;
 618         } else if (dev->indicators && !sch->thinint_active) {
 619             /* Trigger a command reject. */
 620             ret = -ENOSYS;
 621         } else {
 622             if (ccw_dstream_read(&sch->cds, thinint)) {
 623                 ret = -EFAULT;
 624             } else {
 625                 be64_to_cpus(&thinint.ind_bit);
 626                 be64_to_cpus(&thinint.summary_indicator);
 627                 be64_to_cpus(&thinint.device_indicator);
 628
 629                 dev->summary_indicator =
 630                     get_indicator(thinint.summary_indicator, sizeof(uint8_t));
 631                 dev->indicators =
 632                     get_indicator(thinint.device_indicator,
 633                                   thinint.ind_bit / 8 + 1);
 634                 dev->thinint_isc = thinint.isc;
 635                 dev->routes.adapter.ind_offset = thinint.ind_bit;
 636                 dev->routes.adapter.summary_offset = 7;
 637                 dev->routes.adapter.adapter_id = css_get_adapter_id(
 638                                                  CSS_IO_ADAPTER_VIRTIO,
 639                                                  dev->thinint_isc);
 640                 sch->thinint_active = ((dev->indicators != NULL) &&
 641                                        (dev->summary_indicator != NULL));
 642                 sch->curr_status.scsw.count = ccw.count - sizeof(thinint);
 643                 ret = 0;
 644             }
 645         }
 646         break;
 647     case CCW_CMD_SET_VIRTIO_REV:
 648         len = sizeof(revinfo);
 649         if (ccw.count < len) {
 650             ret = -EINVAL;
 651             break;
 652         }
 653         if (!ccw.cda) {
 654             ret = -EFAULT;
 655             break;
 656         }
 657         ccw_dstream_read_buf(&sch->cds, &revinfo, 4);
 658         be16_to_cpus(&revinfo.revision);
 659         be16_to_cpus(&revinfo.length);
 660         if (ccw.count < len + revinfo.length ||
 661             (check_len && ccw.count > len + revinfo.length)) {
 662             ret = -EINVAL;
 663             break;
 664         }
 665         /*
 666          * Once we start to support revisions with additional data, we'll
 667          * need to fetch it here. Nothing to do for now, though.
 668          */
 669         if (dev->revision >= 0 ||
 670             revinfo.revision > virtio_ccw_rev_max(dev) ||
 671             (dev->force_revision_1 && !revinfo.revision)) {
 672             ret = -ENOSYS;
 673             break;
 674         }
 675         ret = 0;
 676         dev->revision = revinfo.revision;
 677         break;
 678     default:
 679         ret = -ENOSYS;
 680         break;
 681     }
 682     return ret;
 683 }
 684
 685 static void virtio_sch_disable_cb(SubchDev *sch)
 686 {
 687     VirtioCcwDevice *dev = sch->driver_data;
 688
 689     dev->revision = -1;
 690 }
 691
 692 static void virtio_ccw_device_realize(VirtioCcwDevice *dev, Error **errp)
 693 {
 694     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_GET_CLASS(dev);
 695     CcwDevice *ccw_dev = CCW_DEVICE(dev);
 696     CCWDeviceClass *ck = CCW_DEVICE_GET_CLASS(ccw_dev);
 697     DeviceState *parent = DEVICE(ccw_dev);
 698     BusState *qbus = qdev_get_parent_bus(parent);
 699     VirtualCssBus *cbus = VIRTUAL_CSS_BUS(qbus);
 700     SubchDev *sch;
 701     Error *err = NULL;
 702
 703     sch = css_create_sch(ccw_dev->devno, cbus->squash_mcss, errp);
 704     if (!sch) {
 705         return;
 706     }
 707     if (!virtio_ccw_rev_max(dev) && dev->force_revision_1) {
 708         error_setg(&err, "Invalid value of property max_rev "
 709                    "(is %d expected >= 1)", virtio_ccw_rev_max(dev));
 710         goto out_err;
 711     }
 712
 713     sch->driver_data = dev;
 714     sch->ccw_cb = virtio_ccw_cb;
 715     sch->disable_cb = virtio_sch_disable_cb;
 716     sch->id.reserved = 0xff;
 717     sch->id.cu_type = VIRTIO_CCW_CU_TYPE;
 718     sch->do_subchannel_work = do_subchannel_work_virtual;
 719     ccw_dev->sch = sch;
 720     dev->indicators = NULL;
 721     dev->revision = -1;
 722     css_sch_build_virtual_schib(sch, 0, VIRTIO_CCW_CHPID_TYPE);
 723
 724     trace_virtio_ccw_new_device(
 725         sch->cssid, sch->ssid, sch->schid, sch->devno,
 726         ccw_dev->devno.valid ? "user-configured" : "auto-configured");
 727
 728     if (kvm_enabled() && !kvm_eventfds_enabled()) {
 729         dev->flags &= ~VIRTIO_CCW_FLAG_USE_IOEVENTFD;
 730     }
 731
 732     if (k->realize) {
 733         k->realize(dev, &err);
 734         if (err) {
 735             goto out_err;
 736         }
 737     }
 738
 739     ck->realize(ccw_dev, &err);
 740     if (err) {
 741         goto out_err;
 742     }
 743
 744     return;
 745
 746 out_err:
 747     error_propagate(errp, err);
 748     css_subch_assign(sch->cssid, sch->ssid, sch->schid, sch->devno, NULL);
 749     ccw_dev->sch = NULL;
 750     g_free(sch);
 751 }
 752
 753 static void virtio_ccw_unrealize(VirtioCcwDevice *dev, Error **errp)
 754 {
 755     CcwDevice *ccw_dev = CCW_DEVICE(dev);
 756     SubchDev *sch = ccw_dev->sch;
 757
 758     if (sch) {
 759         css_subch_assign(sch->cssid, sch->ssid, sch->schid, sch->devno, NULL);
 760         g_free(sch);
 761         ccw_dev->sch = NULL;
 762     }
 763     if (dev->indicators) {
 764         release_indicator(&dev->routes.adapter, dev->indicators);
 765         dev->indicators = NULL;
 766     }
 767 }
 768
 769 static void virtio_ccw_net_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 770 {
 771     DeviceState *qdev = DEVICE(ccw_dev);
 772     VirtIONetCcw *dev = VIRTIO_NET_CCW(ccw_dev);
 773     DeviceState *vdev = DEVICE(&dev->vdev);
 774
 775     virtio_net_set_netclient_name(&dev->vdev, qdev->id,
 776                                   object_get_typename(OBJECT(qdev)));
 777     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 778     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 779 }
 780
 781 static void virtio_ccw_net_instance_init(Object *obj)
 782 {
 783     VirtIONetCcw *dev = VIRTIO_NET_CCW(obj);
 784
 785     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 786                                 TYPE_VIRTIO_NET);
 787     object_property_add_alias(obj, "bootindex", OBJECT(&dev->vdev),
 788                               "bootindex", &error_abort);
 789 }
 790
 791 static void virtio_ccw_blk_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 792 {
 793     VirtIOBlkCcw *dev = VIRTIO_BLK_CCW(ccw_dev);
 794     DeviceState *vdev = DEVICE(&dev->vdev);
 795
 796     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 797     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 798 }
 799
 800 static void virtio_ccw_blk_instance_init(Object *obj)
 801 {
 802     VirtIOBlkCcw *dev = VIRTIO_BLK_CCW(obj);
 803
 804     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 805                                 TYPE_VIRTIO_BLK);
 806     object_property_add_alias(obj, "bootindex", OBJECT(&dev->vdev),
 807                               "bootindex", &error_abort);
 808 }
 809
 810 static void virtio_ccw_serial_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 811 {
 812     VirtioSerialCcw *dev = VIRTIO_SERIAL_CCW(ccw_dev);
 813     DeviceState *vdev = DEVICE(&dev->vdev);
 814     DeviceState *proxy = DEVICE(ccw_dev);
 815     char *bus_name;
 816
 817     /*
 818      * For command line compatibility, this sets the virtio-serial-device bus
 819      * name as before.
 820      */
 821     if (proxy->id) {
 822         bus_name = g_strdup_printf("%s.0", proxy->id);
 823         virtio_device_set_child_bus_name(VIRTIO_DEVICE(vdev), bus_name);
 824         g_free(bus_name);
 825     }
 826
 827     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 828     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 829 }
 830
 831
 832 static void virtio_ccw_serial_instance_init(Object *obj)
 833 {
 834     VirtioSerialCcw *dev = VIRTIO_SERIAL_CCW(obj);
 835
 836     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 837                                 TYPE_VIRTIO_SERIAL);
 838 }
 839
 840 static void virtio_ccw_balloon_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 841 {
 842     VirtIOBalloonCcw *dev = VIRTIO_BALLOON_CCW(ccw_dev);
 843     DeviceState *vdev = DEVICE(&dev->vdev);
 844
 845     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 846     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 847 }
 848
 849 static void virtio_ccw_balloon_instance_init(Object *obj)
 850 {
 851     VirtIOBalloonCcw *dev = VIRTIO_BALLOON_CCW(obj);
 852
 853     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 854                                 TYPE_VIRTIO_BALLOON);
 855     object_property_add_alias(obj, "guest-stats", OBJECT(&dev->vdev),
 856                               "guest-stats", &error_abort);
 857     object_property_add_alias(obj, "guest-stats-polling-interval",
 858                               OBJECT(&dev->vdev),
 859                               "guest-stats-polling-interval", &error_abort);
 860 }
 861
 862 static void virtio_ccw_scsi_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 863 {
 864     VirtIOSCSICcw *dev = VIRTIO_SCSI_CCW(ccw_dev);
 865     DeviceState *vdev = DEVICE(&dev->vdev);
 866     DeviceState *qdev = DEVICE(ccw_dev);
 867     char *bus_name;
 868
 869     /*
 870      * For command line compatibility, this sets the virtio-scsi-device bus
 871      * name as before.
 872      */
 873     if (qdev->id) {
 874         bus_name = g_strdup_printf("%s.0", qdev->id);
 875         virtio_device_set_child_bus_name(VIRTIO_DEVICE(vdev), bus_name);
 876         g_free(bus_name);
 877     }
 878
 879     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 880     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 881 }
 882
 883 static void virtio_ccw_scsi_instance_init(Object *obj)
 884 {
 885     VirtIOSCSICcw *dev = VIRTIO_SCSI_CCW(obj);
 886
 887     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 888                                 TYPE_VIRTIO_SCSI);
 889 }
 890
 891 #ifdef CONFIG_VHOST_SCSI
 892 static void vhost_ccw_scsi_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 893 {
 894     VHostSCSICcw *dev = VHOST_SCSI_CCW(ccw_dev);
 895     DeviceState *vdev = DEVICE(&dev->vdev);
 896
 897     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 898     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 899 }
 900
 901 static void vhost_ccw_scsi_instance_init(Object *obj)
 902 {
 903     VHostSCSICcw *dev = VHOST_SCSI_CCW(obj);
 904
 905     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
 906                                 TYPE_VHOST_SCSI);
 907 }
 908 #endif
 909
 910 static void virtio_ccw_rng_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 911 {
 912     VirtIORNGCcw *dev = VIRTIO_RNG_CCW(ccw_dev);
 913     DeviceState *vdev = DEVICE(&dev->vdev);
 914     Error *err = NULL;
 915
 916     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 917     object_property_set_bool(OBJECT(vdev), true, "realized", &err);
 918     if (err) {
 919         error_propagate(errp, err);
 920         return;
 921     }
 922
 923     object_property_set_link(OBJECT(dev),
 924                              OBJECT(dev->vdev.conf.rng), "rng",
 925                              NULL);
 926 }
 927
 928 static void virtio_ccw_crypto_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 929 {
 930     VirtIOCryptoCcw *dev = VIRTIO_CRYPTO_CCW(ccw_dev);
 931     DeviceState *vdev = DEVICE(&dev->vdev);
 932     Error *err = NULL;
 933
 934     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 935     object_property_set_bool(OBJECT(vdev), true, "realized", &err);
 936     if (err) {
 937         error_propagate(errp, err);
 938         return;
 939     }
 940
 941     object_property_set_link(OBJECT(vdev),
 942                              OBJECT(dev->vdev.conf.cryptodev), "cryptodev",
 943                              NULL);
 944 }
 945
 946 static void virtio_ccw_gpu_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 947 {
 948     VirtIOGPUCcw *dev = VIRTIO_GPU_CCW(ccw_dev);
 949     DeviceState *vdev = DEVICE(&dev->vdev);
 950
 951     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 952     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 953 }
 954
 955 static void virtio_ccw_input_realize(VirtioCcwDevice *ccw_dev, Error **errp)
 956 {
 957     VirtIOInputCcw *dev = VIRTIO_INPUT_CCW(ccw_dev);
 958     DeviceState *vdev = DEVICE(&dev->vdev);
 959
 960     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
 961     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
 962 }
 963
 964 /* DeviceState to VirtioCcwDevice. Note: used on datapath,
 965  * be careful and test performance if you change this.
 966  */
 967 static inline VirtioCcwDevice *to_virtio_ccw_dev_fast(DeviceState *d)
 968 {
 969     CcwDevice *ccw_dev = to_ccw_dev_fast(d);
 970
 971     return container_of(ccw_dev, VirtioCcwDevice, parent_obj);
 972 }
 973
 974 static uint8_t virtio_set_ind_atomic(SubchDev *sch, uint64_t ind_loc,
 975                                      uint8_t to_be_set)
 976 {
 977     uint8_t ind_old, ind_new;
 978     hwaddr len = 1;
 979     uint8_t *ind_addr;
 980
 981     ind_addr = cpu_physical_memory_map(ind_loc, &len, 1);
 982     if (!ind_addr) {
 983         error_report("%s(%x.%x.%04x): unable to access indicator",
 984                      __func__, sch->cssid, sch->ssid, sch->schid);
 985         return -1;
 986     }
 987     do {
 988         ind_old = *ind_addr;
 989         ind_new = ind_old | to_be_set;
 990     } while (atomic_cmpxchg(ind_addr, ind_old, ind_new) != ind_old);
 991     trace_virtio_ccw_set_ind(ind_loc, ind_old, ind_new);
 992     cpu_physical_memory_unmap(ind_addr, len, 1, len);
 993
 994     return ind_old;
 995 }
 996
 997 static void virtio_ccw_notify(DeviceState *d, uint16_t vector)
 998 {
 999     VirtioCcwDevice *dev = to_virtio_ccw_dev_fast(d);
1000     CcwDevice *ccw_dev = to_ccw_dev_fast(d);
1001     SubchDev *sch = ccw_dev->sch;
1002     uint64_t indicators;
1003
1004     /* queue indicators + secondary indicators */
1005     if (vector >= VIRTIO_QUEUE_MAX + 64) {
1006         return;
1007     }
1008
1009     if (vector < VIRTIO_QUEUE_MAX) {
1010         if (!dev->indicators) {
1011             return;
1012         }
1013         if (sch->thinint_active) {
1014             /*
1015              * In the adapter interrupt case, indicators points to a
1016              * memory area that may be (way) larger than 64 bit and
1017              * ind_bit indicates the start of the indicators in a big
1018              * endian notation.
1019              */
1020             uint64_t ind_bit = dev->routes.adapter.ind_offset;
1021
1022             virtio_set_ind_atomic(sch, dev->indicators->addr +
1023                                   (ind_bit + vector) / 8,
1024                                   0x80 >> ((ind_bit + vector) % 8));
1025             if (!virtio_set_ind_atomic(sch, dev->summary_indicator->addr,
1026                                        0x01)) {
1027                 css_adapter_interrupt(CSS_IO_ADAPTER_VIRTIO, dev->thinint_isc);
1028             }
1029         } else {
1030             indicators = address_space_ldq(&address_space_memory,
1031                                            dev->indicators->addr,
1032                                            MEMTXATTRS_UNSPECIFIED,
1033                                            NULL);
1034             indicators |= 1ULL << vector;
1035             address_space_stq(&address_space_memory, dev->indicators->addr,
1036                               indicators, MEMTXATTRS_UNSPECIFIED, NULL);
1037             css_conditional_io_interrupt(sch);
1038         }
1039     } else {
1040         if (!dev->indicators2) {
1041             return;
1042         }
1043         vector = 0;
1044         indicators = address_space_ldq(&address_space_memory,
1045                                        dev->indicators2->addr,
1046                                        MEMTXATTRS_UNSPECIFIED,
1047                                        NULL);
1048         indicators |= 1ULL << vector;
1049         address_space_stq(&address_space_memory, dev->indicators2->addr,
1050                           indicators, MEMTXATTRS_UNSPECIFIED, NULL);
1051         css_conditional_io_interrupt(sch);
1052     }
1053 }
1054
1055 static void virtio_ccw_reset(DeviceState *d)
1056 {
1057     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1058     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1059     VirtIOCCWDeviceClass *vdc = VIRTIO_CCW_DEVICE_GET_CLASS(dev);
1060
1061     virtio_ccw_reset_virtio(dev, vdev);
1062     if (vdc->parent_reset) {
1063         vdc->parent_reset(d);
1064     }
1065 }
1066
1067 static void virtio_ccw_vmstate_change(DeviceState *d, bool running)
1068 {
1069     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1070
1071     if (running) {
1072         virtio_ccw_start_ioeventfd(dev);
1073     } else {
1074         virtio_ccw_stop_ioeventfd(dev);
1075     }
1076 }
1077
1078 static bool virtio_ccw_query_guest_notifiers(DeviceState *d)
1079 {
1080     CcwDevice *dev = CCW_DEVICE(d);
1081
1082     return !!(dev->sch->curr_status.pmcw.flags & PMCW_FLAGS_MASK_ENA);
1083 }
1084
1085 static int virtio_ccw_get_mappings(VirtioCcwDevice *dev)
1086 {
1087     int r;
1088     CcwDevice *ccw_dev = CCW_DEVICE(dev);
1089
1090     if (!ccw_dev->sch->thinint_active) {
1091         return -EINVAL;
1092     }
1093
1094     r = map_indicator(&dev->routes.adapter, dev->summary_indicator);
1095     if (r) {
1096         return r;
1097     }
1098     r = map_indicator(&dev->routes.adapter, dev->indicators);
1099     if (r) {
1100         return r;
1101     }
1102     dev->routes.adapter.summary_addr = dev->summary_indicator->map;
1103     dev->routes.adapter.ind_addr = dev->indicators->map;
1104
1105     return 0;
1106 }
1107
1108 static int virtio_ccw_setup_irqroutes(VirtioCcwDevice *dev, int nvqs)
1109 {
1110     int i;
1111     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1112     int ret;
1113     S390FLICState *fs = s390_get_flic();
1114     S390FLICStateClass *fsc = s390_get_flic_class(fs);
1115
1116     ret = virtio_ccw_get_mappings(dev);
1117     if (ret) {
1118         return ret;
1119     }
1120     for (i = 0; i < nvqs; i++) {
1121         if (!virtio_queue_get_num(vdev, i)) {
1122             break;
1123         }
1124     }
1125     dev->routes.num_routes = i;
1126     return fsc->add_adapter_routes(fs, &dev->routes);
1127 }
1128
1129 static void virtio_ccw_release_irqroutes(VirtioCcwDevice *dev, int nvqs)
1130 {
1131     S390FLICState *fs = s390_get_flic();
1132     S390FLICStateClass *fsc = s390_get_flic_class(fs);
1133
1134     fsc->release_adapter_routes(fs, &dev->routes);
1135 }
1136
1137 static int virtio_ccw_add_irqfd(VirtioCcwDevice *dev, int n)
1138 {
1139     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1140     VirtQueue *vq = virtio_get_queue(vdev, n);
1141     EventNotifier *notifier = virtio_queue_get_guest_notifier(vq);
1142
1143     return kvm_irqchip_add_irqfd_notifier_gsi(kvm_state, notifier, NULL,
1144                                               dev->routes.gsi[n]);
1145 }
1146
1147 static void virtio_ccw_remove_irqfd(VirtioCcwDevice *dev, int n)
1148 {
1149     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1150     VirtQueue *vq = virtio_get_queue(vdev, n);
1151     EventNotifier *notifier = virtio_queue_get_guest_notifier(vq);
1152     int ret;
1153
1154     ret = kvm_irqchip_remove_irqfd_notifier_gsi(kvm_state, notifier,
1155                                                 dev->routes.gsi[n]);
1156     assert(ret == 0);
1157 }
1158
1159 static int virtio_ccw_set_guest_notifier(VirtioCcwDevice *dev, int n,
1160                                          bool assign, bool with_irqfd)
1161 {
1162     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1163     VirtQueue *vq = virtio_get_queue(vdev, n);
1164     EventNotifier *notifier = virtio_queue_get_guest_notifier(vq);
1165     VirtioDeviceClass *k = VIRTIO_DEVICE_GET_CLASS(vdev);
1166
1167     if (assign) {
1168         int r = event_notifier_init(notifier, 0);
1169
1170         if (r < 0) {
1171             return r;
1172         }
1173         virtio_queue_set_guest_notifier_fd_handler(vq, true, with_irqfd);
1174         if (with_irqfd) {
1175             r = virtio_ccw_add_irqfd(dev, n);
1176             if (r) {
1177                 virtio_queue_set_guest_notifier_fd_handler(vq, false,
1178                                                            with_irqfd);
1179                 return r;
1180             }
1181         }
1182         /*
1183          * We do not support individual masking for channel devices, so we
1184          * need to manually trigger any guest masking callbacks here.
1185          */
1186         if (k->guest_notifier_mask && vdev->use_guest_notifier_mask) {
1187             k->guest_notifier_mask(vdev, n, false);
1188         }
1189         /* get lost events and re-inject */
1190         if (k->guest_notifier_pending &&
1191             k->guest_notifier_pending(vdev, n)) {
1192             event_notifier_set(notifier);
1193         }
1194     } else {
1195         if (k->guest_notifier_mask && vdev->use_guest_notifier_mask) {
1196             k->guest_notifier_mask(vdev, n, true);
1197         }
1198         if (with_irqfd) {
1199             virtio_ccw_remove_irqfd(dev, n);
1200         }
1201         virtio_queue_set_guest_notifier_fd_handler(vq, false, with_irqfd);
1202         event_notifier_cleanup(notifier);
1203     }
1204     return 0;
1205 }
1206
1207 static int virtio_ccw_set_guest_notifiers(DeviceState *d, int nvqs,
1208                                           bool assigned)
1209 {
1210     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1211     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1212     CcwDevice *ccw_dev = CCW_DEVICE(d);
1213     bool with_irqfd = ccw_dev->sch->thinint_active && kvm_irqfds_enabled();
1214     int r, n;
1215
1216     if (with_irqfd && assigned) {
1217         /* irq routes need to be set up before assigning irqfds */
1218         r = virtio_ccw_setup_irqroutes(dev, nvqs);
1219         if (r < 0) {
1220             goto irqroute_error;
1221         }
1222     }
1223     for (n = 0; n < nvqs; n++) {
1224         if (!virtio_queue_get_num(vdev, n)) {
1225             break;
1226         }
1227         r = virtio_ccw_set_guest_notifier(dev, n, assigned, with_irqfd);
1228         if (r < 0) {
1229             goto assign_error;
1230         }
1231     }
1232     if (with_irqfd && !assigned) {
1233         /* release irq routes after irqfds have been released */
1234         virtio_ccw_release_irqroutes(dev, nvqs);
1235     }
1236     return 0;
1237
1238 assign_error:
1239     while (--n >= 0) {
1240         virtio_ccw_set_guest_notifier(dev, n, !assigned, false);
1241     }
1242 irqroute_error:
1243     if (with_irqfd && assigned) {
1244         virtio_ccw_release_irqroutes(dev, nvqs);
1245     }
1246     return r;
1247 }
1248
1249 static void virtio_ccw_save_queue(DeviceState *d, int n, QEMUFile *f)
1250 {
1251     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1252     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1253
1254     qemu_put_be16(f, virtio_queue_vector(vdev, n));
1255 }
1256
1257 static int virtio_ccw_load_queue(DeviceState *d, int n, QEMUFile *f)
1258 {
1259     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1260     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1261     uint16_t vector;
1262
1263     qemu_get_be16s(f, &vector);
1264     virtio_queue_set_vector(vdev, n , vector);
1265
1266     return 0;
1267 }
1268
1269 static void virtio_ccw_save_config(DeviceState *d, QEMUFile *f)
1270 {
1271     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1272     vmstate_save_state(f, &vmstate_virtio_ccw_dev, dev, NULL);
1273 }
1274
1275 static int virtio_ccw_load_config(DeviceState *d, QEMUFile *f)
1276 {
1277     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1278     return vmstate_load_state(f, &vmstate_virtio_ccw_dev, dev, 1);
1279 }
1280
1281 static void virtio_ccw_pre_plugged(DeviceState *d, Error **errp)
1282 {
1283    VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1284    VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1285
1286     if (dev->max_rev >= 1) {
1287         virtio_add_feature(&vdev->host_features, VIRTIO_F_VERSION_1);
1288     }
1289 }
1290
1291 /* This is called by virtio-bus just after the device is plugged. */
1292 static void virtio_ccw_device_plugged(DeviceState *d, Error **errp)
1293 {
1294     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1295     VirtIODevice *vdev = virtio_bus_get_device(&dev->bus);
1296     CcwDevice *ccw_dev = CCW_DEVICE(d);
1297     SubchDev *sch = ccw_dev->sch;
1298     int n = virtio_get_num_queues(vdev);
1299     S390FLICState *flic = s390_get_flic();
1300
1301     if (!virtio_has_feature(vdev->host_features, VIRTIO_F_VERSION_1)) {
1302         dev->max_rev = 0;
1303     }
1304
1305     if (virtio_get_num_queues(vdev) > VIRTIO_QUEUE_MAX) {
1306         error_setg(errp, "The number of virtqueues %d "
1307                    "exceeds virtio limit %d", n,
1308                    VIRTIO_QUEUE_MAX);
1309         return;
1310     }
1311     if (virtio_get_num_queues(vdev) > flic->adapter_routes_max_batch) {
1312         error_setg(errp, "The number of virtqueues %d "
1313                    "exceeds flic adapter route limit %d", n,
1314                    flic->adapter_routes_max_batch);
1315         return;
1316     }
1317
1318     sch->id.cu_model = virtio_bus_get_vdev_id(&dev->bus);
1319
1320
1321     css_generate_sch_crws(sch->cssid, sch->ssid, sch->schid,
1322                           d->hotplugged, 1);
1323 }
1324
1325 static void virtio_ccw_device_unplugged(DeviceState *d)
1326 {
1327     VirtioCcwDevice *dev = VIRTIO_CCW_DEVICE(d);
1328
1329     virtio_ccw_stop_ioeventfd(dev);
1330 }
1331 /**************** Virtio-ccw Bus Device Descriptions *******************/
1332
1333 static Property virtio_ccw_net_properties[] = {
1334     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1335                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1336     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1337                        VIRTIO_CCW_MAX_REV),
1338     DEFINE_PROP_END_OF_LIST(),
1339 };
1340
1341 static void virtio_ccw_net_class_init(ObjectClass *klass, void *data)
1342 {
1343     DeviceClass *dc = DEVICE_CLASS(klass);
1344     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1345
1346     k->realize = virtio_ccw_net_realize;
1347     k->unrealize = virtio_ccw_unrealize;
1348     dc->props = virtio_ccw_net_properties;
1349     set_bit(DEVICE_CATEGORY_NETWORK, dc->categories);
1350 }
1351
1352 static const TypeInfo virtio_ccw_net = {
1353     .name          = TYPE_VIRTIO_NET_CCW,
1354     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1355     .instance_size = sizeof(VirtIONetCcw),
1356     .instance_init = virtio_ccw_net_instance_init,
1357     .class_init    = virtio_ccw_net_class_init,
1358 };
1359
1360 static Property virtio_ccw_blk_properties[] = {
1361     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1362                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1363     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1364                        VIRTIO_CCW_MAX_REV),
1365     DEFINE_PROP_END_OF_LIST(),
1366 };
1367
1368 static void virtio_ccw_blk_class_init(ObjectClass *klass, void *data)
1369 {
1370     DeviceClass *dc = DEVICE_CLASS(klass);
1371     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1372
1373     k->realize = virtio_ccw_blk_realize;
1374     k->unrealize = virtio_ccw_unrealize;
1375     dc->props = virtio_ccw_blk_properties;
1376     set_bit(DEVICE_CATEGORY_STORAGE, dc->categories);
1377 }
1378
1379 static const TypeInfo virtio_ccw_blk = {
1380     .name          = TYPE_VIRTIO_BLK_CCW,
1381     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1382     .instance_size = sizeof(VirtIOBlkCcw),
1383     .instance_init = virtio_ccw_blk_instance_init,
1384     .class_init    = virtio_ccw_blk_class_init,
1385 };
1386
1387 static Property virtio_ccw_serial_properties[] = {
1388     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1389                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1390     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1391                        VIRTIO_CCW_MAX_REV),
1392     DEFINE_PROP_END_OF_LIST(),
1393 };
1394
1395 static void virtio_ccw_serial_class_init(ObjectClass *klass, void *data)
1396 {
1397     DeviceClass *dc = DEVICE_CLASS(klass);
1398     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1399
1400     k->realize = virtio_ccw_serial_realize;
1401     k->unrealize = virtio_ccw_unrealize;
1402     dc->props = virtio_ccw_serial_properties;
1403     set_bit(DEVICE_CATEGORY_INPUT, dc->categories);
1404 }
1405
1406 static const TypeInfo virtio_ccw_serial = {
1407     .name          = TYPE_VIRTIO_SERIAL_CCW,
1408     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1409     .instance_size = sizeof(VirtioSerialCcw),
1410     .instance_init = virtio_ccw_serial_instance_init,
1411     .class_init    = virtio_ccw_serial_class_init,
1412 };
1413
1414 static Property virtio_ccw_balloon_properties[] = {
1415     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1416                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1417     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1418                        VIRTIO_CCW_MAX_REV),
1419     DEFINE_PROP_END_OF_LIST(),
1420 };
1421
1422 static void virtio_ccw_balloon_class_init(ObjectClass *klass, void *data)
1423 {
1424     DeviceClass *dc = DEVICE_CLASS(klass);
1425     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1426
1427     k->realize = virtio_ccw_balloon_realize;
1428     k->unrealize = virtio_ccw_unrealize;
1429     dc->props = virtio_ccw_balloon_properties;
1430     set_bit(DEVICE_CATEGORY_MISC, dc->categories);
1431 }
1432
1433 static const TypeInfo virtio_ccw_balloon = {
1434     .name          = TYPE_VIRTIO_BALLOON_CCW,
1435     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1436     .instance_size = sizeof(VirtIOBalloonCcw),
1437     .instance_init = virtio_ccw_balloon_instance_init,
1438     .class_init    = virtio_ccw_balloon_class_init,
1439 };
1440
1441 static Property virtio_ccw_scsi_properties[] = {
1442     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1443                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1444     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1445                        VIRTIO_CCW_MAX_REV),
1446     DEFINE_PROP_END_OF_LIST(),
1447 };
1448
1449 static void virtio_ccw_scsi_class_init(ObjectClass *klass, void *data)
1450 {
1451     DeviceClass *dc = DEVICE_CLASS(klass);
1452     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1453
1454     k->realize = virtio_ccw_scsi_realize;
1455     k->unrealize = virtio_ccw_unrealize;
1456     dc->props = virtio_ccw_scsi_properties;
1457     set_bit(DEVICE_CATEGORY_STORAGE, dc->categories);
1458 }
1459
1460 static const TypeInfo virtio_ccw_scsi = {
1461     .name          = TYPE_VIRTIO_SCSI_CCW,
1462     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1463     .instance_size = sizeof(VirtIOSCSICcw),
1464     .instance_init = virtio_ccw_scsi_instance_init,
1465     .class_init    = virtio_ccw_scsi_class_init,
1466 };
1467
1468 #ifdef CONFIG_VHOST_SCSI
1469 static Property vhost_ccw_scsi_properties[] = {
1470     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1471                        VIRTIO_CCW_MAX_REV),
1472     DEFINE_PROP_END_OF_LIST(),
1473 };
1474
1475 static void vhost_ccw_scsi_class_init(ObjectClass *klass, void *data)
1476 {
1477     DeviceClass *dc = DEVICE_CLASS(klass);
1478     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1479
1480     k->realize = vhost_ccw_scsi_realize;
1481     k->unrealize = virtio_ccw_unrealize;
1482     dc->props = vhost_ccw_scsi_properties;
1483     set_bit(DEVICE_CATEGORY_STORAGE, dc->categories);
1484 }
1485
1486 static const TypeInfo vhost_ccw_scsi = {
1487     .name          = TYPE_VHOST_SCSI_CCW,
1488     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1489     .instance_size = sizeof(VHostSCSICcw),
1490     .instance_init = vhost_ccw_scsi_instance_init,
1491     .class_init    = vhost_ccw_scsi_class_init,
1492 };
1493 #endif
1494
1495 static void virtio_ccw_rng_instance_init(Object *obj)
1496 {
1497     VirtIORNGCcw *dev = VIRTIO_RNG_CCW(obj);
1498
1499     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1500                                 TYPE_VIRTIO_RNG);
1501 }
1502
1503 static Property virtio_ccw_rng_properties[] = {
1504     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1505                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1506     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1507                        VIRTIO_CCW_MAX_REV),
1508     DEFINE_PROP_END_OF_LIST(),
1509 };
1510
1511 static void virtio_ccw_rng_class_init(ObjectClass *klass, void *data)
1512 {
1513     DeviceClass *dc = DEVICE_CLASS(klass);
1514     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1515
1516     k->realize = virtio_ccw_rng_realize;
1517     k->unrealize = virtio_ccw_unrealize;
1518     dc->props = virtio_ccw_rng_properties;
1519     set_bit(DEVICE_CATEGORY_MISC, dc->categories);
1520 }
1521
1522 static const TypeInfo virtio_ccw_rng = {
1523     .name          = TYPE_VIRTIO_RNG_CCW,
1524     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1525     .instance_size = sizeof(VirtIORNGCcw),
1526     .instance_init = virtio_ccw_rng_instance_init,
1527     .class_init    = virtio_ccw_rng_class_init,
1528 };
1529
1530 static Property virtio_ccw_crypto_properties[] = {
1531     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1532                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1533     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1534                        VIRTIO_CCW_MAX_REV),
1535     DEFINE_PROP_END_OF_LIST(),
1536 };
1537
1538 static void virtio_ccw_crypto_instance_init(Object *obj)
1539 {
1540     VirtIOCryptoCcw *dev = VIRTIO_CRYPTO_CCW(obj);
1541     VirtioCcwDevice *ccw_dev = VIRTIO_CCW_DEVICE(obj);
1542
1543     ccw_dev->force_revision_1 = true;
1544     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1545                                 TYPE_VIRTIO_CRYPTO);
1546 }
1547
1548 static void virtio_ccw_crypto_class_init(ObjectClass *klass, void *data)
1549 {
1550     DeviceClass *dc = DEVICE_CLASS(klass);
1551     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1552
1553     k->realize = virtio_ccw_crypto_realize;
1554     k->unrealize = virtio_ccw_unrealize;
1555     dc->props = virtio_ccw_crypto_properties;
1556     set_bit(DEVICE_CATEGORY_MISC, dc->categories);
1557 }
1558
1559 static const TypeInfo virtio_ccw_crypto = {
1560     .name          = TYPE_VIRTIO_CRYPTO_CCW,
1561     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1562     .instance_size = sizeof(VirtIOCryptoCcw),
1563     .instance_init = virtio_ccw_crypto_instance_init,
1564     .class_init    = virtio_ccw_crypto_class_init,
1565 };
1566
1567 static Property virtio_ccw_gpu_properties[] = {
1568     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1569                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1570     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1571                        VIRTIO_CCW_MAX_REV),
1572     DEFINE_PROP_END_OF_LIST(),
1573 };
1574
1575 static void virtio_ccw_gpu_instance_init(Object *obj)
1576 {
1577     VirtIOGPUCcw *dev = VIRTIO_GPU_CCW(obj);
1578     VirtioCcwDevice *ccw_dev = VIRTIO_CCW_DEVICE(obj);
1579
1580     ccw_dev->force_revision_1 = true;
1581     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1582                                 TYPE_VIRTIO_GPU);
1583 }
1584
1585 static void virtio_ccw_gpu_class_init(ObjectClass *klass, void *data)
1586 {
1587     DeviceClass *dc = DEVICE_CLASS(klass);
1588     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1589
1590     k->realize = virtio_ccw_gpu_realize;
1591     k->unrealize = virtio_ccw_unrealize;
1592     dc->props = virtio_ccw_gpu_properties;
1593     dc->hotpluggable = false;
1594     set_bit(DEVICE_CATEGORY_DISPLAY, dc->categories);
1595 }
1596
1597 static const TypeInfo virtio_ccw_gpu = {
1598     .name          = TYPE_VIRTIO_GPU_CCW,
1599     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1600     .instance_size = sizeof(VirtIOGPUCcw),
1601     .instance_init = virtio_ccw_gpu_instance_init,
1602     .class_init    = virtio_ccw_gpu_class_init,
1603 };
1604
1605 static Property virtio_ccw_input_properties[] = {
1606     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1607                     VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1608     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1609                        VIRTIO_CCW_MAX_REV),
1610     DEFINE_PROP_END_OF_LIST(),
1611 };
1612
1613 static void virtio_ccw_input_class_init(ObjectClass *klass, void *data)
1614 {
1615     DeviceClass *dc = DEVICE_CLASS(klass);
1616     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1617
1618     k->realize = virtio_ccw_input_realize;
1619     k->unrealize = virtio_ccw_unrealize;
1620     dc->props = virtio_ccw_input_properties;
1621     set_bit(DEVICE_CATEGORY_INPUT, dc->categories);
1622 }
1623
1624 static void virtio_ccw_keyboard_instance_init(Object *obj)
1625 {
1626     VirtIOInputHIDCcw *dev = VIRTIO_INPUT_HID_CCW(obj);
1627     VirtioCcwDevice *ccw_dev = VIRTIO_CCW_DEVICE(obj);
1628
1629     ccw_dev->force_revision_1 = true;
1630     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1631                                 TYPE_VIRTIO_KEYBOARD);
1632 }
1633
1634 static void virtio_ccw_mouse_instance_init(Object *obj)
1635 {
1636     VirtIOInputHIDCcw *dev = VIRTIO_INPUT_HID_CCW(obj);
1637     VirtioCcwDevice *ccw_dev = VIRTIO_CCW_DEVICE(obj);
1638
1639     ccw_dev->force_revision_1 = true;
1640     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1641                                 TYPE_VIRTIO_MOUSE);
1642 }
1643
1644 static void virtio_ccw_tablet_instance_init(Object *obj)
1645 {
1646     VirtIOInputHIDCcw *dev = VIRTIO_INPUT_HID_CCW(obj);
1647     VirtioCcwDevice *ccw_dev = VIRTIO_CCW_DEVICE(obj);
1648
1649     ccw_dev->force_revision_1 = true;
1650     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1651                                 TYPE_VIRTIO_TABLET);
1652 }
1653
1654 static const TypeInfo virtio_ccw_input = {
1655     .name          = TYPE_VIRTIO_INPUT_CCW,
1656     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1657     .instance_size = sizeof(VirtIOInputCcw),
1658     .class_init    = virtio_ccw_input_class_init,
1659     .abstract = true,
1660 };
1661
1662 static const TypeInfo virtio_ccw_input_hid = {
1663     .name          = TYPE_VIRTIO_INPUT_HID_CCW,
1664     .parent        = TYPE_VIRTIO_INPUT_CCW,
1665     .instance_size = sizeof(VirtIOInputHIDCcw),
1666     .abstract = true,
1667 };
1668
1669 static const TypeInfo virtio_ccw_keyboard = {
1670     .name          = TYPE_VIRTIO_KEYBOARD_CCW,
1671     .parent        = TYPE_VIRTIO_INPUT_HID_CCW,
1672     .instance_size = sizeof(VirtIOInputHIDCcw),
1673     .instance_init = virtio_ccw_keyboard_instance_init,
1674 };
1675
1676 static const TypeInfo virtio_ccw_mouse = {
1677     .name          = TYPE_VIRTIO_MOUSE_CCW,
1678     .parent        = TYPE_VIRTIO_INPUT_HID_CCW,
1679     .instance_size = sizeof(VirtIOInputHIDCcw),
1680     .instance_init = virtio_ccw_mouse_instance_init,
1681 };
1682
1683 static const TypeInfo virtio_ccw_tablet = {
1684     .name          = TYPE_VIRTIO_TABLET_CCW,
1685     .parent        = TYPE_VIRTIO_INPUT_HID_CCW,
1686     .instance_size = sizeof(VirtIOInputHIDCcw),
1687     .instance_init = virtio_ccw_tablet_instance_init,
1688 };
1689
1690 static void virtio_ccw_busdev_realize(DeviceState *dev, Error **errp)
1691 {
1692     VirtioCcwDevice *_dev = (VirtioCcwDevice *)dev;
1693
1694     virtio_ccw_bus_new(&_dev->bus, sizeof(_dev->bus), _dev);
1695     virtio_ccw_device_realize(_dev, errp);
1696 }
1697
1698 static void virtio_ccw_busdev_unrealize(DeviceState *dev, Error **errp)
1699 {
1700     VirtioCcwDevice *_dev = (VirtioCcwDevice *)dev;
1701     VirtIOCCWDeviceClass *_info = VIRTIO_CCW_DEVICE_GET_CLASS(dev);
1702
1703     _info->unrealize(_dev, errp);
1704 }
1705
1706 static void virtio_ccw_busdev_unplug(HotplugHandler *hotplug_dev,
1707                                      DeviceState *dev, Error **errp)
1708 {
1709     VirtioCcwDevice *_dev = to_virtio_ccw_dev_fast(dev);
1710
1711     virtio_ccw_stop_ioeventfd(_dev);
1712 }
1713
1714 static void virtio_ccw_device_class_init(ObjectClass *klass, void *data)
1715 {
1716     DeviceClass *dc = DEVICE_CLASS(klass);
1717     CCWDeviceClass *k = CCW_DEVICE_CLASS(dc);
1718     VirtIOCCWDeviceClass *vdc = VIRTIO_CCW_DEVICE_CLASS(klass);
1719
1720     k->unplug = virtio_ccw_busdev_unplug;
1721     dc->realize = virtio_ccw_busdev_realize;
1722     dc->unrealize = virtio_ccw_busdev_unrealize;
1723     dc->bus_type = TYPE_VIRTUAL_CSS_BUS;
1724     device_class_set_parent_reset(dc, virtio_ccw_reset, &vdc->parent_reset);
1725 }
1726
1727 static const TypeInfo virtio_ccw_device_info = {
1728     .name = TYPE_VIRTIO_CCW_DEVICE,
1729     .parent = TYPE_CCW_DEVICE,
1730     .instance_size = sizeof(VirtioCcwDevice),
1731     .class_init = virtio_ccw_device_class_init,
1732     .class_size = sizeof(VirtIOCCWDeviceClass),
1733     .abstract = true,
1734 };
1735
1736 /* virtio-ccw-bus */
1737
1738 static void virtio_ccw_bus_new(VirtioBusState *bus, size_t bus_size,
1739                                VirtioCcwDevice *dev)
1740 {
1741     DeviceState *qdev = DEVICE(dev);
1742     char virtio_bus_name[] = "virtio-bus";
1743
1744     qbus_create_inplace(bus, bus_size, TYPE_VIRTIO_CCW_BUS,
1745                         qdev, virtio_bus_name);
1746 }
1747
1748 static void virtio_ccw_bus_class_init(ObjectClass *klass, void *data)
1749 {
1750     VirtioBusClass *k = VIRTIO_BUS_CLASS(klass);
1751     BusClass *bus_class = BUS_CLASS(klass);
1752
1753     bus_class->max_dev = 1;
1754     k->notify = virtio_ccw_notify;
1755     k->vmstate_change = virtio_ccw_vmstate_change;
1756     k->query_guest_notifiers = virtio_ccw_query_guest_notifiers;
1757     k->set_guest_notifiers = virtio_ccw_set_guest_notifiers;
1758     k->save_queue = virtio_ccw_save_queue;
1759     k->load_queue = virtio_ccw_load_queue;
1760     k->save_config = virtio_ccw_save_config;
1761     k->load_config = virtio_ccw_load_config;
1762     k->pre_plugged = virtio_ccw_pre_plugged;
1763     k->device_plugged = virtio_ccw_device_plugged;
1764     k->device_unplugged = virtio_ccw_device_unplugged;
1765     k->ioeventfd_enabled = virtio_ccw_ioeventfd_enabled;
1766     k->ioeventfd_assign = virtio_ccw_ioeventfd_assign;
1767 }
1768
1769 static const TypeInfo virtio_ccw_bus_info = {
1770     .name = TYPE_VIRTIO_CCW_BUS,
1771     .parent = TYPE_VIRTIO_BUS,
1772     .instance_size = sizeof(VirtioCcwBusState),
1773     .class_init = virtio_ccw_bus_class_init,
1774 };
1775
1776 #ifdef CONFIG_VIRTFS
1777 static Property virtio_ccw_9p_properties[] = {
1778     DEFINE_PROP_BIT("ioeventfd", VirtioCcwDevice, flags,
1779             VIRTIO_CCW_FLAG_USE_IOEVENTFD_BIT, true),
1780     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1781                        VIRTIO_CCW_MAX_REV),
1782     DEFINE_PROP_END_OF_LIST(),
1783 };
1784
1785 static void virtio_ccw_9p_realize(VirtioCcwDevice *ccw_dev, Error **errp)
1786 {
1787     V9fsCCWState *dev = VIRTIO_9P_CCW(ccw_dev);
1788     DeviceState *vdev = DEVICE(&dev->vdev);
1789
1790     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
1791     object_property_set_bool(OBJECT(vdev), true, "realized", errp);
1792 }
1793
1794 static void virtio_ccw_9p_class_init(ObjectClass *klass, void *data)
1795 {
1796     DeviceClass *dc = DEVICE_CLASS(klass);
1797     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1798
1799     k->unrealize = virtio_ccw_unrealize;
1800     k->realize = virtio_ccw_9p_realize;
1801     dc->props = virtio_ccw_9p_properties;
1802     set_bit(DEVICE_CATEGORY_STORAGE, dc->categories);
1803 }
1804
1805 static void virtio_ccw_9p_instance_init(Object *obj)
1806 {
1807     V9fsCCWState *dev = VIRTIO_9P_CCW(obj);
1808
1809     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1810                                 TYPE_VIRTIO_9P);
1811 }
1812
1813 static const TypeInfo virtio_ccw_9p_info = {
1814     .name          = TYPE_VIRTIO_9P_CCW,
1815     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1816     .instance_size = sizeof(V9fsCCWState),
1817     .instance_init = virtio_ccw_9p_instance_init,
1818     .class_init    = virtio_ccw_9p_class_init,
1819 };
1820 #endif
1821
1822 #ifdef CONFIG_VHOST_VSOCK
1823
1824 static Property vhost_vsock_ccw_properties[] = {
1825     DEFINE_PROP_UINT32("max_revision", VirtioCcwDevice, max_rev,
1826                        VIRTIO_CCW_MAX_REV),
1827     DEFINE_PROP_END_OF_LIST(),
1828 };
1829
1830 static void vhost_vsock_ccw_realize(VirtioCcwDevice *ccw_dev, Error **errp)
1831 {
1832     VHostVSockCCWState *dev = VHOST_VSOCK_CCW(ccw_dev);
1833     DeviceState *vdev = DEVICE(&dev->vdev);
1834     Error *err = NULL;
1835
1836     qdev_set_parent_bus(vdev, BUS(&ccw_dev->bus));
1837     object_property_set_bool(OBJECT(vdev), true, "realized", &err);
1838     error_propagate(errp, err);
1839 }
1840
1841 static void vhost_vsock_ccw_class_init(ObjectClass *klass, void *data)
1842 {
1843     DeviceClass *dc = DEVICE_CLASS(klass);
1844     VirtIOCCWDeviceClass *k = VIRTIO_CCW_DEVICE_CLASS(klass);
1845
1846     k->realize = vhost_vsock_ccw_realize;
1847     k->unrealize = virtio_ccw_unrealize;
1848     set_bit(DEVICE_CATEGORY_MISC, dc->categories);
1849     dc->props = vhost_vsock_ccw_properties;
1850 }
1851
1852 static void vhost_vsock_ccw_instance_init(Object *obj)
1853 {
1854     VHostVSockCCWState *dev = VHOST_VSOCK_CCW(obj);
1855
1856     virtio_instance_init_common(obj, &dev->vdev, sizeof(dev->vdev),
1857                                 TYPE_VHOST_VSOCK);
1858 }
1859
1860 static const TypeInfo vhost_vsock_ccw_info = {
1861     .name          = TYPE_VHOST_VSOCK_CCW,
1862     .parent        = TYPE_VIRTIO_CCW_DEVICE,
1863     .instance_size = sizeof(VHostVSockCCWState),
1864     .instance_init = vhost_vsock_ccw_instance_init,
1865     .class_init    = vhost_vsock_ccw_class_init,
1866 };
1867 #endif
1868
1869 static void virtio_ccw_register(void)
1870 {
1871     type_register_static(&virtio_ccw_bus_info);
1872     type_register_static(&virtio_ccw_device_info);
1873     type_register_static(&virtio_ccw_serial);
1874     type_register_static(&virtio_ccw_blk);
1875     type_register_static(&virtio_ccw_net);
1876     type_register_static(&virtio_ccw_balloon);
1877     type_register_static(&virtio_ccw_scsi);
1878 #ifdef CONFIG_VHOST_SCSI
1879     type_register_static(&vhost_ccw_scsi);
1880 #endif
1881     type_register_static(&virtio_ccw_rng);
1882 #ifdef CONFIG_VIRTFS
1883     type_register_static(&virtio_ccw_9p_info);
1884 #endif
1885 #ifdef CONFIG_VHOST_VSOCK
1886     type_register_static(&vhost_vsock_ccw_info);
1887 #endif
1888     type_register_static(&virtio_ccw_crypto);
1889     type_register_static(&virtio_ccw_gpu);
1890     type_register_static(&virtio_ccw_input);
1891     type_register_static(&virtio_ccw_input_hid);
1892     type_register_static(&virtio_ccw_keyboard);
1893     type_register_static(&virtio_ccw_mouse);
1894     type_register_static(&virtio_ccw_tablet);
1895 }
1896
1897 type_init(virtio_ccw_register)