March 2021 - Virt - mailweb.openeuler.org

StratoVirt增加balloon测试用例
by Xufei (VF) 30 Mar '21

30 Mar '21

1 0

StratoVirt2020暑期开源软件宣讲材料PPT
by Xufei (VF) 26 Mar '21

26 Mar '21

1 0

StratoVirt的rust magazine宣传材料
by Xufei (VF) 26 Mar '21

26 Mar '21

1 0

virt sig例会0326
by Liyiting 25 Mar '21

25 Mar '21

发件人: openEuler conference [mailto:public@openeuler.io] 发送时间: 2021年3月25日 14:59 收件人: Liyiting <liyiting(a)huawei.com> 主题: virt sig例会0326 您好！ openEuler Virt SIG 邀请您参加 2021-03-26 14:00 召开的ZOOM会议(自动录制) 会议主题：virt sig例会0326 会议内容：版本开发与验证进展/qemu热补丁/stratovirt 21.03演示/ovmf讨论会议链接：https://zoom.us/j/96702053645?pwd=cGxwVGIzUEZINlBUeGUya2M1NEJLUT09 温馨提醒：建议接入会议后修改参会人的姓名，也可以使用您在gitee.com的ID 更多资讯尽在：https://openeuler.org/zh/ Hello! openEuler Virt SIG invites you to attend the ZOOM conference(auto recording) will be held at 2021-03-26 14:00, The subject of the conference is virt sig例会0326, Summary: 版本开发与验证进展/qemu热补丁/stratovirt 21.03演示/ovmf讨论 You can join the meeting at https://zoom.us/j/96702053645?pwd=cGxwVGIzUEZINlBUeGUya2M1NEJLUT09. Note: You are advised to change the participant name after joining the conference or use your ID at gitee.com. More information<https://openeuler.org/zh/>

1 0

StratoVirt k8s使用StratoVirt安全容器
by Xufei (VF) 24 Mar '21

24 Mar '21

1 0

StratoVirt 21.03新增特性设计文档
by Xufei (VF) 20 Mar '21

20 Mar '21

1 0

StratoVirt 增加iothread和qos相关用例
by Xufei (VF) 20 Mar '21

20 Mar '21

1 0

[PATCH] block: Add sanity check when setting retry parameters
by Jiahui Cen 18 Mar '21

18 Mar '21

Add sanity check when setting retry parameters to avoid invalid retry configuration. Signed-off-by: Jiahui Cen <cenjiahui(a)huawei.com> --- hw/core/qdev-properties.c | 45 ++++++++++++++++++++++++++++++++++++ include/hw/block/block.h | 7 +++--- include/hw/qdev-properties.h | 8 +++++++ 3 files changed, 57 insertions(+), 3 deletions(-) diff --git a/hw/core/qdev-properties.c b/hw/core/qdev-properties.c index 709f9e0f9d..2601091f8f 100644 --- a/hw/core/qdev-properties.c +++ b/hw/core/qdev-properties.c @@ -628,6 +628,51 @@ const PropertyInfo qdev_prop_blockdev_on_error = { .set_default_value = set_default_value_enum, }; +static void set_retry_time(Object *obj, Visitor *v, const char *name, + void *opaque, Error **errp) +{ + DeviceState *dev = DEVICE(obj); + Property *prop = opaque; + int64_t value, *ptr = qdev_get_prop_ptr(dev, prop); + Error *local_err = NULL; + + if (dev->realized) { + qdev_prop_set_after_realize(dev, name, errp); + return; + } + + visit_type_int64(v, name, &value, &local_err); + if (local_err) { + error_propagate(errp, local_err); + return; + } + + /* value should not be negative */ + if (value < 0) { + error_setg(errp, QERR_PROPERTY_VALUE_OUT_OF_RANGE, + dev->id ? : "", name, (int64_t)value, 0L, LONG_MAX); + return; + } + + *ptr = value; +} + +const PropertyInfo qdev_prop_blockdev_retry_interval = { + .name = "BlockdevRetryInterval", + .description = "Interval for retry error handling policy", + .get = get_int64, + .set = set_retry_time, + .set_default_value = set_default_value_int, +}; + +const PropertyInfo qdev_prop_blockdev_retry_timeout = { + .name = "BlockdevRetryTimeout", + .description = "Timeout for retry error handling policy", + .get = get_int64, + .set = set_retry_time, + .set_default_value = set_default_value_int, +}; + /* --- BIOS CHS translation */ QEMU_BUILD_BUG_ON(sizeof(BiosAtaTranslation) != sizeof(int)); diff --git a/include/hw/block/block.h b/include/hw/block/block.h index d12603aabd..c5276fec0d 100644 --- a/include/hw/block/block.h +++ b/include/hw/block/block.h @@ -74,9 +74,10 @@ static inline unsigned int get_physical_block_exp(BlockConf *conf) BLOCKDEV_ON_ERROR_AUTO), \ DEFINE_PROP_BLOCKDEV_ON_ERROR("werror", _state, _conf.werror, \ BLOCKDEV_ON_ERROR_AUTO), \ - DEFINE_PROP_INT64("retry_interval", _state, _conf.retry_interval, \ - -1), \ - DEFINE_PROP_INT64("retry_timeout", _state, _conf.retry_timeout, -1) + DEFINE_PROP_BLOCKDEV_RETRY_INTERVAL("retry_interval", _state, \ + _conf.retry_interval, 1000), \ + DEFINE_PROP_BLOCKDEV_RETRY_TIMEOUT("retry_timeout", _state, \ + _conf.retry_timeout, 0) /* Backend access helpers */ diff --git a/include/hw/qdev-properties.h b/include/hw/qdev-properties.h index a22a532eb8..d7742be3bc 100644 --- a/include/hw/qdev-properties.h +++ b/include/hw/qdev-properties.h @@ -26,6 +26,8 @@ extern const PropertyInfo qdev_prop_on_off_auto; extern const PropertyInfo qdev_prop_compress_method; extern const PropertyInfo qdev_prop_losttickpolicy; extern const PropertyInfo qdev_prop_blockdev_on_error; +extern const PropertyInfo qdev_prop_blockdev_retry_interval; +extern const PropertyInfo qdev_prop_blockdev_retry_timeout; extern const PropertyInfo qdev_prop_bios_chs_trans; extern const PropertyInfo qdev_prop_fdc_drive_type; extern const PropertyInfo qdev_prop_drive; @@ -215,6 +217,12 @@ extern const PropertyInfo qdev_prop_pcie_link_width; #define DEFINE_PROP_BLOCKDEV_ON_ERROR(_n, _s, _f, _d) \ DEFINE_PROP_SIGNED(_n, _s, _f, _d, qdev_prop_blockdev_on_error, \ BlockdevOnError) +#define DEFINE_PROP_BLOCKDEV_RETRY_INTERVAL(_n, _s, _f, _d) \ + DEFINE_PROP_SIGNED(_n, _s, _f, _d, qdev_prop_blockdev_retry_interval, \ + int64_t) +#define DEFINE_PROP_BLOCKDEV_RETRY_TIMEOUT(_n, _s, _f, _d) \ + DEFINE_PROP_SIGNED(_n, _s, _f, _d, qdev_prop_blockdev_retry_timeout, \ + int64_t) #define DEFINE_PROP_BIOS_CHS_TRANS(_n, _s, _f, _d) \ DEFINE_PROP_SIGNED(_n, _s, _f, _d, qdev_prop_bios_chs_trans, int) #define DEFINE_PROP_BLOCKSIZE(_n, _s, _f) \ -- 2.28.0

1 0

[PATCH 1/1] libvirt/conf: Set default values of retry fileds
by Jiahui Cen 18 Mar '21

18 Mar '21

Currently the default values of retry_interval and retry_timeout are set to -1, when 'driver' option exists without retry fileds. It conflicts when the 'driver' option does exist. So let's set default values of retry_interval and retry_timeout to 0 when retry policy is not enabled. Signed-off-by: Jiahui Cen <cenjiahui(a)huawei.com> --- src/conf/domain_conf.c | 18 ++++++++++++------ src/conf/domain_conf.h | 3 +++ 2 files changed, 15 insertions(+), 6 deletions(-) diff --git a/src/conf/domain_conf.c b/src/conf/domain_conf.c index 5c469cedd0..a4e9b3290c 100644 --- a/src/conf/domain_conf.c +++ b/src/conf/domain_conf.c @@ -10186,6 +10186,7 @@ virDomainDiskDefDriverParseXML(virDomainDiskDefPtr def, xmlNodePtr cur) { g_autofree char *tmp = NULL; + bool retry_enabled = false; def->driverName = virXMLPropString(cur, "name"); @@ -10214,28 +10215,33 @@ virDomainDiskDefDriverParseXML(virDomainDiskDefPtr def, } VIR_FREE(tmp); - def->retry_interval = -1; + retry_enabled = (def->error_policy == VIR_DOMAIN_DISK_ERROR_POLICY_RETRY) || + (def->rerror_policy == VIR_DOMAIN_DISK_ERROR_POLICY_RETRY); + if ((tmp = virXMLPropString(cur, "retry_interval")) && - ((def->error_policy != VIR_DOMAIN_DISK_ERROR_POLICY_RETRY && - def->rerror_policy != VIR_DOMAIN_DISK_ERROR_POLICY_RETRY) || + (!retry_enabled || (virStrToLong_l(tmp, NULL, 10, &def->retry_interval) < 0) || (def->retry_interval < 0))) { virReportError(VIR_ERR_CONFIG_UNSUPPORTED, _("unknown disk retry interval '%s'"), tmp); return -1; } + if (retry_enabled && !tmp) { + def->retry_interval = VIR_DOMAIN_DISK_DEFAULT_RETRY_INTERVAL; + } VIR_FREE(tmp); - def->retry_timeout = -1; if ((tmp = virXMLPropString(cur, "retry_timeout")) && - ((def->error_policy != VIR_DOMAIN_DISK_ERROR_POLICY_RETRY && - def->rerror_policy != VIR_DOMAIN_DISK_ERROR_POLICY_RETRY) || + (!retry_enabled || (virStrToLong_l(tmp, NULL, 10, &def->retry_timeout) < 0) || (def->retry_timeout < 0))) { virReportError(VIR_ERR_CONFIG_UNSUPPORTED, _("unknown disk retry interval '%s'"), tmp); return -1; } + if (retry_enabled && !tmp) { + def->retry_timeout = VIR_DOMAIN_DISK_DEFAULT_RETRY_TIMEOUT; + } VIR_FREE(tmp); if ((tmp = virXMLPropString(cur, "io")) && diff --git a/src/conf/domain_conf.h b/src/conf/domain_conf.h index 86a86d3090..ccee986849 100644 --- a/src/conf/domain_conf.h +++ b/src/conf/domain_conf.h @@ -523,6 +523,9 @@ typedef enum { } virDomainMemoryAllocation; +#define VIR_DOMAIN_DISK_DEFAULT_RETRY_INTERVAL 1000 +#define VIR_DOMAIN_DISK_DEFAULT_RETRY_TIMEOUT 0 + /* Stores the virtual disk configuration */ struct _virDomainDiskDef { virStorageSourcePtr src; /* non-NULL. XXX Allow NULL for empty cdrom? */ -- 2.29.2

1 0

【2021-03-12】openEuler Virt SIG 例会纪要(初稿)，请审核，有问题可以直接反馈
by Liyiting 17 Mar '21

17 Mar '21

2021-03-12会议纪要： 1、openEuler特性开发与测试进展：开发进展：热迁移脏页频率统计：资料已补齐，特性测试中。热迁移tls支持multifd：资料已补齐，测试验证中。热迁移支持多线程压缩：特性测试中，libvirt侧接口代码尚未开发合入。vmtop支持x86：资料已完成，测试验证中。QEMU支持qemu-rbd和qemu-ssh特性。IO悬挂特性，特性资料已经补齐，正在测试验证当中。RSIC-V支持热迁移，相关代码已经合入RSIC0 测试进展：21.03 版本功能测试结束，无问题遗留；当前正在进行性能与稳定性测试； 2、StratoVirt轻量级虚拟化演示与分享 3、虚拟化qemu软件包拆包需求：当前qemu按照spec方式编译时使能--enable-module编译参数，支持qemu编译的so动态库封装为qemu-XXX的子包，有拆包的情况出现(原qemu RPM拆成qemu RPM + qemu-block-ssh qemu-block-rbd包支持openstack集成)，但是通过测试框架评估qemu-block-iscsi能力丢失，后续有spec拆包的情况，需要保持qemu功能一致性，升级场景需要支持qemu能力不裁剪，在spec中增加post run字段支持升级场景不出问题，可参考 https://gitee.com/src-openeuler/qemu/commit/f4801a5af63e96c5c728b30b36a14fa… 4、Virt SIG issue提交模板讨论：参考openEuler社区缺陷与CVE模板(当前已经应用)，需求的模板待与社区沟通 5、增补ranygu成为virt SIG的maintainer，帮助virt sig共同制定演进规划

1 0

openEuler Virt SIG 例会 2021年3月12日周五 14:00~16:00
by Liyiting 09 Mar '21

09 Mar '21

* 2021-03-12议题收集(以下是当前申报议题)，可以直接回复邮件给我： o 1、openEuler 特性开发与测试进展： o 2、openEuler 21.03 版本 stratoVirt 轻量级虚拟化演示与分享 o 3、openEuler社区虚拟化组件spec文件对比策略讨论 o 4、Virt SIG issue提交模板讨论会议纪要：https://etherpad.openeuler.org/p/Virt-meetings ZOOM 会议ID：91572838806 会议链接：https://zoom.us/j/91572838806?pwd=Y3VPQkZnRGJ4ajNZTkw5L3ZpMU5oQT09

1 0

Fwd: Backport tls migration patch
by zhengchuan 06 Mar '21

06 Mar '21

1 0

Fwd: 热迁移对外材料修改
by zhengchuan 04 Mar '21

04 Mar '21

[Virt] Fwd: 热迁移对外材料修改

1 0

Fwd: rbd对外材料修改
by Ying Fang 04 Mar '21

04 Mar '21

rbd对外材料修改，见附件内容。 -------- Forwarded Message -------- Subject: rbd对外材料修改 Date: Thu, 4 Mar 2021 21:14:58 +0800 From: yangming (C) <yangming73(a)huawei.com> To: fangying <fangying1(a)huawei.com> 1520509639(a)qq.com

1 0

[PATCH 1/1] Virtualization: Add doc for IO Hang
by Jiahui Cen 04 Mar '21

04 Mar '21

Qemu and Libvirt are now support IO Hang feature, so let's update docs for the new feature. Signed-off-by: Jiahui Cen <cenjiahui(a)huawei.com> --- ...37\346\234\272\351\205\215\347\275\256.md" | 4 + ...\347\233\230IO\346\202\254\346\214\202.md" | 93 +++++++++++++++++++ 2 files changed, 97 insertions(+) create mode 100644 "docs/zh/docs/Virtualization/\351\205\215\347\275\256\347\243\201\347\233\230IO\346\202\254\346\214\202.md" diff --git "a/docs/zh/docs/Virtualization/\350\231\232\346\213\237\346\234\272\351\205\215\347\275\256.md" "b/docs/zh/docs/Virtualization/\350\231\232\346\213\237\346\234\272\351\205\215\347\275\256.md" index 551a3d18..1401fe74 100644 --- "a/docs/zh/docs/Virtualization/\350\231\232\346\213\237\346\234\272\351\205\215\347\275\256.md" +++ "b/docs/zh/docs/Virtualization/\350\231\232\346\213\237\346\234\272\351\205\215\347\275\256.md" @@ -235,6 +235,10 @@ XML配置文件使用disk元素配置存储设备，disk常见的属性如[表1] <a name="p17729162795"></a><a name="p17729162795"></a>io：磁盘IO模式，支持“native”和“threads”选项。 <a name="p14680718191016"></a><a name="p14680718191016"></a>cache：磁盘的cache模式，可选项有“none”、“writethrough”、“writeback”、“directsync”等。 <a name="p17896143411122"></a><a name="p17896143411122"></a>iothread：指定为磁盘分配的IO线程。 +<a name="p17896143412331"></a><a name="p17896143412331"></a>error_policy：IO写错误发生时的处理策略，可选项有“stop”、“report”、“ignore”、“enospace"、"retry"等。 +<a name="p17896143412332"></a><a name="p17896143412332"></a>rerror_policy：IO读错误发生时的处理策略，可选项有“stop”、“report”、“ignore”、“enospac”、“retry"等。 +<a name="p17896143412333"></a><a name="p17896143412333"></a>retry_interval：IO错误重试间隔，范围为0-MAX_INT，单位为毫秒，仅error_policy=“retry”或rerror_policy=“retry”时可配置。 +<a name="p17896143412334"></a><a name="p17896143412334"></a>retry_timeout：IO错误重试超时时间，范围为0-MAX_INT，单位为毫秒，仅error_policy=“retry”或rerror_policy=“retry”时可配置。 </td> </tr> <tr id="row08679492515"><td class="cellrowborder" valign="top" width="13.3%" headers="mcps1.2.4.1.1 "><a name="p188671349195119"></a><a name="p188671349195119"></a>target diff --git "a/docs/zh/docs/Virtualization/\351\205\215\347\275\256\347\243\201\347\233\230IO\346\202\254\346\214\202.md" "b/docs/zh/docs/Virtualization/\351\205\215\347\275\256\347\243\201\347\233\230IO\346\202\254\346\214\202.md" new file mode 100644 index 00000000..146e442a --- /dev/null +++ "b/docs/zh/docs/Virtualization/\351\205\215\347\275\256\347\243\201\347\233\230IO\346\202\254\346\214\202.md" @@ -0,0 +1,93 @@ +# 配置磁盘IO悬挂 + +[TOC] + +## 总体介绍 + +### 概述 + +存储故障（比如存储断链）场景下，物理磁盘的IO错误，通过虚拟化层传给虚拟机前端，虚拟机内部收到IO错误，可能导致虚拟机内部的用户文件系统变成read-only状态，需要重启虚拟机或者用户手动恢复，这给用户带来额外的工作量。 + +这种情况下，虚拟化平台提供了一种磁盘IO悬挂的能力，即当存储故障时，虚拟机IO下发到主机侧时将IO悬挂住，在悬挂时间内不对虚拟机内部返回IO错误，这样虚拟机内部的文件系统就不会因为IO错误而变为只读状态，而是呈现为Hang住；同时虚拟机后端按指定的悬挂间隔对IO进行重试。如果存储故障在悬挂时间内恢复正常，悬挂住的IO即可恢复落盘，虚拟机内部文件系统自动恢复运行，不需要重启虚拟机；如果存储故障在悬挂时间内未能恢复正常，则上报错误给虚拟机内部，通知给用户。 + +### 应用场景 + +使用可能会发生存储面链路断链的云盘作为虚拟磁盘后端的场景。 + +### 注意事项和约束限制 + +- 磁盘IO悬挂仅支持virtio-blk或virtio-scsi类型的虚拟磁盘。 + +- 磁盘IO悬挂的虚拟磁盘后端一般为可能会发生存储面链路断链的云盘。 + +- 磁盘IO悬挂可对读写IO错误分别使能，同一磁盘的读写IO错误重试间隔和超时时间使用相同配置。 + +- 磁盘IO悬挂重试间隔不包含主机侧实际读写IO的开销，即两次IO重试操作实际间隔会大于配置的IO错误重试间隔。 + +- 磁盘IO悬挂无法区分IO错误的具体类型（如存储断链、扇区坏道、预留冲突等），只要硬件返回IO错误，都会进行悬挂处理。 + +- 磁盘IO悬挂时，虚拟机内部IO不会返回，fdisk等访问磁盘的系统命令会卡住，虚拟机内部依赖该命令返回的业务也会一直卡住。 + +- 磁盘IO悬挂时，IO无法正常落盘，可能会导致虚拟机无法优雅关机，需要强制关机。 + +- 磁盘IO悬挂时，无法读取磁盘数据，会造成虚拟机无法正常重启，需要先将虚拟机强制关机，等待存储故障恢复后在重新启动虚拟机。 + +- 存储故障发生后，虽然存在磁盘IO悬挂，依然解决不了以下问题： + + 1. 存储相关高级特性执行失败 + + 高级特性包括：虚拟磁盘热插、虚拟磁盘热拔、创建虚拟磁盘、虚拟机启动、虚拟机关机、虚拟机强制关机、虚拟机休眠、虚拟机唤醒、虚拟机存储热迁移、虚拟机存储热迁移取消、虚拟机创建存储快照、虚拟机存储快照合并、查询虚拟机磁盘容量、磁盘在线扩容、插入虚拟光驱、弹出虚拟机光驱。 + + 2. 虚拟机生命周期执行失败 + +- 配置了磁盘IO悬挂的虚拟机发起热迁移时，应该在目的端磁盘的XML配置中带上与源端相同的磁盘IO悬挂配置。 + +## 磁盘IO悬挂配置 + +### Qemu命令行配置 + +磁盘IO悬挂功能通过在虚拟磁盘设备上指定`werror=retry` `rerror=retry`进行使能，使用`retry_interval`和`retry_timeout`进行重试策略的配置。`retry_interval`为IO错误重试的间隔，配置范围为0-MAX_INT，单位为毫秒，未配置时使用默认值1000ms；`retry_timeout`为IO错误重试超时时间，配置范围为0-MAX_INT，0值表示不会发生超时，单位为毫秒，未配置时使用默认值5000ms。 + +virtio-blk磁盘的磁盘IO悬挂配置如下： + +```shell +-device virtio-blk-pci,scsi=off,bus=pci.0,addr=0x6,\ +drive=drive-virtio-disk0,id=virtio-disk0,write-cache=on,\ +werror=retry,rerror=retry,retry_interval=2000,retry_timeout=10000 +``` + +virtio-scsi磁盘的磁盘IO悬挂配置如下： + +```shell +-device scsi-hd,bus=scsi0.0,channel=0,scsi-id=0,lun=0,\ +device_id=drive-scsi0-0-0-0,drive=drive-scsi0-0-0-0,id=scsi0-0-0-0,write-cache=on,\ +werror=retry,rerror=retry,retry_interval=2000,retry_timeout=10000 +``` + +### xml配置方式 + +磁盘IO悬挂功能通过在磁盘xml配置中指定`error_policy='retry'` `rerror_policy='retry'`进行使能。主要是配置上`retry_interval`和`retry_timeout`的值。`retry_interval`为IO错误重试的间隔，配置范围为0-MAX_INT，单位为毫秒，未配置时使用默认值1000ms；`retry_timeout`为IO错误重试超时时间，配置范围为0-MAX_INT，0值表示不会发生超时，单位为毫秒，未配置时使用默认值5000ms。 + +virtio-blk磁盘的磁盘IO悬挂xml配置如下： + +```xml +<disk type='block' device='disk'> + <driver name='qemu' type='raw' cache='none' io='native' error_policy='retry' rerror_policy='retry' retry_interval=2000 retry_timeout=10000/> + <source dev='/dev/disk/by-id/scsi-360022a11000c1e0a219755270000015f'/> + <target dev='vdb' bus='virtio'/> + <backingStore/> +</disk> +``` + +virtio-scsi磁盘的磁盘IO悬挂xml配置如下： + +```xml +<disk type='block' device='disk'> + <driver name='qemu' type='raw' cache='none' io='native' error_policy='retry' rerror_policy='retry' retry_interval=2000 retry_timeout=10000/> + <source dev='/dev/disk/by-id/scsi-360022a11000c1e0a219755270000015f'/> + <target dev='sdb' bus='scsi'/> + <backingStore/> + <address type='drive' controller='0' bus='0' target='0' unit='1'/> +</disk> +``` + -- 2.29.2

1 0

StratoVirt 修正命令行解析失败和realize失败错误码
by Xufei (VF) 02 Mar '21

02 Mar '21

1 0

StratoVirt ballon错误码整改和部分bug修复
by Xufei (VF) 02 Mar '21

02 Mar '21

1 0

StratoVirt进程退出时返回错误码、更新版本号0.2.0、docs qmp命令修改、Cpu随机失败用例删除重构再在合入
by Xufei (VF) 01 Mar '21

01 Mar '21

1 0

2025

2024

2023

2022

2021

2020

Virt March 2021