2023年3月7日 sig-SDS 双周例会纪要
与会者(gitee id):
XSKY-池信泽(chixinze), 麒麟-江新宇, 统信-杨晓亮(yangxiaoliang), 微众-杨耿丹,Linaro-刘新良,华为-罗日新(luorixin), 华为-朱超, 华为-王增亮(wangzengliang), sean10,华为-刘秦飞(liuqinfei)
会议纲要
社区需求进展
crimson特性评估和使能(罗日新):
解决内存占用的问题
推动ceph原生社区发布openEuler版本的rpm包(王玺源)
梳理了ceph原生社区运作流程,待向tracker提feature
ceph dashboard汉化支持 (朱超)
单独出RPM包本地已经实现
门禁合入待适配工程npm源
引入分布式存储组件lustre进展(刘新良)
ZFS组件已经完成仓库初始化
2.ceph生态思考(朱超)
决定创建一个源码仓库用于维护sig的文档
3、另一种分布式存储系统 LizardFS简介 (林永乐)
LizardFS项目具备使用区块链防数据篡改等新特性,项目使用和配置对用户较友好;
计划将其适配和引入openEuler发布版本包
Best regards,
Qinfei
---- 回复的原邮件 ----
| 发件人 | openEuler conference<public(a)openeuler.org> |
| 发送日期 | 2023年2月28日 09:00 |
| 收件人 | <sds(a)openeuler.org> ,
<ceph(a)openeuler.org> ,
<dev(a)openeuler.org> |
| 主题 | [Dev] SDS双周例会 |
您好!
sig-SDS SIG 邀请您参加 2023-03-07 10:00 召开的Zoom会议(自动录制)
会议主题:SDS双周例会
会议内容:
1,社区需求进展
会议链接:https://us06web.zoom.us/j/89835472372?pwd=Z3UvYWFpRXBJY29iVS8zdXk5TFFLdz09
会议纪要:https://etherpad.openeuler.org/p/sig-SDS-meetings
温馨提醒:建议接入会议后修改参会人的姓名,也可以使用您在gitee.com的ID
更多资讯尽在:https://openeuler.org/zh/
Hello!
openEuler sig-SDS SIG invites you to attend the Zoom conference(auto recording) will be held at 2023-03-07 10:00,
The subject of the conference is SDS双周例会,
Summary:
1,社区需求进展
You can join the meeting at https://us06web.zoom.us/j/89835472372?pwd=Z3UvYWFpRXBJY29iVS8zdXk5TFFLdz09.
Add topics at https://etherpad.openeuler.org/p/sig-SDS-meetings.
Note: You are advised to change the participant name after joining the conference or use your ID at gitee.com.
More information: https://openeuler.org/en/
会议纪要:https://etherpad.openeuler.org/p/Storage-meetings
1.e2fsprogs multi-version多版本支持 for Lustre (刘新良)
结论:lustre内核是通过构建时打补丁方式来生成对应ko,外围包则是基于社区git仓fork后管理。评审通过支持在e2fsprogs中通过创建分支方式来支持lustre-e2fsprogs.
后续需要关注:
1.用户后续需要通过openeuler提需求来发布。
2.同时需要考虑版本如何集成和发布lustre-e2fsprogs包(因为它是与e2fsprogs包需要互斥)
2.open-iscsi软件包中的iscsi服务,升级建议不重启(王肖萌)
升级重启会导致iscsi存储登出再登入,存储上的业务会中断。
场景:业务升级OS外围包,希望业务不中断,或中断在指定时间内恢复
通信:iscsi->iscsid -> kernel iscsi ->tcp -> LUN server
根本问题:来自同一个包的不同命令是不同版本,是否能够保持兼容
风险:如果升级后对后端服务不重启,会存在守护进程和前端命令来自同一个包但是跨版本。这种无法保证跨版本兼容。
技术:
1.前端命令:升级后替换
2.后端服务:如果升级包后不重启服务,就会出现:iscsid内存中是老版本,iscsi命令是新版本
目标:保持不同版本,命令间通信的兼容
方案:1)通信间使用代理;2)软件开发时满足该约束
结论:保持现状,升级时重启服务以保证后端服务与前端命令来自同一版本。
3. 针对mdadm/smartmonctl包进行优化与修改,需求价值与解决方案评估(杨云易)
磁盘名称设置为ID,防止重启后磁盘乱序;mdmonitor增加program处理脚本,收集日志并发送邮件;smartmontool定时检查温度时判断多次连续超过温度阈值时上报告警;smartd定时检查中增加剩余寿命与磨损速度等的计算与监控。
结论:防呆功能,建议做成命令,支持用户对指定配置文件进行分析是否存在使用盘符的情况,并给出建议。命令集成建议放到公共仓库中,例如util-linux。
结论:是一种策略,不同用户有不同诉求,建议可以发个博客或readme给用户建议,但不能作为默认的策略使用。
结论:针对ssd提供的安全温度进行打印,推社区
结论:推送社区,关注监控项的计算是否是业界共识的
4.提议将 swf504作为openeuler新的maintainer
结论:一致同意将 swf504作为openeuler新的maintainer
On 2023/3/3 9:17, Zhiqiang Liu wrote:
>
> 时间:2023-03-03 10:00
>
> 会议链接:https://us06web.zoom.us/j/86475095897?pwd=U2RMK1A1TVhzcjR0S3VYVDZybm54UT09
> 会议纪要:https://etherpad.openeuler.org/p/Storage-meetings
>
> 20230303 例会 议题收集如下:
>
> 1.e2fsprogs multi-version多版本支持 for Lustre
> 2.open-iscsi软件包中的iscsi服务,升级建议不重启(王肖萌)
> 升级重启会导致iscsi存储登出再登入,存储上的业务会中断。
> 3. 针对mdadm/smartmonctl包进行优化与修改,需求价值与解决方案评估(杨云易)
> 磁盘名称设置为ID,防止重启后磁盘乱序;mdmonitor增加program处理脚本,收集日志并发送邮件;smartmontool定时检查温度时判断多次连续超过温度阈值时上报告警;smartd定时检查中增加剩余寿命与磨损速度等的计算与监控。
>
> On 2023/2/22 18:04, openEuler conference wrote:
>> 您好!
>>
>> Storage SIG 邀请您参加 2023-03-03 10:00 召开的Zoom会议
>>
>> 会议主题:Storage sig 例会
>>
>> 会议内容:
>> storage sig例会
>>
>> 会议链接:https://us06web.zoom.us/j/86475095897?pwd=U2RMK1A1TVhzcjR0S3VYVDZybm54UT09
>>
>> 会议纪要:https://etherpad.openeuler.org/p/Storage-meetings
>>
>> 温馨提醒:建议接入会议后修改参会人的姓名,也可以使用您在gitee.com的ID
>>
>> 更多资讯尽在:https://openeuler.org/zh/
>>
>>
>>
>>
>> Hello!
>>
>> openEuler Storage SIG invites you to attend the Zoom conference will be held at 2023-03-03 10:00,
>>
>> The subject of the conference is Storage sig 例会,
>>
>> Summary:
>> storage sig例会
>>
>> You can join the meeting at https://us06web.zoom.us/j/86475095897?pwd=U2RMK1A1TVhzcjR0S3VYVDZybm54UT09.
>>
>> Add topics at https://etherpad.openeuler.org/p/Storage-meetings.
>>
>> Note: You are advised to change the participant name after joining the conference or use your ID at gitee.com.
>>
>> More information: https://openeuler.org/en/
>>
>
> _______________________________________________
> Dev mailing list -- dev(a)openeuler.org
> To unsubscribe send an email to dev-leave(a)openeuler.org
2023-2-22
会议主题:openEuler AI SIG例会
主持人:缪金成
与会人:Intel- 缪金成、 Intel-Eikan、Intel-Gong Jiong、麒麟软件-杨昭、华为-郑弦、麒麟软件-江新宇、天翼云-王江勇、chaozhangm
会议内容:
1. Pytorch2.0技术分享与探讨
由于2303需求收集结束,目标版本选择未来的非LTS版本(2309)。
Torch.compile目前是实验阶段(experimental, stable, golden),默认编译支持,但是需要运行时手工打开。
Ipex也是作为torch.compile的后端之一(backend=ipex,需要先安装ipex,支持Intel CPU/GPU)
金成列出pytorch2.0和ipex的技术优势及特性,方便openEuler集成。
2. Tensorflow软件包讨论:2203-LTS-sp1确实软件包,金成发送yum源地址给郑弦。
3. 大模型相关话题讨论:江勇,乃盘,下次讨论。
4. 梳理openEuler的AI能力,各个厂商列出软硬件能力,包括已经支持的和计划支持的,发给郑弦。
22年工作回顾:
1、实习进展
郑弦 Pytorch实现验证码识别 进展:任务进行中,数字和字母已基本没问题,图片类进行中;(完成)
金成 onednn buxfix+编译 进展:暂无人认领;
朱乃盘 mindspore支持高版本openEuler 22.03 进展:暂无人认领;
之后会有开源之夏,对学生和导师都有奖励。下半年meetup,关于社区发展。
2、MindSpore集成进展
进展:license合规问题已经过合规SIG评审,门禁已上线,扫描通过。
3、AI SIG软件维护
清单:https://gitee.com/openeuler/community/blob/master/sig/ai/sig-info.yaml
4、23年工作规划讨论
1)openEuler AI软硬件兼容性测试标准
2)MS/PT/TF支持openEuler GPU版本
3)MindSpore支持openEuler 22.03版本
4)AI 嵌入式场景支持
5)各类AI应用补充
6)intel新款处理器在openEuler的效果
5、12月份openEuler运营月报
1)除了MXNet特性补充,其他暂无。
遗留问题:
1、梳理AI SIG仓库维护清单及分工。
-----Original Appointment-----
From: openEuler conference <public(a)openeuler.org>
Sent: Monday, February 20, 2023 3:38 PM
To: openEuler conference; dev@openeuler.org,jincheng.miao@intel.com
Subject: ai sig 例会
When: Wednesday, February 22, 2023 2:00 PM-3:00 PM (UTC+08:00) Beijing, Chongqing, Hong Kong, Urumqi.
Where:
您好!
ai SIG 邀请您参加 2023-02-22 14:00 召开的Zoom会议(自动录制)
会议主题:ai sig 例会
会议链接:https://us06web.zoom.us/j/89176006268?pwd=QVFFTHB6MXloOFZHc2FpUkgrdEhxQT09
会议纪要:https://etherpad.openeuler.org/p/ai-meetings
温馨提醒:建议接入会议后修改参会人的姓名,也可以使用您在gitee.com的ID
更多资讯尽在:https://openeuler.org/zh/
Hello!
openEuler ai SIG invites you to attend the Zoom conference(auto recording) will be held at 2023-02-22 14:00,
The subject of the conference is ai sig 例会,
You can join the meeting at https://us06web.zoom.us/j/89176006268?pwd=QVFFTHB6MXloOFZHc2FpUkgrdEhxQT09.
Add topics at https://etherpad.openeuler.org/p/ai-meetings.
Note: You are advised to change the participant name after joining the conference or use your ID at gitee.com.
More information: https://openeuler.org/en/