会议纪要 // 回复:[Dev] sig-ai-bigdata regular meeting
by Hubble_Zhu
与会人:sinever,hubble_zhu,hao, coding, palm, Hexiujun, Weidong.Ding, xuxiaolong, 王进,魏东
感谢大家的参与!
会议纪要:
议题一:sig-ai-bigdata 2020年成果和实践回顾
sig-ai-bigdata 2020年举行例会近20次,举行线下沙龙2次
sig成员由2人扩大到80人,sig成员遍布海内外。
sig成员由来自麒麟,统信,润和,linaro,加拿大皇家银行,高校,华为,中科院等10+企业/学校组成。涉及多个领域
sig-ai-bigdata 2020年在openEuler引入关键大数据软件包5个,关键AI软件包10+个。
议题二:openEuler LTS版本选型讨论
希望能够将tensorflow 1.15.4,pytorch 1.6.0,mxnet 这三个组件引入到LTS版本中 ——魏东(统信)
议题三:基于openEuler的大数据和AI平台介绍&讨论
大数据&AI平台介绍见附件PPT
当前大数据&AI平台已经找到合作的伙伴和客户企业,下一步在tc会议上申报议题申请立项
议题四:SIG技术范围和路标讨论
路标:能用->易用->好用
完整软件栈:让AI、BigData在openEuler上能用
一键式平台:让AI、BigData在openEuler上易用
用户态加速:让AI、BigData在openEuler上好用
议题五:关于在鲲鹏arm64架构centos7编译cdh的问题
具体问题见附件pdf描述。琦琛使用的cdh 5.12.1版本有点老,可能会有一些兼容性问题
建议在使用cdh6以上的版本在openEuler上尝试构建。遇到问题可以直接在群里反馈
遗留问题:
1. 请魏东帮忙了解下下游客户实际是如何使用tensorflow,pytorch,spark等等组件的 ——魏东
2. 和社区tc讨论交流下tensorflow的多版本问题 ——hubble_zhu
3. 研究下如何将mxnet引入到openeuler中 ——hubble_zhu
欢迎大家将想要了解的内容或者讨论的议题发送到 sig-ai-bigdata(a)openeuler.xn--org !-5g7zf65p
欢迎大家添加小助手进群交流!
------------------ 原始邮件 ------------------
发件人: "openEuler conference" <public(a)openeuler.io>;
发送时间: 2021年1月12日(星期二) 上午10:11
收件人: "sig-ai-bigdata"<sig-ai-bigdata(a)openeuler.org>;"tc"<tc(a)openeuler.org>;"dev"<dev(a)openeuler.org>;
主题: [Dev] sig-ai-bigdata regular meeting
您好!
openEuler sig-ai-bigdata SIG 邀请您参加 2021-01-14 19:00 召开的ZOOM会议
会议主题:sig-ai-bigdata regular meeting
会议内容: 1. sig-ai-bigdata 2020年成果和实践回顾 2. openEuler LTS版本选型讨论 3. 基于openEuler的大数据和AI平台探讨 4. SIG 技术范围和路标讨论
会议链接:https://zoom.us/j/94898006833?pwd=eWZHWFkydjBwUkFUR29yek5xYU5oQT09
更多资讯尽在:https://openeuler.org/zh/
Hello!
openEuler sig-ai-bigdata SIG invites you to attend the ZOOM conference will be held at 2021-01-14 19:00,
The subject of the conference is sig-ai-bigdata regular meeting,
Summary: 1. sig-ai-bigdata 2020年成果和实践回顾 2. openEuler LTS版本选型讨论 3. 基于openEuler的大数据和AI平台探讨 4. SIG 技术范围和路标讨论
You can join the meeting at https://zoom.us/j/94898006833?pwd=eWZHWFkydjBwUkFUR29yek5xYU5oQT09.
More information
2 years
【sig-ai-bigdata议题收集】^_^ 为琦琛同学的努力点赞!所有的努力都不会白费 // 回复:[Dev] Re: [Community] sig-ai-bigdata regular meeting
by Hubble_Zhu
已有议题列表:
1. sig-ai-bigdata 2020年成果和实践回顾2. openEuler LTS版本选型讨论3. 基于openEuler的大数据和AI平台探讨4. SIG 技术范围和路标讨论5. 源码编译cdh-hadoop问题讨论
如果还有其它的议题,请继续申请。
------------------ 原始邮件 ------------------
发件人: "zhangqichen" <17852657226(a)163.com>;
发送时间: 2021年1月12日(星期二) 中午1:08
收件人: "openEuler conference"<public(a)openeuler.io>;
抄送: "sig-ai-bigdata"<sig-ai-bigdata(a)openeuler.org>;"tc"<tc(a)openeuler.org>;"dev"<dev(a)openeuler.org>;
主题: [Dev] Re: [Community] sig-ai-bigdata regular meeting
大家好!
我是openEuler社区sig-ai-bigdata开发者张琦琛,想必大家听说过我,上个月openEuler峰会Summit Demo秀Hadoop开发者。
今天我要提一个议题,基于鲲鹏aarch64架构实现源码编译cdh-hadoop。
之所以要提这个述求,是因为经过我的努力到最后一步没有打通我不想放弃,所以希望社区相关专家协助!
我在去年11月20号就已经开始了源码编译cdh-hadoop,但是在编译过程中遇到下面截图这个问题:
经过自己不懈努力未能解决,联系华为工程师胡峰,他建议我设置swap分区,我设置后仍然还是存在这个问题;
于是他建议我写个详细文档描述一下,于是就是附件中的文档(鲲鹏arm64架构centos7源码编译cdh-v0.0.1-张琦琛.pdf),大家下载后即可查看。
联系华为工程师郑振宇,因为使用的鹏城实验室开发者云,所以我感觉是不能访问外网原因引起的,
于是他帮助联系linaro工程师赵帅,但是在借助linaro平台也有遇到问题,OpenStack上借助现有镜像模板创建实例,
开机后发现根目录太小,且无法扩容,详细情况如下图所示:
联系linaro工程师赵帅,非常感谢他的帮助与讲解,
“关于arm64架构,centos7是segdisk版本太低的问题,官方只支持8,7只是实验性build的,红帽官方不提供支持”,
他说centos7的他在centos社区要求bump版本,但是遭到官方拒绝,详情请见 https://bugs.centos.org/view.php?id=16418
在openEuler微信交流群也有提到,有爱好者工程师建议我在maven编译时使用debug查看报错信息,
我已把报错信息上传到附件nohup.out20201203,nohup.out20201204
希望社区相关专家、技术工程师、开发者们,协助解决这个bug,不胜感激!
祝好!
--
济宁医学院健康大数据研究中心科研助理张琦琛
2021-01-12
在 2021-01-12 10:11:37,"openEuler conference" <public(a)openeuler.io> 写道:
您好!
openEuler sig-ai-bigdata SIG 邀请您参加 2021-01-14 19:00 召开的ZOOM会议
会议主题:sig-ai-bigdata regular meeting
会议内容: 1. sig-ai-bigdata 2020年成果和实践回顾 2. openEuler LTS版本选型讨论 3. 基于openEuler的大数据和AI平台探讨 4. SIG 技术范围和路标讨论
会议链接:https://zoom.us/j/94898006833?pwd=eWZHWFkydjBwUkFUR29yek5xYU5oQT09
更多资讯尽在:https://openeuler.org/zh/
Hello!
openEuler sig-ai-bigdata SIG invites you to attend the ZOOM conference will be held at 2021-01-14 19:00,
The subject of the conference is sig-ai-bigdata regular meeting,
Summary: 1. sig-ai-bigdata 2020年成果和实践回顾 2. openEuler LTS版本选型讨论 3. 基于openEuler的大数据和AI平台探讨 4. SIG 技术范围和路标讨论
You can join the meeting at https://zoom.us/j/94898006833?pwd=eWZHWFkydjBwUkFUR29yek5xYU5oQT09.
More information
2 years