与会人:sinever,Hubble_Zhu, traffic_millions, njlzk, Anonymous_Z, Liusheng, zhaobo, zhengzhenyu, Hexiujun, wangxiyuan, Wangli, zhangmiao
整体计划:
规划在openEuler 20.03LTS和openEuler20.09版本上线AI和大数据重点软件包,聚焦如下几个软件包发力
AI: tensorflow, pytorch
BigData: spark, mapreduce, yarn, hdfs, flink, hbase, hive
会上问题:
问题1: 验证各个软件包功能的策略?
结论: 仅测试基本功能。测试全部功能工作量大,一些扩展特性也不支持所有平台。
问题2:软件包的依赖包有问题如何处理?
举例:flink当前主线版本编译没问题,基本功能没问题。但在使用一些扩展功能的时候。发现依赖的netty有问题
当前解决方案:本地重新构建netty替换原有so。
结论:依据功能特点和修复难度来决策
如果是扩展功能,不解决
如果是基本功能,并且通过简单制作私有patch的方法可以解决,那就用私有patch解决
如果是基本功能,但是修复难度较大不好解决,那就先放一放。
下一步计划:
Hubble_Zhu:
1. 建议尽快验证大数据关键包在openEuler arm环境上的执行,编译
2. 负责MapReduce,hdfs,flink,hive,hbase上线
traffic_millions:
1. 建议尽快推动dlib代码上openEuler,尽快闭环
2. 建议自己使用一下dlib api
3. 负责spark上线
njlzk:
1. 负责pytorch上线
Anonymous_Z
1. 建议尽快验证jupyter基本功能在openEuler arm上运行,前期工作尽快闭环
2. 负责yarn上线
sinever:
1. 规划软件包版本的选型策略
2. 规划软件包的更新策略
3. 负责TensorFlow上线
------------------ 原始邮件 ------------------
发件人: "朱恒博"<403975152@qq.com>;
发送时间: 2020年5月28日(星期四) 上午9:43
收件人: "dev"<dev@openeuler.org>;"tc"<tc@openeuler.org>;"sig-ai-bigdata"<sig-ai-bigdata@openeuler.org>;
主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-05-28 18:30-19:00
Topic
|
sig-ai-bigdata regular meeting
|
Time
|
2020-05-28 18:30-19:00((UTC+08:00)Beijing)
|
Agenda
|
1. sig成员前期工作审视; 2. TC例会思想传达 3. 下一步工作计划和分工 |
Tips:
|
Dial the access number to join conference
|
注:仅支持部分国家和地区。( Only some countries and regions are supported.)
|
请点击会议链接按照提示下载Zoom客户端入会,并升级Zoom最新版本。
|
Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.
|
|