- Sig-ai-bigdata - mailweb.openeuler.org

会议纪要 // 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-09-15 19:00-20:00
by Hubble_Zhu 16 Sep '20

16 Sep '20

与会人：sinever, hubble_zhu, hao, hexiujun, huangliming, liuzhikang, wangli 会议纪要：进展： Hubble_zhu： 1. 已成功将 libsvm 推到openEuler上 2. 验证hive，hbase打包成rpm ok，src仓已建立。预计近期可以推到openEuler上 3. 本地flink构建遇到了maven依赖下载失败的问题。 Hao： 1. kafka构建同样遇到了maven依赖下载失败的问题，建议用/retest重新触发构建 2. 正在尝试zepplin的构建，预计近期可以将zepplin推到openEuler上下一步计划： 1. 跟踪下将spark包推到openEuler的进展 ——Hubble_zhu 2. 建议优先将hive，hbase推到openEuler上。flink直接提PR，利用门禁验证构建是否ok ——Hubble_zhu 3. 建议优先将zepplin推到openEuler上，kafka构建失败可能是网络的原因，建议尝试 /retest ——Hao 4. 建议优先将知识图谱工程创建起来 ——sinever，hexiujun 非常感谢Hao，sinever，Hexiujun，hubble_zhu等对sig-ai-bigdata做出的贡献！ ------------------ 原始邮件 ------------------ 发件人: "Hubble_Zhu" <hubble_zhu(a)qq.com>; 发送时间: 2020年9月12日(星期六) 上午10:44 收件人: "tc"<tc(a)openeuler.org>;"dev"<dev(a)openeuler.org>;"sig-ai-bigdata"<sig-ai-bigdata(a)openeuler.org>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-09-15 19:00-20:00 Topic sig-ai-bigdata regular meeting Time 2020-09-15 19:00-20:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 822 774 800   Convener Hubble_Zhu   Topics 1. sig成员前期工作审视 2. 下一步工作和计划 Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

could not get maven package
by hao zhang 14 Sep '20

14 Sep '20

Hi All, 我最近在服务器编译kafka的时候遇到一个奇怪问题。具体的错误信息是， [ 1318s] A problem occurred configuring root project 'kafka-2.6.0-src'. [ 1318s] > Could not resolve all artifacts for configuration ':classpath'. [ 1318s] > Could not download lucene-analyzers-common-8.5.0.jar (org.apache.lucene:lucene-analyzers-common:8.5.0) [ 1318s] > Could not get resource ' https://repo.maven.apache.org/maven2/org/apache/lucene/lucene-analyzers-com…'. [ 1318s] > Read timed out [ 1318s] > Could not download lucene-core-8.5.0.jar (org.apache.lucene:lucene-core:8.5.0) [ 1318s] > Could not get resource ' https://repo.maven.apache.org/maven2/org/apache/lucene/lucene-core/8.5.0/lu…'. [ 1318s] > Read timed out 据我所知，现在服务器上是可以导入maven packages的。但为什么使用gradle这里就不行呢？我本地编译是没有问题的。大家有没有遇到类似的问题？谢谢，浩

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-09-15 19:00-20:00
by Hubble_Zhu 12 Sep '20

12 Sep '20

Topic sig-ai-bigdata regular meeting Time 2020-09-15 19:00-20:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 822 774 800   Convener Hubble_Zhu   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 1

会议纪要:// 回复：【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-08-20 18:30-19:30
by Hubble_Zhu 22 Aug '20

22 Aug '20

与会人：sinever, zhaozhonghao, zhanghao, dongdeping, lizhibo 会议纪要：智博： 1. 建议尽快将 bazel 做好的包上传到 bazel-bin 中豪： 1. 建议优先完成 pytorch 打包成rpm，其他问题可以在打包完成后解决 Hao： 1. 建议先完成 kafka 的引入，后续负责将zepplin引入openEuler sinever： 1. 联系基础设施的同学支持从 bazel-bin 安装依赖 2. 和dongjian确认spark在openEuler的支持情况 3. 确认将hadoop/flink引入openEuler的分工 4. 和submarine社区进行方案交流 ------------------ 原始邮件 ------------------ 发件人: "Hubble_Zhu" <hubble_zhu(a)qq.com>; 发送时间: 2020年8月18日(星期二) 上午9:20 收件人: "dev"<dev(a)openeuler.org>;"tc"<tc(a)openeuler.org>;"sig-ai-bigdata"<sig-ai-bigdata(a)openeuler.org>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-08-20 18:30-19:30 Topic sig-ai-bigdata regular meeting Time 2020-08-20 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 191 893 633   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-08-20 18:30-19:30
by Hubble_Zhu 18 Aug '20

18 Aug '20

Topic sig-ai-bigdata regular meeting Time 2020-08-20 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 191 893 633   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-30 18:30-19:30
by Hubble_Zhu 31 Jul '20

31 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-30 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 767 812 702   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作与计划 3. 其他申报议题   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 1

bazel可以避免二进制从源码进行编译
by 李智博 28 Jul '20

28 Jul '20

bazel 可以从源码进行适配openeuler 依赖是 openjdk-8 & openjdk-11 目前可以适配openjdk-8 但evething中目前提供的版本是java-1.8.0-openjdk-1.8.0.242.b08-1.h5.oe1.aarch64格式的rpm，与bazel不兼容，我们是需要引进openjdk-8&-11 参考：https://docs.bazel.build/versions/3.4.0/install-compile-source.html#download-distfile | | 李智博 | | lzb15204493106lzb(a)163.com | 签名由网易邮箱大师定制

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-22 19:00-20:00
by Hubble_Zhu 27 Jul '20

27 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-22 19:00-20:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 387 021 111   Convener 朱恒博   Agenda 1. SIG成员前期工作审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

4 4

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-30 18:30-19:30
by Hubble_Zhu 27 Jul '20

27 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-30 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 767 812 702   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作与计划 3. 其他申报议题   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

my eml
by 李智博 26 Jul '20

26 Jul '20

1 0

需要的big data软件包
by hao zhang 24 Jul '20

24 Jul '20

大家好，这是我最近在看的。https://bigtop.apache.org/ 它主要包含big data 一些框架的packing 和testing. rpm packing 包含的: - alluxio - ambari - bigtop-groovy - bigtop-jsvc - bigtop-tomcat - bigtop-utils - elasticsearch - flink - flume - giraph - gpdb - hadoop - hbase - hive - ignite-hadoop - kafka - list - livy - logstash - mahout - oozie - phoenix - qfs - solr - spark - sqoop - sqoop2 - tez - ycsb - zeppelin - zookeeper smoke test 包含的： - alluxio - ambari - elasticsearch - flink - flume - giraph - gpdb - hbase - hcfs - hdfs - hive - ignite-hadoop - kafka - kms - livy - logstash - mahout - mapreduce - odpi-runtime - oozie - phoenix - qfs - solr - spark - sqoop - tez - yarn - ycsb - zeppelin - zookeeper smoke test 是在docker上运行的。暂时还没有详细研究。据我了解，目前我们已经有了spark, flink, hbase, spark, zookeeper, kafka. 大家觉得剩下的哪些还比较重要些？我可以参考bigtop做相应的rpm包。下次我们可以讨论以下如何加入测试？谢谢， hao

2 1

Re: 回复：参加SIG组疑问
by 正心 24 Jul '20

24 Jul '20

你好。目前感知到也有另一家在申请合入opencv相关代码，不知道你们是不是一家公司，你们会不会有版本冲突。你可以在下次例会上报个议题，议题讨论下，避免重复工作量。祝好。在 2020-07-21 11:55:39，"谌勇武" <cscyu226(a)163.com> 写道：目前由于公司规划，计划将公司应用迁移到OpenEuler服务器上面，但是我们的应用需要使用到OpenCV 我们在考虑，我们合入参与到社区，但是还没有项目，我们应该怎么做？是否可以跟申请，然后我们拉分支，合入，你们审核还是说，你们已经有计划，在合入OpenCV了，如果是这种情况的话，是否有具体的时间点? 在 2020-07-21 11:02:51，"正心" <sinever(a)126.com> 写道：社区是开放的，欢迎任何遵守规则的人加入。你可以简单介绍下自己的情况和具体的问题吗。另外我们有微信群和例会也欢迎参加。 | | 正心 | | 邮箱：sinever(a)126.com | 签名由网易邮箱大师定制在2020年07月21日 10:25，谌勇武写道：您好！由于我需要在OpenEuler上面使用OpenCV，如果我希望能将OpenCV 做迁移适配，是否可以加入适配的软件包列表中？

1 0

议题会议纪要看大家是否有补充答复: [Tc] 【Meeting Notice】openEuler TC meeting Time: 2020-07-22 10:00-12:00
by 正心 22 Jul '20

22 Jul '20

议题 1、 SIG-AI-BIGDATA在实际运作过程中遇到的java应用的jar依赖问题的解决方案。会议纪要： • 熊博： • 建议先和基础设施组沟通放开obs构建时访问外网； • 搭建镜像做为长期目标，先调研； • 调研是否有检测jar合规的开源或商用工具； • Haibo luo： • 商业软件对依赖的jar有检查，现有开源软件可以方便搭建私服； • Jianmin wang： • 基础包(maven/ant)是否可以使用maven方式构建，需要能够自包含； • 欣慰： • 方案三有可能引入不可靠的jar • openEuler里不引入二进制是为了源码可追溯，当上游变化时有能力独立维护、演进。JAVA语言使用jar，jar如果可以追溯，可以看成源码，如果有混淆或者jni需要单独考虑； • 结论： • 短期先放开obs访问外网使能java应用构建； • 长期考虑构建openEuler镜像源，方便后期开发者； • 基础包(maven/ant)先按照自包含原则构建，有问题再讨论； From: "Meeting Book"<uMeeting(a)huawei.com> Date: Mon, Jul 20, 2020 09:16 AM To: "tc"<tc(a)openeuler.org>; Subject: [Tc] 【Meeting Notice】openEuler TC meeting Time: 2020-07-22 10:00-12:00 Topic openEuler TC meeting Time 2020-07-22 10:00-12:00((UTC+08:00)Beijing) Join Conference Join (External) >> Meeting ID 291 038 958 Convener 王勋 Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download | | 正心 | | 邮箱：sinever(a)126.com | 签名由网易邮箱大师定制

1 0

参加SIG组疑问
by 谌勇武 20 Jul '20

20 Jul '20

您好！由于我需要在OpenEuler上面使用OpenCV，如果我希望能将OpenCV 做迁移适配，是否可以加入适配的软件包列表中？

1 0

[FROM SIG-AI-BIGDATA]例会议题申请
by 正心 18 Jul '20

18 Jul '20

TC：申请在例会上讨论下SIG-AI-BIGDATA在实际运作过程中遇到的java应用(hadoop/spark/flink/hbase/hive/kafka)的jar依赖问题的解决方案。不知是否合适。祝好。

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-22 19:00-20:00
by Hubble_Zhu 15 Jul '20

15 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-22 19:00-20:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 387 021 111   Convener 朱恒博   Agenda 1. SIG成员前期工作审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

[openEuler][Big Data][openLooKeng]Is it possible to introduce openLooKeng to openEuler
by Liyongle (Fred) 07 Jul '20

07 Jul '20

Hi openEuler AI-Bigdata SIG and openLooKeng development team, It happened that I am in both openEuler[0] and openLooKeng[2] communities. openLooKeng was opened just few days ago. I knew that AI & Big Data SIG in openEuler is working on many projects about Big Data. I hope there will be a chance to introduce openLooKeng into openEuler. This email was sent to bridge the 2 teams. Regards [0] https://openeuler.org [1] https://gitee.com/openeuler/community/tree/master/sig/sig-ai-bigdata [2] https://openlookeng.io Fred 李永乐

2 1

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00
by Hubble_Zhu 02 Jul '20

02 Jul '20

发件人: "Meeting Book"<uMeeting(a)huawei.com>; 发送时间: 2020年6月29日(星期一) 下午2:09 收件人: "Hubble_Zhu"<403975152(a)qq.com>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00 Topic sig-ai-bigdata regular meeting Time 2020-07-02 11:00-12:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 628 852 074   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 1

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00
by 403975152 29 Jun '20

29 Jun '20

发件人: "Meeting Book"<uMeeting(a)huawei.com>; 发送时间: 2020年6月29日(星期一) 下午2:09 收件人: "Hubble_Zhu"<403975152(a)qq.com>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00 Topic sig-ai-bigdata regular meeting Time 2020-07-02 11:00-12:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 628 852 074   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00
by 403975152 29 Jun '20

29 Jun '20

发件人: "Meeting Book"<uMeeting(a)huawei.com>; 发送时间: 2020年6月29日(星期一) 下午2:09 收件人: "Hubble_Zhu"<403975152(a)qq.com>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00 Topic sig-ai-bigdata regular meeting Time 2020-07-02 11:00-12:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 628 852 074   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00
by 403975152 29 Jun '20

29 Jun '20

发件人: "Meeting Book"<uMeeting(a)huawei.com>; 发送时间: 2020年6月29日(星期一) 下午2:09 收件人: "Hubble_Zhu"<403975152(a)qq.com>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-02 11:00-12:00 Topic sig-ai-bigdata regular meeting Time 2020-07-02 11:00-12:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 628 852 074   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 0

Re: 暑期2020项目提案-ID:2021218-华中科技大学-刘文卓
by 刘文卓 16 Jun '20

16 Jun '20

sinever 老师您好, 非常感谢您的指导！我正在准备报名材料，已经订阅了 tc, dev 和 sig-ai-bigdata 三个邮件列表。你认为这个项目可能的困难点是哪里。关于项目的困难点，我认为难度最大的部分可能是软件包的打包过程，我目前正在阅读 openEuler 社区的打包指南，我会尽量让项目产出的软件包符合这个标准。 Mlpack当前支持哪些AI算法。我查阅了 mlpack 的文档，发现它支持的AI算法真不少，其中我比较眼熟的有 KNN，KMeans，SVM，朴素贝叶斯，决策树，神经网络等算法。我选择 SVM，NN，CNN 这三种算法的原因是，我在 MNIST 数据集的 官网 上看到作者列出了几大类算法在 MNIST 上的表现。SVM，NN，CNN 占据了其中的大部分位置，它们的表现也非常优秀。我想选择这几种算法，应该会让模型的效果更有保证。对三种模型进行哪些指标的对比。我目前的想法是，对于模型的效果，我会比较准确率，F1-score；对于模型的性能，我会比较推理速度，内存占用。对于模型的训练，我会比较训练时间和收敛速度。感谢您提出的问题，让我对项目有了更深的理解。我根据问题对计划书进行了补充，附在附件中。祝工作顺利。刘文卓 ------------------ Original ------------------ From: "sinever"<sinever(a)126.com>; Date: Thu, Jun 4, 2020 01:58 PM To: "刘文卓"<lwzbill(a)foxmail.com>; Subject: 回复：暑期2020项目提案-ID:2021218-华中科技大学-刘文卓刘文卓同学你好.      现在活动已经正式开始接受报名，欢迎通过官方网站https://isrc.iscas.ac.cn/summer2020/报名。      你对这个活动以及这个题目的目标理解的很到位，实际还有一个目的是让大家熟悉开源社区的玩法并参与到openeuler的实际开发中，所以欢迎你订阅 openeuler的邮件列表 dev@openeuler.org/tc@openeuler.org以及AI和BIGDATA这个sig的邮件列表sig-ai-bigdata@openeuler.org，https://openeuler.org/zh/community/mails.html，并通过邮件列表沟通(首先要注册gitee账号)。          看到你已经有一些linux、c、git、ai的经验，这对该项目很有帮助。          你可以先报名，同时先把环境搭建起来，资料看起来，前期的一些学习总结、经验、问题、操作步骤都可以记录下来，为后面的总结做准备。               有几个问题： 1．          你认为这个项目可能的困难点是哪里。 2．          Mlpack当前支持哪些AI算法。 3．          对三种模型进行哪些指标的对比。   有问题我们随时再沟通。   正心邮箱：sinever(a)126.com 签名由网易邮箱大师定制在2020年06月02日 16:15，351652632 写道： hi, sinever 老师好：我是来自华中科技大学计算机专业的刘文卓。感谢您之前的指导！在过去的一周里，我阅读了一些 mlpack 的文档，在我的电脑（Arch Linux）上编译并安装了 mlpack，并尝试运行了 mlpack 的例程，学到了许多。我编写了项目提案的初稿，附在附件中，请老师批评指正。祝工作顺利。刘文卓

3 3

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-06-08 20:00-20:30
by 403975152 11 Jun '20

11 Jun '20

Topic sig-ai-bigdata regular meeting Time 2020-06-08 20:00-20:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 556 377 019   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

4 6

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-06-08 20:00-20:30
by 403975152 05 Jun '20

05 Jun '20

Topic sig-ai-bigdata regular meeting Time 2020-06-08 20:00-20:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 556 377 019   Convener 朱恒博   Agenda 1. sig成员前期工作进展审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 0

会议纪要：【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-05-28 18:30-19:00
by 403975152 28 May '20

28 May '20

与会人：sinever，Hubble_Zhu, traffic_millions, njlzk, Anonymous_Z, Liusheng, zhaobo, zhengzhenyu, Hexiujun, wangxiyuan, Wangli, zhangmiao 整体计划：规划在openEuler 20.03LTS和openEuler20.09版本上线AI和大数据重点软件包，聚焦如下几个软件包发力 AI: tensorflow, pytorch BigData: spark, mapreduce, yarn, hdfs, flink, hbase, hive 会上问题：问题1: 验证各个软件包功能的策略？结论: 仅测试基本功能。测试全部功能工作量大，一些扩展特性也不支持所有平台。问题2：软件包的依赖包有问题如何处理？   举例：flink当前主线版本编译没问题，基本功能没问题。但在使用一些扩展功能的时候。发现依赖的netty有问题   当前解决方案：本地重新构建netty替换原有so。结论：依据功能特点和修复难度来决策   如果是扩展功能，不解决   如果是基本功能，并且通过简单制作私有patch的方法可以解决，那就用私有patch解决   如果是基本功能，但是修复难度较大不好解决，那就先放一放。下一步计划： Hubble_Zhu: 1. 建议尽快验证大数据关键包在openEuler arm环境上的执行，编译 2. 负责MapReduce，hdfs，flink，hive，hbase上线 traffic_millions: 1. 建议尽快推动dlib代码上openEuler，尽快闭环 2. 建议自己使用一下dlib api 3. 负责spark上线 njlzk: 1. 负责pytorch上线 Anonymous_Z 1. 建议尽快验证jupyter基本功能在openEuler arm上运行，前期工作尽快闭环 2. 负责yarn上线 sinever: 1. 规划软件包版本的选型策略 2. 规划软件包的更新策略 3. 负责TensorFlow上线 Hubble Zhu QQ:      403975152 TEL:     18565630552 E-mail: 403975152(a)qq.com   ------------------ 原始邮件 ------------------ 发件人: "朱恒博"<403975152(a)qq.com>; 发送时间: 2020年5月28日(星期四) 上午9:43 收件人: "dev"<dev(a)openeuler.org>;"tc"<tc(a)openeuler.org>;"sig-ai-bigdata"<sig-ai-bigdata(a)openeuler.org>; 主题: 【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-05-28 18:30-19:00 Topic sig-ai-bigdata regular meeting Time 2020-05-28 18:30-19:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 424 821 546   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视； 2. TC例会思想传达 3. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 请点击会议链接按照提示下载Zoom客户端入会，并升级Zoom最新版本。 Please click the conference link and download the Zoom to join the conference, and upgrade to the latest version of Zoom.

1 0