July 2020 - Sig-ai-bigdata - mailweb.openeuler.org

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-30 18:30-19:30
by Hubble_Zhu 31 Jul '20

31 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-30 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 767 812 702   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作与计划 3. 其他申报议题   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 1

bazel可以避免二进制从源码进行编译
by 李智博 28 Jul '20

28 Jul '20

bazel 可以从源码进行适配openeuler 依赖是 openjdk-8 & openjdk-11 目前可以适配openjdk-8 但evething中目前提供的版本是java-1.8.0-openjdk-1.8.0.242.b08-1.h5.oe1.aarch64格式的rpm，与bazel不兼容，我们是需要引进openjdk-8&-11 参考：https://docs.bazel.build/versions/3.4.0/install-compile-source.html#download-distfile | | 李智博 | | lzb15204493106lzb(a)163.com | 签名由网易邮箱大师定制

1 0

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-22 19:00-20:00
by Hubble_Zhu 27 Jul '20

27 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-22 19:00-20:00((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 387 021 111   Convener 朱恒博   Agenda 1. SIG成员前期工作审视 2. 下一步工作计划和分工   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

4 4

【Meeting Notice】sig-ai-bigdata regular meeting Time: 2020-07-30 18:30-19:30
by Hubble_Zhu 27 Jul '20

27 Jul '20

Topic sig-ai-bigdata regular meeting Time 2020-07-30 18:30-19:30((UTC+08:00)Beijing)   Join Conference Join (External) >> Meeting ID 767 812 702   Convener Hubble_Zhu   Agenda 1. sig成员前期工作审视 2. 下一步工作与计划 3. 其他申报议题   Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download

1 0

my eml
by 李智博 26 Jul '20

26 Jul '20

1 0

需要的big data软件包
by hao zhang 24 Jul '20

24 Jul '20

大家好，这是我最近在看的。https://bigtop.apache.org/ 它主要包含big data 一些框架的packing 和testing. rpm packing 包含的: - alluxio - ambari - bigtop-groovy - bigtop-jsvc - bigtop-tomcat - bigtop-utils - elasticsearch - flink - flume - giraph - gpdb - hadoop - hbase - hive - ignite-hadoop - kafka - list - livy - logstash - mahout - oozie - phoenix - qfs - solr - spark - sqoop - sqoop2 - tez - ycsb - zeppelin - zookeeper smoke test 包含的： - alluxio - ambari - elasticsearch - flink - flume - giraph - gpdb - hbase - hcfs - hdfs - hive - ignite-hadoop - kafka - kms - livy - logstash - mahout - mapreduce - odpi-runtime - oozie - phoenix - qfs - solr - spark - sqoop - tez - yarn - ycsb - zeppelin - zookeeper smoke test 是在docker上运行的。暂时还没有详细研究。据我了解，目前我们已经有了spark, flink, hbase, spark, zookeeper, kafka. 大家觉得剩下的哪些还比较重要些？我可以参考bigtop做相应的rpm包。下次我们可以讨论以下如何加入测试？谢谢， hao

2 1

Re: 回复：参加SIG组疑问
by 正心 24 Jul '20

24 Jul '20

你好。目前感知到也有另一家在申请合入opencv相关代码，不知道你们是不是一家公司，你们会不会有版本冲突。你可以在下次例会上报个议题，议题讨论下，避免重复工作量。祝好。在 2020-07-21 11:55:39，"谌勇武" <cscyu226(a)163.com> 写道：目前由于公司规划，计划将公司应用迁移到OpenEuler服务器上面，但是我们的应用需要使用到OpenCV 我们在考虑，我们合入参与到社区，但是还没有项目，我们应该怎么做？是否可以跟申请，然后我们拉分支，合入，你们审核还是说，你们已经有计划，在合入OpenCV了，如果是这种情况的话，是否有具体的时间点? 在 2020-07-21 11:02:51，"正心" <sinever(a)126.com> 写道：社区是开放的，欢迎任何遵守规则的人加入。你可以简单介绍下自己的情况和具体的问题吗。另外我们有微信群和例会也欢迎参加。 | | 正心 | | 邮箱：sinever(a)126.com | 签名由网易邮箱大师定制在2020年07月21日 10:25，谌勇武写道：您好！由于我需要在OpenEuler上面使用OpenCV，如果我希望能将OpenCV 做迁移适配，是否可以加入适配的软件包列表中？

1 0

议题会议纪要看大家是否有补充答复: [Tc] 【Meeting Notice】openEuler TC meeting Time: 2020-07-22 10:00-12:00
by 正心 22 Jul '20

22 Jul '20

议题 1、 SIG-AI-BIGDATA在实际运作过程中遇到的java应用的jar依赖问题的解决方案。会议纪要： • 熊博： • 建议先和基础设施组沟通放开obs构建时访问外网； • 搭建镜像做为长期目标，先调研； • 调研是否有检测jar合规的开源或商用工具； • Haibo luo： • 商业软件对依赖的jar有检查，现有开源软件可以方便搭建私服； • Jianmin wang： • 基础包(maven/ant)是否可以使用maven方式构建，需要能够自包含； • 欣慰： • 方案三有可能引入不可靠的jar • openEuler里不引入二进制是为了源码可追溯，当上游变化时有能力独立维护、演进。JAVA语言使用jar，jar如果可以追溯，可以看成源码，如果有混淆或者jni需要单独考虑； • 结论： • 短期先放开obs访问外网使能java应用构建； • 长期考虑构建openEuler镜像源，方便后期开发者； • 基础包(maven/ant)先按照自包含原则构建，有问题再讨论； From: "Meeting Book"<uMeeting(a)huawei.com> Date: Mon, Jul 20, 2020 09:16 AM To: "tc"<tc(a)openeuler.org>; Subject: [Tc] 【Meeting Notice】openEuler TC meeting Time: 2020-07-22 10:00-12:00 Topic openEuler TC meeting Time 2020-07-22 10:00-12:00((UTC+08:00)Beijing) Join Conference Join (External) >> Meeting ID 291 038 958 Convener 王勋 Tips: Dial the access number to join conference 注：仅支持部分国家和地区。( Only some countries and regions are supported.) 如果加入会议提示“会议已结束或会议号不存在”，请在官网下载最新版本入会。立即下载 If a message is displayed, indicating that the meeting has ended or the meeting ID does not exist, download the latest meeting client and try again.Download | | 正心 | | 邮箱：sinever(a)126.com | 签名由网易邮箱大师定制

1 0

参加SIG组疑问
by 谌勇武 20 Jul '20

20 Jul '20

您好！由于我需要在OpenEuler上面使用OpenCV，如果我希望能将OpenCV 做迁移适配，是否可以加入适配的软件包列表中？

1 0

[FROM SIG-AI-BIGDATA]例会议题申请
by 正心 18 Jul '20

18 Jul '20

TC：申请在例会上讨论下SIG-AI-BIGDATA在实际运作过程中遇到的java应用(hadoop/spark/flink/hbase/hive/kafka)的jar依赖问题的解决方案。不知是否合适。祝好。

1 0