本次sig会议议程：

1、强化学习算法调研与分享，汇报人：songmingcong
2、新增调优示例方法介绍，汇报人：hanxinke

与会人：A-Tune sig组成员

感谢与各位的线上交流！

会议纪要：

songmingcong：

1、强化学习算法基础知识讲解，例如对agent、policy、reward的一些概念讲解

2、介绍了三种RL agent类型：基于价值的agent、基于策略的agent、基于两者结合的actor-critic agent

3、着重介绍了DQN、DDPG算法的原理

4、介绍了强化学习在实际场景中的使用示例：CDBTune数据库调优、FIRM微服务资源管理框架

hanxinke：

1、介绍了离线调优过程中如何新建一个调优示例以及代码存放路径：A-Tune/examples/tuning

2、介绍了基于离线调优过程中server yaml配置文件的编写规范以及文件存放路径：A-Tune/tuning/yamls

3、从代码层面讲解了离线调优的整个原理和过程，并对重要参数选择的实现做了介绍

问题交流以及下一步计划：

1、强化学习中对状态state以及执行动作action的选择非常重要，如何选择是当前利用强化学习算法调优过程中遇到的一个难题

2、内核升级不会影响到A-Tune整体框架的运行，但若内核代码修改了某些os配置信息，例如删除了某个配置，此时A-Tune的参数配置模块可能要进行适配

3、A-Tune当前在虚拟机、物理机上面都能运行，容器环境暂未支持，已经安排计划准备支持

4、A-Tune在centos、redhat上面的支持经过初步验证，一些python子包可以使用pip命令下载，感兴趣的社区开发者也可以参与到其他操作系统的适配工作中

5、华南理工大学介绍了新的参数选择方法，sig组对该算法的实现做了探讨

下次sig会议议程：（预计时间：2020-12-18 10:00-12:00）

欢迎大家将想要了解的内容或者讨论的议题发送到a-tune@openeuler.org邮箱！

敬请期待

发件人: hanxinke
发送时间: 2020年12月2日 16:25
收件人: 'a-tune' <a-tune@openeuler.org>; 'dev@openeuler.org' <dev@openeuler.org>; 'houzhx@nwpu.edu.cn' <houzhx@nwpu.edu.cn>; 'zhangmiao@iscas.ac.cn' <zhangmiao@iscas.ac.cn>; 'xujj@suda.edu.cn' <xujj@suda.edu.cn>; '20研李俊祺' <2506534280@qq.com>; 'ada_zhao@njust.edu.cn' <ada_zhao@njust.edu.cn>; 'jiangxianliang@nbu.edu.cn' <jiangxianliang@nbu.edu.cn>; 'xiaochu.chen@suwell.cn' <xiaochu.chen@suwell.cn>; '417665825@qq.com' <417665825@qq.com>; '1152071778@qq.com' <1152071778@qq.com>; 'tanghaixu333@163.com' <tanghaixu333@163.com>; '154601041@csu.edu.cn' <154601041@csu.edu.cn>; 'liaowei@kylinos.com.cn' <liaowei@kylinos.com.cn>; 'shiyong@kylinos.com.cn' <shiyong@kylinos.com.cn>; 'sunlijie@kylinos.com.cn' <sunlijie@kylinos.com.cn>; 'daihongjian666@163.com' <daihongjian666@163.com>; 'huangchenlin76@gmail.com' <huangchenlin76@gmail.com>
主题: A-Tune & wisdom sig meeting Time: 2020-12-04 10:00-12:00

您好！

openEuler A-Tune SIG 邀请您参加 2020-12-04 10:00 召开的ZOOM会议

会议主题：A-Tune & wisdom sig meeting

会议内容：本次sig会议议程：
1、强化学习算法调研与分享，汇报人：songmingcong
2、新增调优示例方法介绍，汇报人：hanxinke

会议链接：https://zoom.us/j/92930493562?pwd=dEE4bnRBRDZKbVhwVDk2Zm5PdFVBQT09

欢迎大家提交议题~

Hello!

openEuler A-Tune SIG invites you to attend the ZOOM conference will be held at 2020-12-04 10:00,

The subject of the conference is A-Tune & wisdom sig meeting,

There are two topics for the conference.

1. Reinforcement learning algorithm survey and sharing

2. Describe how to add optimization examples.

You can join the meeting at https://zoom.us/j/92930493562?pwd=dEE4bnRBRDZKbVhwVDk2Zm5PdFVBQT09.

Welcome to submit your topics. Thanks.