北京时间2024年1月26日,,,,,,第十二期优德官网-TNSE团结优异讲座系列运动在线上乐成举行。。。。。。此次,,,,,,我们有幸约请到英属哥伦比亚大学的Vincent Wong教授先容个性化联邦学习及其在360°视频流媒体中的应用,,,,,,并分享他在这个领域内的效果与有趣发明。。。。。。
本次讲座由 优德官网 副院长兼群体智能中心主任、香港中文大学(深圳)协理副校长、校长讲座教授、IEEE TNSE主编黄建伟教授担当执行主席和主持人。。。。。。
与古板的二维(2D)视频相比,,,,,,360°视频流媒体可以为用户提供身临其境的寓目体验,,,,,,同时也对带宽提出了更高的要求。。。。。。然而,,,,,,在任何时刻,,,,,,360°视频的寓目者都只能从一个偏向来举行感知,,,,,,其中寓目者在任何给准时间寓目的视频区域称为视口。。。。。;;;;;;诖,,,,,,Vincent Wong教授及其相助者思量个性化联邦学习在360°视频流媒体中的应用,,,,,,聚焦于研究要害性问题:怎样在思量小我私家寓目行为(个性化)的情形下有用使用无线网络带宽,,,,,,为用户提供更好的体验。。。。。。
Vincent Wong教授首先探讨了个性化联邦学习的数据异构性问题。。。。。。为了缓解数据异构性,,,,,,现有的个性化联邦学习算法通;;;;;;崾褂醚诼搿!!。。。Vincent Wong教授及其相助者首先证实随机掩码的使用可能会导致联邦学习训练模子泛起误差。。。。。。为此,,,,,,研究提出了一种具有优化掩码向量的个性化联邦学习算法——PerFedMask,,,,,,从而资助各个异构装备在训练前凭证其盘算能力获取优化的掩码向量,,,,,,并在训练后举行微调(Fine-tuning)。。。。。。与现有算法相比,,,,,,PerFedMask算法在微调后展现了更好的测试精度和更快的收敛速率。。。。。。
针对360°视频流媒体带宽需求的挑战,,,,,,Vincent Wong教授及其相助者思量在无线系统中使用太赫兹(THz)频段以知足高数据传输速率。。。。。。为解决系统中的自壅闭(self-blockage),,,,,,研究探讨了怎样通过多个多天线接入点(APs)实现太赫兹360°视频流。。。。。。详细而言,,,,,,Vincent Wong教授及其相助者提出了一种基于内容的视口展望框架,,,,,,使用个性化联邦学习算法训练用户的头部运动展望模子。。。。。。借助准确的视口展望,,,,,,确定包管用户体验(QoE)的视频块,,,,,,并在接入点为这些块设定异步比特率,,,,,,举行波束成形设计。。。。。。为解决动态太赫兹链路毗连的异步决议问题,,,,,,Vincent Wong教授将比特率选择和波束成形的优化问题建模为宏观行动疏散部分可视察马尔可夫决议历程(MacDec-POMDP),,,,,,并进一步提出两种基于多智能体演员-谈论家(actor-critic)要领的深度强化学习(DRL)算法,,,,,,以及给出了一个分层学习框架来训练该网络。。。。。。与基准算法相比,,,,,,该要领可以在360°视频流媒体应用中提供更高的用户体验。。。。。。
Vincent Wong教授的精彩分享发人深思,,,,,,在加入者与两位教授的起劲讨论中,,,,,,涌现了许多有趣的问题。。。。。。例如,,,,,,差别化视频块考量,,,,,,异步聚合联邦学习等。。。。。。
*特殊鸣谢李想对本文的孝顺
