华为科大创新研讨会——新兴内存管理技术 新兴内存管理技术 远程组合内存 频繁的本地内存回收 访存速度的不对称 昂贵的内存管理 前期工作 内存重删,内存回收,大页内存 内存重山 NUMA感知的内存重删 自适应的内存重删方案 Step1 本地的内存重删 Step2 冷热感知的跨节点内存重删 Step3 基于相似的 2021-03-29 Research 讲座会议 讲座会议
华为科大创新研讨会——新型架构下的纠删码技术研究 新型架构下的纠删码技术研究 引言 纠删的必要性,每时每刻都有节点活动不正常,因而造成的磁盘失效,数据丢失等等 故障恢复优化算法 替代节点只需要和分布数据库块不同即可。 目标:设计源节点与替代节点的选择策略,新选择的节点放置在哪儿? 研究内容三 针对当前随机布局的修复/均衡流量负载 针对分离架构,解耦合 2021-03-29 Research 讲座会议 讲座会议
华为科大创新研讨会——超算应用与复杂网络拓扑优化 超算应用与复杂网络拓扑优化 超算应用与 MPI 通信特征 目前超算应用主要都是 MPI 并行程序 MPI 函数的局域性 计算对象本身决定了数据交换的局域性。 一些并行程序,在并行开始后分配好任务,计算过程中不需要交换信息,仅需要在最后交换,而类似并行矩阵运算则在计算中也需要交换信息。 网络拓扑优化的一些想法 目标:减少数据传输时从源到目的节点的路径长度(超算中主要是跳数决定) 思路 2021-03-29 Research 讲座会议 讲座会议
华为科大创新研讨会——新硬件驱动的存储创新 新硬件驱动的存储创新 主讲人:中科大 李诚 引言 System 的两大推动,其一便是新型硬件,有关计算、网络的革新。 从最开始的软盘->硬盘->闪盘->等等 存储技术日新月异 CPU 和网络的瓶颈体现在,新型硬件的出现,需要革新新的形式 本地 DMA 频繁终端 远程 RDMA 访问被阻碍,需要转换 异构计算 GPT3、Burt 等等深度网络的模型,参数 2021-03-29 Research 讲座会议 讲座会议