吕敏
- 作品数:40 被引量:63H指数:2
- 供职机构:中国科学技术大学计算机科学与技术学院更多>>
- 发文基金:国家自然科学基金中央高校基本科研业务费专项资金安徽省自然科学基金更多>>
- 相关领域:自动化与计算机技术理学电子电信更多>>
- 一种基于纠删码存储系统的负载均衡修复调度方法
- 本发明公开了一种基于纠删码存储系统的负载均衡修复调度方法,特征是包含对负载均衡状态评估,分批调度重构任务和选择源节点,为不饱和的任务补充源节点的连接,和选择替代节点步骤。本发明方法由于采用更新最大流的方式来动态的选择重构...
- 吕敏徐亮亮李启亮谢灵许胤龙
- 文献传递
- GPU设备间高效内存置换的方法、系统、设备及存储介质
- 本发明公开了一种GPU设备间高效内存置换的方法、系统、设备及存储介质,相关方案中:首先,在有效减轻内存限制的前提下,将数据交换操作(卸载、取回)与模型训练并行,既不引入计算开销,又能隐藏传输时间;其次,高内存负载的GPU...
- 王海权李诚周泉于笑颜吕敏许胤龙
- 一种计算和缓存友好的高效里德-所罗门码编码方法
- 本发明涉及计算机分布式存储系统中的纠删码技术领域,公开了一种计算和缓存友好的高效里德‑所罗门码编码方法。本发明通过拆分数据块和校验块,寻找公共异或部分,计算被匹配的两个校验包。相比于现有的编码流程,兼顾计算高效性和缓存高...
- 吕敏汪威李永坤牛天洋徐亮亮李启亮许胤龙
- 一种求解点到点的最短路径的高效下界算法(英文)被引量:2
- 2014年
- 在许多应用中,实时计算一个源点到一个目的点的最短路径是一个非常重要的问题.学术界已经提出若干下界算法求解点到点的最短路径问题,如A*算法,ALT算法等.这些算法所使用的距离估值比较松散,仍然有很大的提升潜力.ACT算法是一种新的两阶段目标制导下界算法,它组合使用了A*搜索,中心点和三角不等式,并且不依赖于特定领域的先验知识.新算法充分利用了预处理数据,可以获得非常好的距离下界.在真实路网上的实验结果表明,新算法的性能明显优于以往的算法.在某些实例下,最优版本的ACT算法所扩展的顶点数量仅仅比最短路径上的顶点数量多25%左右.
- 张钟吕敏孙广中陈国良
- 关键词:最短路径下界三角不等式
- 一种基于细粒度的内存分配方法
- 本发明公开了一种基于细粒度的内存分配方法,特征是采取虚拟机类型的探测、虚拟机内页面类型的探测、细粒度的差异化页面分配策略和访存感知的内存动态分配策略。由于对虚拟机的类型进行了区分,使得I/O密集型和计算密集型的虚拟机使用...
- 许胤龙刘军明李永坤郭帆李诚吕敏陈吉强
- 文献传递
- 一种微服务应用的openwhisk无服务框架迁移方法
- 本发明公开了一种微服务应用的openwhisk无服务框架迁移方法,利用了Node.js语言的exprima语法解析工具生成抽象语法树节点,并从中提取关键信息来生成函数调用图,微服务子模块间通信图以及判断微服务子模块的性质...
- 余东波金泽文李诚许胤龙吕敏
- 文献传递
- 一种基于数据关联性的分布式文件系统元数据预取方法
- 本发明公开了一种基于数据关联性的分布式文件系统元数据预取方法,特征是采取设计数据关联性的提取方式和存储结构、预取关联文件的元数据、数据关联性的动态反馈和数据关联性的动态更新步骤;与传统的分布式文件系统元数据访问方式相比,...
- 许胤龙陈友旭李诚李永坤吕敏
- 混合存储模式下MapReduce作业调度被引量:4
- 2023年
- 在异构Hadoop集群场景中,为了缓和由于纠删码和副本存储模式混合使用,以及服务器节点本身实时算力差异造成的MapReduce作业处理效率低下的问题,本文实现了一种根据数据存储情况和节点实时负载来在多并发场景下动态调节MapReduce作业任务分配情况的调度策略.该策略通过修改当前Hadoop框架中的数据存储选址策略并对节点任务并发量进行动态控制,在多作业并发时实现更加均衡的作业间资源分配.实验结果表明,相较于Hadoop默认的两种作业调度策略,本文提出的调度模式能够将作业完成时间缩短约17%,并有效避免部分作业面临的饥饿现象.
- 杨振宇牛天洋吕敏
- 关键词:MAPREDUCE作业调度纠删码异构集群云计算负载均衡
- 优化数据加载的图采样训练方法、系统、设备及存储介质
- 本发明公开了一种优化数据加载的图采样训练方法、系统、设备及存储介质,其中,方法、系统、设备及存储介质是一一对应的方案,方案中在训练之前通过压缩特征数据,减少了数据量,大幅降低数据加载的开销,并在不同规模的图数据集上均能维...
- 马煜昕李诚吴思龚平徐伟吕敏许胤龙
- 面向纠删码的高性能冗余转换机制
- 2025年
- 分布式存储系统采用纠删码来实现高可靠和低开销的数据存储.为了提供不同的可靠性和多样的访问性能,存储系统需要对纠删码数据进行冗余转换,即改变其编码参数.条带合并机制为存储系统的冗余转换提供了一种思路.然而,基于传统纠删码的条带合并会在过程中引发大量的数据块重分布和校验块重计算I/O开销,且在多次合并中会进一步加剧I/O.针对此问题,本文提出了一种新的树型里德-所罗门(TRS)码,通过分散数据块以消除数据块重分布I/O,并通过设计编码矩阵以节约校验块重计算I/O.树型里德-所罗门码进一步设计了存储单元,将参与合并的条带组织成一棵树,使得多次合并依据树结构自底向上高效完成.本文设计实现了分布式存储原型系统.实验表明,树型里德-所罗门码相较于传统纠删码,可以大大减少条带合并的完成时间.
- 柏志伟吕敏
- 关键词:纠删码