资源类型

期刊论文 2035

会议视频 203

会议信息 102

会议专题 4

年份

2024 5

2023 178

2022 222

2021 254

2020 190

2019 185

2018 115

2017 119

2016 88

2015 53

2014 66

2013 63

2012 64

2011 62

2010 55

2009 41

2008 59

2007 77

2006 81

2005 79

展开 ︾

关键词

工程管理 60

2020 42

人工智能 29

大数据 29

智能制造 25

管理 21

能源 19

2019 17

系统工程 14

高性能制造 14

机器学习 13

可持续发展 11

运载系统 11

农业科学 10

力学性能 10

物联网 10

仿真技术 9

工程 9

数据挖掘 9

展开 ︾

检索范围:

排序: 展示方式:

ONFS:面向高性能计算的基于内存、固态硬盘和磁盘的层次混合文件系统 Article

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

《信息与电子工程前沿(英文)》 2017年 第18卷 第12期   页码 1940-1971 doi: 10.1631/FITEE.1700626

摘要: 大规模科学计算、新的工作流应用以及检查点操作均需要存储系统具有非常高的带宽和低延迟,这使得高性能存储系统面临严峻的技术挑战。当前基于磁盘的底层存储系统难以满足新一代Eflops超级计算机和应用的要求。为此,本文提出了基于计算结点内存、固态硬盘和磁盘的层次混合存储系统ONFS (on-line and near-line file system)。它具有三个存储层次和统一的命名空间,支持可移植操作系统接口(portable operating system interface, POSIX)协议,可提供高带宽、低延迟和超大存储容量。本文详细分析了分布数据管理、内存借用和归还策略、数据一致性、并行访问控制,以及向下迁移和向上主动预迁移机制。在天河一号超级计算机上实现了ONFS原型系统,测试了I/O (input/output)性能和可扩展性。测试结果表明,单线程和多线程读/写性能比基于磁盘的Lustre分别高出6倍和5倍。

关键词: 高性能计算层次混合存储系统分布数据管理数据迁移    

SA-RSR:一种适用于异或类纠删码分布存储系统数据读取最优恢复方法 Research Articles

张兴军1,梁宁静1,刘云飞1,张长江1,李洋2

《信息与电子工程前沿(英文)》 2022年 第23卷 第6期   页码 858-875 doi: 10.1631/FITEE.2100242

摘要:

冗余策略经常被用于分布存储系统,以保证数据的可靠性与可用性。纠删码是一种代表性的冗余策略,具有低存储开销优势,这种优势促进了它在分布存储系统中的应用。在各种纠删码机制中,异或类纠删码凭借高计算效率变得越来越流行。采用异或类纠删码机制的存储系统,如果发生单节点故障,便会进行数据恢复,该过程需要从幸存节点中下载数据,然后恢复故障节点中的数据。然而,数据恢复过程中的数据传输通常需要相当长时间。目前研究主要集中在通过减少数据恢复过程所需数据量,减少数据传输所需时间,但存在复杂度高和局部最优解等问题。SA-RSR利用模拟退火技术寻找读取和传输最少数据量的最优恢复机制,且该搜索过程可在多项时间内完成。最后,为验证该方法的有效性,使用多种异或类纠删码进行仿真验证,并在真实存储系统Ceph中验证。实验结果表明,与传统恢复方法相比,SA-RSR减少了30%的数据读取与传输量,提高了20.36%的数据恢复性能

关键词: 分布存储系统数据可靠性与可用性;异或类纠删码;单节点失效;数据恢复    

基于梯度跟踪和分布重球加速的分布随机优化算法 Research Articles

孙碧皓1,胡锦辉1,夏大文2,李华青1

《信息与电子工程前沿(英文)》 2021年 第22卷 第11期   页码 1463-1476 doi: 10.1631/FITEE.2000615

摘要: 由于在机器学习和信号处理中的广泛应用,近年来分布优化得到良好发展。本文致力于研究分布优化以求解目标函数全局最小值。该目标是分布在 个节点的无向网络上的平滑且强凸的局部成本函数总和。与已有工作不同的是,我们使用分布重球项以提高算法的收敛性能。为使现有分布随机一阶梯度算法的收敛加速,将动量项与梯度跟踪技术结合。在真实数据集上的数值实验证明了该算法的有效性和正确性。

关键词: 分布优化;高性能算法;多智能体系统;机器学习问题;随机梯度    

具有冗余结构的分布数据库服务器及其负载平衡模型

田俊峰,刘玉玲,杜瑞忠

《中国工程科学》 2004年 第6卷 第6期   页码 35-42

摘要:

服务器冗余技术在解决传统分布环境的可用性和性能瓶颈问题的同时给系统管理带来了新的挑战。介绍了一种分布数据库服务器的构成原理及工作模型,重点讨论了它的冗余关系、基于移动代理的负载平衡模型及其性能分析等。

关键词: 分布数据    冗余     负载平衡     移动代理     性能分析    

数据存储技术综述 Review

Aisha SIDDIQA, Ahmad KARIM, Abdullah GANI

《信息与电子工程前沿(英文)》 2017年 第18卷 第8期   页码 1040-1070 doi: 10.1631/FITEE.1500441

摘要: 对于容量快速增长、日趋多元化的大数据,业界亟需开发可行性更好的存储工具。为满足大数据存储需求,存储机制已经形成从传统数据管理系统到NoSQL技术的结构化转移。截至目前,亚马逊、谷歌和阿帕奇等公司形成了大数据存储方案的行业标准,但尚未有关于大数据存储技术性能和容量提升的深入调查和文献报告。本文旨在对目前可用于大数据的最先进的存储技术进行全面调查,提供了一个明确的大数据存储技术分类方法,以帮助数据分析师和研究人员了解和选择更适合其需求的存储机制。我们使用布鲁尔的CAP定理比较和分析了现有存储方法,评估了不同存储架构的性能,讨论了存储技术的意义、应用及其对其他类别数据的支持。为了加快部署可靠和可扩展的存储系统,文中还突出了未来研究面临的几个挑战。

关键词: 数据;大数据存储;NoSQL数据库;分布数据库;CAP定理;可扩展性;一致性-分区弹性;可用性-分区弹性    

数据分布机器学习的策略与原则 Review

Eric P. Xing,Qirong Ho,Pengtao Xie,Dai Wei

《工程(英文)》 2016年 第2卷 第2期   页码 179-195 doi: 10.1016/J.ENG.2016.02.008

摘要:

数据的发展已经引领了对能够学习包含数百万至数十亿参数的复杂模型的机器学习系统的新需求,以保证足够的能力来消化海量的数据集,提供强大的预测分析(如高维潜特征、中介表示和决策功能)。为了在这样的尺度上,在成百上千台的分布机器集群中运行机器学习算法,关键往往是要投入显著的工程性的努力——有人可能会问,这样的工程是否还属于机器学习的研究领域?考虑到如此“大”的机器学习系统可以极大地从根植于机器学习的统计和算法的理解中受益——因此,机器学习的研究人员应该不会回避这样的系统设计—&mdash它们关注的是机器学习研究传统上注意较少的四个关键问题:一个机器学习程序怎样能分布到一个集群中去?机器学习计算怎样能通过机器间的交流连接起来?这样的交流是如何被执行的?机器间应该交流的内容是什么?通过揭示机器学习程序所独有的,而非常见于传统计算机程序中的基础性的统计和算法上的特点,并通过剖析成功案例,以揭示我们如何利用这些原则来同时设计和开发高性能分布机器学习软件以及通用的机器学习框架,我们为机器学习的研究人员和从业者提供了进一步塑造并扩大机器学习与系统之间的领域的机会

关键词: 机器学习     人工智能大数据     大型模型     分布系统     原则     理论     数据并行性     模型并行性    

数据驱动的信息物理生产系统——迈向安全、高效、分布智能制造 Perspective

Manu Suvarna, Ken Shaun Yap, 杨文韬, 李君, Yen Ting Ng, 王笑楠

《工程(英文)》 2021年 第7卷 第9期   页码 1212-1223 doi: 10.1016/j.eng.2021.04.021

摘要:

随着工业4.0 和智能制造等概念和系统的普及,传统制造业将见证向新模式的转型,以更好地响应用户的需求并实现安全、高效、智能化的操作。在此背景下,本文聚焦于信息物理生产系统(CPPS)的概念,从整体上阐述了CPPS在这一产业转型中的三个关键驱动作用,即数据驱动的生产系统分布的智能制造和保证数据安全的集成区块链技术。通过这三个方面的具体技术和系统实现,基于数据驱动的建模和优化,智能信息物理系统将助力流程工业和制造业转型。同时,分布的智能制造可以更高效地实现产业升级和低碳化发展。区块链技术可以进一步确保数据共享的可靠性和安全性,实现跨子系统的整合。本文详细分析了最近发表的文献研究和行业相关案例支持,并对现有挑战和发展方向进行了总结展望。

关键词: 智能制造     信息物理生产系统     工业物联网     数据分析     分布系统     区块链    

勘误:ONFS:面向高性能计算的基于内存、固态硬盘和磁盘的层次混合文件系统 None

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

《信息与电子工程前沿(英文)》 2018年 第19卷 第2期 doi: 10.1631/FITEE.17e0626

摘要: None

关键词: None    

智能楼宇远程监控系统数据交互研究

段敬民, 王英, 宋永恒, 常辉

《中国工程科学》 2008年 第10卷 第8期   页码 73-75

摘要: 主要讨论了在远程控制智能楼宇中分布技术交互的理论,并构造了一个高效的分布控制网络数据交互服务端。

关键词: 智能楼宇     数据接口     分布     Web Service    

分布能量系统浅析

宋之平

《中国工程科学》 2004年 第6卷 第12期   页码 78-84

摘要:

现代分布能量系统的出现是能源领域涉及可持续发展战略的一件大事。讨论了有关这一系统的一些基本概念,把它定义为“位于或临近用户中心、不以大规模、远距离输送电力为目的并具有环境相容性的电力总能系统”。分布能量系统为热电联产和多联产的有效实施提供了最有利的系统形式,以分布能量系统的方式耗用天然气可提高其经济性和与环境的相容性。认为,从长远的观点应把洁净煤也视为分布能量系统的重要一次能源。选择在发展大型集中式能量系统过程的同时不失时机、因地制宜地发展分布能量系统,把它放在与之并行不悖且相辅相成的地位,以促进我国能源事业的可持续化发展。

关键词: 分布能量系统     可持续发展战略     热电联产     多联产    

工程化DNA材料构建DNA活字系统实现可持续的数据存储 Article

巩子祎, 宋理富, 裴广胜, 董雨菲, 李炳志, 英进

《工程(英文)》 2023年 第29卷 第10期   页码 130-136 doi: 10.1016/j.eng.2022.05.023

摘要:

DNA分子作为一种具有潜力的数据存储绿色材料,具有密度高和保存期长的优势。然而,目前DNA数据存储数据写入依赖于DNA从头合成,写入成本高昂,且产生有害物,限制了其实际应用。在本研究中,我们开发了一种DNA活字存储系统,该系统可以利用由细胞工厂预生产的DNA活字片段进行数据写入。在这个系统中,这些预先生成的DNA片段,在这里称为“DNA活字”,是可重复使用的基本数据单元。通过这个系统,我们成功地将24字节的数字信息编码到DNA中,并通过高通量测序和解码实现了准确读取,这证明了该系统的可行性。通过DNA活字片段的反复使用和生物组装,该系统在降低写入成本方面的潜力非常突出,为经济和可持续的DNA数据存储技术开辟了一条新颖路线。

关键词: 合成生物学     DNA信息存储     DNA活字存储系统     经济性DNA数据存储    

负载均衡的分布指纹识别系统 Article

Yun-xiang ZHAO,Wan-xin ZHANG,Dong-sheng LI,Zhen HUANG,Min-ne LI,Xi-cheng LU

《信息与电子工程前沿(英文)》 2016年 第17卷 第8期   页码 766-780 doi: 10.1631/FITEE.1500487

摘要: 指纹的唯一性和不变性使得它在各类生物识别系统中得到了广泛的应用。随着指纹识别技术的发展,大规模的指纹存储系统高并发的需求给指纹识别系统带来了新的挑战。面对这种挑战,我们设计并实现了一个负载均衡的分布指纹识别系统,它包括分布指纹特征提取子系统分布指纹特征存储系统两部分。在指纹特征提取的过程中,特征提取与Hadoop图片处理接口(HIPI)的结合使得特征提取的效率得到大幅度提升;特征存储系统对MongoDB默认的负载均衡策略进行了优化,使得鲁棒性得到了明显提高。相关的试验和模拟表明,相比于Hadoop默认的小文件处理机制,我们的系统可以在指纹特征提取的过程中减少约70%的处理时间;优化后的MongoDB负载均衡策略可以将分布MongoDB系统的前端mongos负载差距控制在5%以下,基于操作负载(增、删、改、查)的后端数据存储负载均衡策略将由数据迁移带来的时间开销降低了约40%。

关键词: 分布指纹识别系统分布MongoDB;负载均衡    

三峡漂浮物分布供能系统研究

李年君

《中国工程科学》 2010年 第12卷 第6期   页码 99-103

摘要: 在对三峡漂浮物数量和特点的调查和分析基础上,提出了以漂浮物能源化利用为主线,污染物治理和资源回收为两翼的三峡漂浮物生态能源系统路线,通过利用分布能源技术系统可以为用户侧提供更可靠、清洁的高品质能源服务研究结果表明,充分利用三峡漂浮物进行冷热电联供,可以在实现三峡库区污染治理的同时,对三峡漂浮物进行资源化利用,分布供能系统年处理漂浮物4.7×104~9.5×104 t,节能1.3×104~3.6×104 t标煤,投资回收期4.5~8年,具有良好的技术经济性能

关键词: 三峡漂浮物     污染     分布供能    

西堠门大桥结构监测系统的设计与实现(II):系统实现

刘志强,李娜,郭健 ,冯良平,宋刚

《中国工程科学》 2010年 第12卷 第7期   页码 101-106

摘要:

采用“西堠门大桥结构监测系统的设计与实现(I):系统设计”中的设计方法,为西堠门大桥设计并实现桥梁结构监测系统。研究西堠门大桥结构监测系统的总体设计方案、子系统的设计方案及其软硬件的实现。分析西堠门大桥结构监测系统在运营中监测的桥梁荷载和结构响应。研究结果表明,西堠门大桥结构监测系统正常运行,实现了预期设计功能,基于工业以太网分布数据采集与传输系统在桥梁结构监测系统中得以成功应用,可在其他工程中加以推广。

关键词: 桥梁     结构监测系统     工业以太网     分布数据采集系统     系统集成    

DDUC:数据更新与编码解耦的纠删码系统 Research Article

屠要峰1,2,肖蓉2,韩银俊1,2,陈正华2,金浩2,齐学成2,孙辛远2

《信息与电子工程前沿(英文)》 2023年 第24卷 第5期   页码 716-730 doi: 10.1631/FITEE.2200466

摘要: 分布存储系统中,常用的数据冗余方法包括副本和纠删码(erasure code,EC)。相较于副本,EC具有更好的存储效率,但是在更新方面的开销更大。本文介绍了一种将数据更新与EC编码解耦的存储系统,命名为DDUC,并提出了一种副本与校验块结合的放置策略。基于上述策略,实现了一种两阶段数据更新方法,在第一阶段按照副本模式进行数据更新,在第二阶段由校验节点独立完成EC编码。这样在保证高并发性能的同时,解决了并发更新导致的数据可靠性降低的问题。同时利用PMem硬件的字节寻址和8字节原子写特性实现了一种轻量级的日志机制,在提升性能的同时保证了数据的一致性。实验结果表明,和当前主流的存储系统Ceph相比,本文所提出的存储系统并发访问性能提升至1.70–3.73倍,时延仅为Ceph的3.4%–5.9%。

关键词: 并发更新;高可靠性;纠删码;一致性;分布存储系统    

标题 作者 时间 类型 操作

ONFS:面向高性能计算的基于内存、固态硬盘和磁盘的层次混合文件系统

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

期刊论文

SA-RSR:一种适用于异或类纠删码分布存储系统数据读取最优恢复方法

张兴军1,梁宁静1,刘云飞1,张长江1,李洋2

期刊论文

基于梯度跟踪和分布重球加速的分布随机优化算法

孙碧皓1,胡锦辉1,夏大文2,李华青1

期刊论文

具有冗余结构的分布数据库服务器及其负载平衡模型

田俊峰,刘玉玲,杜瑞忠

期刊论文

数据存储技术综述

Aisha SIDDIQA, Ahmad KARIM, Abdullah GANI

期刊论文

数据分布机器学习的策略与原则

Eric P. Xing,Qirong Ho,Pengtao Xie,Dai Wei

期刊论文

数据驱动的信息物理生产系统——迈向安全、高效、分布智能制造

Manu Suvarna, Ken Shaun Yap, 杨文韬, 李君, Yen Ting Ng, 王笑楠

期刊论文

勘误:ONFS:面向高性能计算的基于内存、固态硬盘和磁盘的层次混合文件系统

Xin LIU, Yu-tong LU, Jie YU, Peng-fei WANG, Jie-ting WU, Ying LU

期刊论文

智能楼宇远程监控系统数据交互研究

段敬民, 王英, 宋永恒, 常辉

期刊论文

分布能量系统浅析

宋之平

期刊论文

工程化DNA材料构建DNA活字系统实现可持续的数据存储

巩子祎, 宋理富, 裴广胜, 董雨菲, 李炳志, 英进

期刊论文

负载均衡的分布指纹识别系统

Yun-xiang ZHAO,Wan-xin ZHANG,Dong-sheng LI,Zhen HUANG,Min-ne LI,Xi-cheng LU

期刊论文

三峡漂浮物分布供能系统研究

李年君

期刊论文

西堠门大桥结构监测系统的设计与实现(II):系统实现

刘志强,李娜,郭健 ,冯良平,宋刚

期刊论文

DDUC:数据更新与编码解耦的纠删码系统

屠要峰1,2,肖蓉2,韩银俊1,2,陈正华2,金浩2,齐学成2,孙辛远2

期刊论文