JOURNAL OF LIGHT INDUSTRY

CN 41-1437/TS  ISSN 2096-1553

海量并行处理系统的大数据读写接口优化研究

文必龙 ,  宗文栋

downloadPDF
文必龙, 宗文栋. 海量并行处理系统的大数据读写接口优化研究[J]. 轻工学报, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
引用本文: 文必龙, 宗文栋. 海量并行处理系统的大数据读写接口优化研究[J]. 轻工学报, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
shu
WEN Bi-long and ZONG Wen-dong. Research on interface optimization for reading and writing large data of massive parallel processing system[J]. Journal of Light Industry, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
Citation: WEN Bi-long and ZONG Wen-dong. Research on interface optimization for reading and writing large data of massive parallel processing system[J]. Journal of Light Industry, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
shu

海量并行处理系统的大数据读写接口优化研究

  • 东北石油大学 计算机与信息技术学院, 黑龙江 大庆 163318

  • 基金项目: 国家863计划,国家重大专项(2006AA09A102-15)

  • 中图分类号: TP311

Research on interface optimization for reading and writing large data of massive parallel processing system

  • School of Comp. and Infor. Tech., Northeast Petroleum Univ., Daqing 163318, China

  • Received Date: 2012-02-12
    Available Online: 2012-05-15

    CLC number: TP311

  • 摘要: 针对MPS系统中数据文件管理混乱、文件读写速率低的问题,采用道集流方式进行数据流程控制,并使用超时机制、数据库连接池和内存映射等技术对系统进行优化.测试结果表明,优化后的系统数据管理有序、文件读写速度显著提高.
    Abstract: Aiming at the problems such as disorderly management of data file and low literacy rate in MPS,the system was optimized adopting the way collecting pattern for data flow control,and using the timeout mechanism,database connection pool and memory mapping technology.Test results showed that data managed orderly and file reading and writing speed increased in the optimized system.
    1. [1]

      李艳坤 , 张伟 , 刘彦伶 . 数据融合策略在食用油真实性鉴别中的研究与应用进展. 轻工学报, 2024, 39(5): 50-59. doi: 10.12187/2024.05.006

  • 加载中
WeChat 点击查看大图
计量
  • PDF下载量:  20
  • 文章访问数:  823
  • 引证文献数: 0
文章相关
  • 收稿日期:  2012-02-12
  • 刊出日期:  2012-05-15
通讯作者: 陈斌, bchen63@163.com
  • 1. 

    沈阳化工大学材料科学与工程学院 沈阳 110142

  1. 本站搜索
  2. 百度学术搜索
  3. 万方数据库搜索
  4. CNKI搜索
文必龙, 宗文栋. 海量并行处理系统的大数据读写接口优化研究[J]. 轻工学报, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
引用本文: 文必龙, 宗文栋. 海量并行处理系统的大数据读写接口优化研究[J]. 轻工学报, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
shu
WEN Bi-long and ZONG Wen-dong. Research on interface optimization for reading and writing large data of massive parallel processing system[J]. Journal of Light Industry, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
Citation: WEN Bi-long and ZONG Wen-dong. Research on interface optimization for reading and writing large data of massive parallel processing system[J]. Journal of Light Industry, 2012, 27(3): 28-30,48. doi: 10.3969/j.issn.1004-1478.2012.03.007
shu

海量并行处理系统的大数据读写接口优化研究

  • 东北石油大学 计算机与信息技术学院, 黑龙江 大庆 163318
  • 收稿日期: 2012-02-12
  • 网络出版日期: 2012-05-15
基金项目:  国家863计划,国家重大专项(2006AA09A102-15)

摘要: 针对MPS系统中数据文件管理混乱、文件读写速率低的问题,采用道集流方式进行数据流程控制,并使用超时机制、数据库连接池和内存映射等技术对系统进行优化.测试结果表明,优化后的系统数据管理有序、文件读写速度显著提高.

English Abstract

相关文章 (1)

目录

/

返回文章

网站版权 © 轻工学报编辑部

地址：河南省郑州市科学大道136号邮编：450001

本系统由北京仁和汇智信息技术有限公司开发 技术支持： info@rhhz.net