新型大规模先进计算系统关键技术研究众核系统（基础研究）：众核处理器模拟/仿真（性能分析）片上/板级智能系统编译/编程模型、调度管理并行应用调试与可视化精简高效虚拟机软件 数据存储与管理：(1) 大规模非结构化数据存储与管理随着信息技术的迅猛发展，据IDC预测，现在全球数据量每18个月就要翻一番，每年全球产生的数据量已经高达40EB(1EB=1000PB)。而

存储系统具有如下特点：数据安全，超强的可扩展性，按照使用收费，可跨不同应用，自动切换故障，易于管理等。云存储主要应用于备份、归档、分配和共享协作等四大领域。    云存储是在云计算概念上延伸和发展出来的一个新概念，是指通过集群应用、网格技术或分布式文件系统等功能，将网络中大量各种不同类型的存储设备通过应用软件集合起来协同工作，共同对外提供数据存储和业务访问功能的一个系统。当云计算系统运算和

ssize_t sendfile(int out_fd, int in_fd, off_t *offset, size_t count);linux下支持sendfile,这样发送文件，可以直接通过内核调用，减少了到应用程序读写两道操作程序，并降低了内存的使用。看man文档，sendfile在2.6.9以后，infd只能是普通文件，outfd必须是socket。经过试验，在linux9

1. Challenges of Hadoop + HDFSHadoop cannot make task is data local absolutelySave big MapTask outputs in local Linux file system will get OS/disk I/O bottleneckReduce node need to use HTTP to s

文件权限控制篇access，alphasort，chdir，chmod，chown，chroot，closedir，fchdir，fchmod，fchown，fstat，ftruncate，getcwd，link，lstat，opendir，readdir，readlink，remove，rename，rewind

String.matches()的用法2007-07-16 20:30String.matches() 这个方法主要是返回是否匹配指定的字符串，如果匹配则为true,否则为false;如：/**   * 判断字符创是否是一个有效的日期   *    * @param theStr   * @return true 是，false否   */

并行虚拟文件系统（PVFS）PVFS [2]（Parallel Virtual File System）项目是Clemson大学为了运行Linux集群而创建的一个开源项目，因此，PVFS也无需特别的硬件设备。普通的能运行Linux系统的PC机即可。PVFS现已被广泛地使用，很多分布式文件系统都是以PVFS为基础架构而设计实现的[3]，比如国内的浪潮并行文件系统。目前的版本是第二版[4]。

当计算任务越来越多，作业提交越来越多，企业普通的做法是，在原有的系统架构上，不停地往上堆积硬件或者加服务器。的确，hadoop设计上的优秀和可扩展性可以方便的让集群管理员对集群增删机器，所以当集群计算资源紧缺，又有空闲的机器可用时，集群管理员很容易想到给集群加机器来解决这个问题，因为集群的计算槽位增多了，Jobtracker能调度的槽位也多了，集群里能并行的map数和reduce数也增多了。但