在Windows环境下的实现方法   使用fsutil命令,在windows xp和win 7下应该都自带了这个命令.命令的格式是 fsutil file createnew 新文件名 文件大小.例如生成一个1K大小的文件,可以使用 fsutil file createnew test.txt 1024 可以使用dir 文件名 的方式查看生成的文件大小.操作结果如下图所示 如果用记事本打开生成的test.txt文件,记事本显示的内容为空.这是因为文件是通过二进制的方式写入的,并且二进制的内容恰好

block大小和单个文件最大容量的关系(文章来自鸟哥的Linux私房菜http://vbird.dic.ksu.edu.tw/linux_basic/0230filesystem_1.php#ps2) 我们约略来分析一下 inode / block 与文件大小的关系好了.inode 要记录的数据非常多,但偏偏又只有 128bytes 而已, 而 inode 记录一个 block 号码要花掉 4byte ,假设我一个文件有 400MB 且每个 block 为 4K 时, 那么至少也要十万笔 blo

读文件: 传统的读法.所有读出,按行处理: fp=open("./ps.txt", "r"); alllines=fp.readlines(); fp.close(); for eachline in alllines: print eachline 推荐读取方法,使用文件迭代器 , 每次仅仅读取和显示一行.读取大文件时应该这样: fp=open("./ps.txt", "r"); for eachline in fp: pr

# dd if=/dev/zero of=50M.file bs=1M count=50在当前目录下生成一个50M的文件 虚拟块设备文件更通用的名称是硬盘镜像文件(Hard Disk Image),但不是所有的硬盘镜像文件都是虚拟块设备文件,例如,目前Ghost的GHO格式的镜像文件就不能成为虚拟机中的硬盘. Linux的dd命令,用来生成虚拟块设备文件.既可以用于创建空镜像文件,也可以用于创建物理硬盘的镜像. # dd if=/dev/hda0 of=/home/oldsong/hda0.im

1.命令简介 dd 的主要选项: 指定数字的地方若以下列字符结尾乘以相应的数字: b=512, c=1, k=1024, w=2, xm=number m if=file #输入文件名,缺省为标准输入. of=file #输出文件名,缺省为标准输出. ibs=bytes #一次读入 bytes 个字节(即一个块大小为 bytes 个字节). obs=bytes #一次写 bytes 个字节(即一个块大小为 bytes 个字节). bs=bytes #同时设置读写块的大小为 bytes ,可代替

1.enconv文件名编码转换,比如要将一个GBK编码的文件转换成UTF-8编码,操作如下 enconv -L zh_CN -x UTF-8 filename enconv -L GB2312 -x UTF-8 test.txt 2.convmv文件名编码转换: 从Linux往windows拷贝文件或者从windows往Linux拷贝文件,有时会出现中文文件名乱码的情况,出现这种问题的原因是因为,windows的文件名中文编码默认为GBK,而Linux中默认文件名编码为UTF8,由于编码不一致,

本文将介绍怎样读取一个分区的superblock: 1. 首先我们查看一下在磁盘上有哪些分区,通过fdisk -l 这里有三个分区,我们下面查看/dev/sda3(这是一个device file) 2. 从/dev/sda3拷贝1024B-2048B(这就是superblock的位置)到一个叫superblock的文件 这里我们用到了dd这个工具,它在对磁盘进行这样读写操作时非常有用,具体请见man. bs=1k 每次读写的块大小 skip=1 偏移多少块开始读(这里块为bs=1k,偏移1,表示

集群搭建好之后网络,raid卡策略,磁盘都会影响集群的性能.为了避免因上述问题使得集群的性能受到影响,我们依次进行测试,最后得到基本的集群性能. 网络 首先是网络,ceph集群一大堆让人摸不着头脑的问题都出在网络上,所以我们在建立集群之前就可以测试网络,看其是否有问题,可以通过ping命令来测试网络的连通性,但最好使用iperf,测试下网络传输速度. 遇到有不少现场情况,因为光模块导致万兆网络只有百兆的速度,如果等集群建好之后性能不如意,花费大量时间排查发现是这个问题就太冤了. iperf命令

问:看了一些关于dd和cp的命令,但是我始终无法明白dd和cp之间有什么不同?不是都可以看成是备份的作用么?还有什么区别呢?答:1.dd是对块进行操作的,cp是对文件操作的. 2.比如有两块硬盘,要将第一块硬盘内的数据复制到第二块硬盘上 dd if=/dev/hda of=/dev/hdc bs=4 count=1024 bs表示每次复制的块大小 count表示要复制的次数 这样第二块硬盘的数据布局和第一块是完全一样的(扇区级别,每块扇区上的数据和第一块硬盘都是一样的) cp只是将第一个硬盘的数

startx:在命令行模式下输入会进入图形界面 exit:注销Linux(以login shell登录会注销账号,以non-login shell登录会退出终端) data:显示日期和时间 data +%Y/%m/%d:以“年/月/日”的格式显示日期 sync:数据从内存写入磁盘 shutdown -h now:立即关机 reboot:重启 init n:切换执行等级 chgrp [-R] 组名 文件/目录:改变文件的用户组 chown [-R] 账号名 文件/目录:改变文件的所有者 chown

/*------------------------ FileInputStream: ....//输入流,字节流 ....//从硬盘中存在的一个文件中读取内容,读取到程序中 ....//read()方法:从此输入流中读取一个数据字节 ....//read(byte[] b)方法:从此输入流中将最多b.length个字节的数据读入一个字节数组中 --------------------------*/ package pack01; import java.io.*; public class

近期,线上一些内存占用比較敏感的应用.在訪问峰值的时候,偶尔会被kill掉,导致服务重新启动.发现是Linux的out-of-memory kiiler的机制触发的. http://linux-mm.org/OOM_Killer oom kiiler会在内存紧张的时候,会依次kill内存占用较高的进程,发送Signal 15(SIGTERM).并在/var/log/message中进行记录.里面会记录一些如pid,process name.cpu mask,trace等信息,通过监控能够发现类似

树莓派3B上手一二 早些时间心血来潮买过一个树莓派,但是当时只是玩一玩,买来按照网上的教程摆弄了一下就闲置了.最近毕业设计,做时序数据分析的相关的工作,刚好想起能够用到树莓派+Node-RED来生成模拟的时序数据.于是开始搭建相关的环境.特此记录一下. 系统镜像下载 树莓派如今已是一个状态的生态圈.其本身有Linux定制的发行版树莓派系统.首先官网去下载系统系统镜像: 上面有两个版本左边是带有图形界面的,右边是没有图形界面的.个人推荐不带图形界面的,既然是玩树莓派的,我想大多数还是有一定Linu

1.概述 hadoop集群中文件的存储都是以块的形式存储在hdfs中. 2.默认值 从2.7.3版本开始block size的默认大小为128M,之前版本的默认值是64M. 3.如何修改block块的大小? 可以通过修改hdfs-site.xml文件中的dfs.blocksize对应的值. 注意:在修改HDFS的数据块大小时,首先停掉集群hadoop的运行进程,修改完毕后重新启动. 4.block块大小设置规则 在实际应用中,hdfs block块的大小设置为多少合适呢?为什么有的是64M,有的

问题 aix 主机 1.数据库主机使用vmstat 监控,隔几分钟 就是block 爆满. cpu 没有瓶颈,I/O 显示本地磁盘hdisk0和hdisk 1 是爆满. vmstat 同时显示大量page-in and page-out. 以及wait io 非常高 查看swap 区: lsps -a 2.通过topas 进程监控,没有发现异常进程.消耗 IO 资源的进程方法,可以考虑使用如下命令 : 2.1 如果要抓取实时I/O ,的详细信息,可以用filemon命令进行数据抓取. root用

什么是缓冲区缓冲区又称为缓存,它是内存空间的一部分.也就是说,在内存空间中预留了一定的存储空间,这些存储空间用来缓冲输入或输出的数据,这部分预留的空间就叫做缓冲区.缓冲区根据其对应的是输入设备还是输出设备,分为输入缓冲区和输出缓冲区. 为什么要引入缓冲区我们为什么要引入缓冲区呢?比如我们从磁盘里取信息,我们先把读出的数据放在缓冲区,计算机再直接从缓冲区中取数据,等缓冲区的数据取完后再去磁盘中读取,这样就可以减少磁盘的读写次数,再加上计算机对缓冲区的操作大大快于对磁盘的操作,故应用缓冲区可大大提高

有时候,我们需要生成指定大小的随机文件,比如在学习过程中使用的测试文件. 命令: Linux:/qinys # dd if=/dev/zero of=tmp.data bs=500k count=1 1+0 records in 1+0 records out 512000 bytes (512 kB) copied, 0.000984981 s, 520 MB/s 命令解释: 该命令会创建一个大小为500k的文件tmp.data;if代表输入文件(input file),of代表输出文件(ou

一.生成任意大小的文件(dd命令): 举例: amosli@amosli-pc:~/learn/example$ ; + records in + records out bytes ( MB/s amosli@amosli-pc:~/learn/example$ ls test.zip dd命令介绍:创建特定大小的文件最简单的方法就是使用dd命令,dd命令会克隆给定的输入内容然后将一模一样的一份副本写入到输出.stdin,设备文件,普通文件都可以作为输入,stdout,设备文件,普通文件等都可

目录 MBR和GPT MBR的局限性 GPT的优势 主分区.扩展分区和逻辑分区 挂接卷 Legacy.UEFI引导和GRUB引导 文件系统(FAT16.32.NTFS和EXT2.3.4.Xfs.Tmpfs) Windows中的文件系统 Linux中的文件系统 inode block superblock MBR和GPT 新买一块硬盘,设置分区时,系统会询问你是想要使用MBR分区形式还是GPT分区形式(有些硬盘出厂的时候就默认给你设定了分区形式).MBR是以前的分区形式,GPT是一种新的分区形式,

一 思路: 1,磁盘物理结构及大小计算 2,分区 MBR GPT知识 3,fdisk分区 挂载 自动挂载 4,格式化文件系统 5,inode block 软硬链接 查看磁盘: [root@moban dev]# ls sda sda sda1 sda2 sda3 二 MBR分区机制 512 446 66 ----- 64 分区模式 不能对已挂载的磁盘,进行操作. 只能读写数据. 如果想重新更改文件系统,--先卸载—然后修改fs 三 mount umount 四 inode block 分区被格式