Linux系统下统计目录及其子目录文件个数

通过java api统计hive库下的所有表的文件个数、文件大小

更新hadoop fs 命令实现: [ss@db csv]$ hadoop fs -count /my_rc/my_hive_db/* 18/01/14 15:40:19 INFO hdfs.PeerCache: SocketCache disabled. 3 2 0 /my_rc/my_hive_db/.hive-staging_hive_2017-08-19_16-52-39_153_7217997288202811839-170149 2 0 0 /my_rc/my_hive_db/.hi…

Ubuntu 下生成 python 环境安装文件 requirements.txt

参考: 查找python项目依赖并生成requirements.txt Ubuntu 下生成 python 环境安装文件 requirements.txt 首先通过 pip 安装pyreqs模块: pip install pipreqs 然后进入 python 源码所在的目录下,执行: pipreqs ./ 该命令在当前目录下生成 requirements.txt. 如果需要在一个新的环境下重新安装源码需要的依赖包,只需执行: pip install -r requirements.txt 20…

Ubuntu下执行mysql的sql文件

Ubuntu下执行mysql的.sql文件方法一: 1.执行此命令,会提示输入mysql的root账户的密码,验证成功后,会在dbname这个数据库中执行filename.sql这个脚本,其中filename.sql文件是sql文件所在的路径. 命令: mysql -u root -p dbname<filename.sql 例: mysql -u root -p dbname</home/root/news.sql 方法二: 1.进入MySQL命令: mys…

Ubuntu下使用gcc编译c文件,未识别cos,sin

Ubuntu下使用gcc编译c文件,虽然我调用了math.h的头文件,但是未识别cos,sin 报错:( fft.c ) /tmp/ccwXjD8C.o: In function `fft': fft.c:(.text+0x17a): undefined reference to `cos' fft.c:(.text+0x188): undefined reference to `sin' 原因: 一般出现这个问题说明,在编译时已经正确找到头文件math.h,但在链接时因为没有合适的编译选项来包…

Centos下查看当前目录大小及文件个数

Docker镜像搭建ubuntu下samba目录共享

第一种方法:(未使用) yum install docker // 下载镜像 docker pull dperson/samba // 启动镜像,具体看文档,但重要的配置是以下的注释 docker run --name samba \ -it -p 139:139 -p 445:445 \ -v /home/technofiend:/home/technofiend \ #共享目录 -d dperson/samba \ -u "www;thisispasswd&quo…

Ubuntu下解决解压zip文件中文文件名乱码问题

在Ubuntu下解压Windows下压缩的zip文件时,会出现解压出的带中文文件名的文件名乱码,这是因为Ubuntu和Windows默认的编码不同,Ubuntu下默认的编码是UTF-8,而Windows下默认的编码是GBK,而zip文件自身却不带有任何标识其编码的信息.对于这个问题,主要有以下三种解决方法: 一.命令行指定解压字符集解压时指定字符集,可以是CP936,GBK,GB18030 $unzip -O CP936 xxx.zip 不过,"man unzip"对这个参数没有任何…

Ubuntu下解决bash 没有那个文件或目录的方法

因为之前电脑硬盘坏掉,维修换了新硬盘,今天重新安装了ubuntu,装好之后就赶紧搭建工作环境,将备份的资料拷贝进来,搭建交叉编译环境,但是发现,修改bashrc中PATH绝对路径指向交叉编译器后,在命令行下运行交叉编译器或出现说没有这个文件或者目录,但是按照绝对路径ls看又有这个文件,很是奇怪. 后来找到问题,这次安装的系统是64位的,而这些编译环境都是32位的程序,因此需要安装对32位程序的支持. 直接安装即可. apt-get install ia32-libs…

ubuntu下 apt-get install 下载的文件存放的目录

apt-get把下载的deb包全部放在/var/cache/apt/archives下面,该目录下的文件可以删除.当然用 sudo apt-get clean 命令也可以,这个命令只会删除缓存起来的deb包,不会取消已经更新了的包…

du -sh * --exclude=tar |awk '{v=substr($1,length($1),1)}v=="G"{$0="1G "$0}v=="M"{$0="2M "$0}v=="K"{$0="3K "$0}v=="0"{$0="4Z "$0}!system("[ -d "$NF" ]")' |s…

ubuntu上解压目录里的文件到指定文件夹

去除目录结构加上 --strip-components N 如: 压缩文件eg.tar 中文件信息为 src/src/src/eg.txt 运行 tar -xvf eg.tar --strip-components 1 结果:src/src/eg.txt 如果运行 tar -xvf eg.tar --strip-components 3 解压结果为: eg.txt 在解压的时候,如果想指定解压目录,可以加参数-C 目标目录如: 如我们解压eg.tar, 该文件在/data/src下面,如果需…

Ubuntu下如何解压各类文件

tar解包:tar xvf FileName.tar打包:tar cvf FileName.tar DirName(注:tar是打包,不是压缩!)---------------.gz解压1:gunzip FileName.gz解压2:gzip -d FileName.gz压缩:gzip FileName.tar.gz解压:tar zxvf FileName.tar.gz压缩:tar zcvf FileName.tar.gz DirName---------------.bz2解压1:bzip2…

ubuntu 下通过ftp命令下载文件

/*连接*/ $ ftp 192.168.180.2Connected to 192.168.180.2.Name (192.168.180.2:rivsidn): admin Password: /*获取远端文件*/ftp> get test.pdf local: test.pdf remote: test.pdf 72007566 bytes received in 6.87 secs (9.9917 MB/s) ftp> /*查看当前路径*/ ftp> pw…

ubuntu 下mysql导入出.sql文件

1.导出整个数据库 mysqldump -u 用户名 -p 数据库名 > 导出的文件名 mysqldump -u wcnc -p smgp_apps_wcnc > wcnc.sql 2.导出一个表 mysqldump -u 用户名 -p 数据库名表名> 导出的文件名 mysqldump -u wcnc -p smgp_apps_wcnc users> wcnc_users.sql 3.导出一个数据库结构 mysqldump -u wcnc -p -d –add-drop-tabl…

Ubuntu下添加定时任务执行php文件

//添加自动下载定时任务1. vim /etc/crontab2. 添加 #每5分钟执行一次*/5 * * * * root /usr/bin/php /home/wwwroot/123.php3. /etc/init.d/cron restart 重启cron4.设置cron运行日志存放路径sudo vi /etc/rsyslog.d/50-default.conf 将#cron.* 前的 # 删掉5.重启rsyslog服务/etc/init.d/rsyslog restart /etc/in…

Idea下面无法识别web-inf下lib目录的子目录的jar包，只能直接放lib下面才能识别？

解决方案一: Ctrl+Alt+Shift+s打开projuect Structure-->Livraries-->➕-->java-->选择对应的lib目录即可! 解决方案二:在pom.xml中添加本地jar包,类似代码如下: <dependency> <groupId>htmlunit</groupId> <artifactId>htmlunit</artifactId> <version>2.21-OSG…

ubuntu下查看windows的 txt 文件乱码

在终端执行 gsettings set org.gnome.gedit.preferences.encodings auto-detected "['UTF-8','GB18030','GB2312','GBK','BIG5','CURRENT','UTF-16']"…

du 使用详解 linux查看目录大小 linux统计目录大小并排序查看目录下所有一级子目录文件夹大小 du -h --max-depth=1 |grep [

Python-统计目录（文件夹）中Excel文件个数和数据量

背景:前一阵子在帮客户做Excel文件中的数据处理,但是每周提交周报,领导都需要统计从客户接收的文件数量以及记录数.所以我就简单写了统计的脚本,方便统计目录(文件夹)中的Excel文件个数和数据量. 本人向来讲究直接利落,其他不多说,直接上代码.水平有限,仅供参考. #!/usr/bin/env python # coding:utf-8 """ @File Name: zwc_count_file.py @Version: 1.0 @Python Version: 3.7…

ubuntu 下修改文件访问权限chmod 777 -R *血的教训！没事别乱开权限！用谁开谁的就行。。。最后不要用这个命令，文件操作全部改用终端

本文转自: 个人建议 Ubuntu下修改目录权限命令如下:chmod 600 name (只有所有者有读和写的权限)chmod 644 name (所有者有读和写的权限,组用户只有读的权限)chmod 700 name (只有所有者有读和写以及执行的权限)chmod 666 name (每个人都有读和写的权限)chmod 777 name (每个人都有读和写以及执行的权限) 其中 name 指文件名,也可以是目录名. 整个命令的形式是chmod ×××(所有者)×××(组用户)×××(其他用户)…

Linux系统下查看目录大小

转载:http://blog.csdn.net/iamlaosong/article/details/7085178 我们有个系统每天要下载数据,为了检查下载数据是否正常,需要查看下载数据目录大小,因为每天的数据都差不多,如果变化太大就说明不正常.查看目录大小的命令是du(当然也可以查看文件大小),例如:du ems_data,就是查看ems_data目录下各子目录的大小:du,就是查看当前目录下各子目录的大小:du *,就是查看当前目录下各子目录和文件的大小. 为了提高查看效果,我们需要对结果…

Linux文件系统简介一（磁盘分区、开机过程、目录结构、文件权限、文件扩展名、目录管理）

Linux:就是一组软件,一套操作系统=核心+系统呼叫接口层. 1.操作系统操作系统 = 核心(内核) + 系统呼叫(接口) 操作系统其实也是一组程序,重点在于管理计算机的所有活动以及驱动系统中的所有硬件. 初识操作系统,我们从一张图片开始: 核心:即是我们通常所说的操作系统内核,其主要负责整个计算机系统相关的资源分配与管理,可归纳为以下几大核心功能程序管理:程序资源分配及调度执行等管理. 内存管理:内存的控制与使用. 文件系统管理:文件格式支持,数据输入/输出等等. 硬件驱动管理:驱动硬件…

ubuntu 下wireshark 软件安装与使用

在ubuntu下,使用wireshark也是很有必要的.虽然可以使用tcpdump等工具. ubuntu:11.10 1. sudo apt-get install wireshark 出于安全方面的考虑,普通用户不能够打开网卡设备进行抓包,wireshark不建议用户通过sudo在root权限下运行,wireshark为ubuntu(Debian)用户提供了一种在非root下的解决方法.(详细解释可以参考:/usr/share/doc/wireshark-common/READ…

ubuntu下smokeping安装配置

0.参考文件 http://wenku.baidu.com/view/950fbb0a79563c1ec5da71b1 http://aaaxiang000.blog.163.com/blog/static/20634912201188696910/ http://my.oschina.net/lxcong/blog/150617#OSC_h1_20 1.为ubuntu设置固定ip地址参考文献:http://hi.baidu.com/futuremeng/item/ce1604ee467d0b…

Ubuntu下的MongoDB GUI 可视化管理工具

目录 1 Robo 3T 2 NoSQLBooster for MongoDB(收费) 3 JetBrains Plugin Repository :: Mongo Plugin Ubuntu下的MongoDB GUI 可视化管理工具已经安装过MongoDB,需要一个可视化管理工具:查了一些资料,并尝试安装了3款且附上截图详情本文安装环境:Ubuntu 16.04 1 Robo 3T 下载地址: https://robomongo.org/download 运行文件: 下载文件为robo3t…

linux(redhat)环境下,如何解压rar文件?

需求描述: 今天一个同事发过来一个压缩文件,让传送到linux服务器上,传上去之后,发现是rar格式的之前没有解压过,就找了一些解压方法,在此记录下. 操作过程: 1.下载rar在linux环境下的安装包下载地址:https://www.rarlab.com/rar/rarlinux-x64-5.5.0.tar.gz 2.将rar安装包上传到服务器上 [root@testvm software]# ls -l rar* -rw-r--r-- 1 root root 536028 Jun 4…

Ubuntu下修改Nexus 5的boot.img--改user模式为debug模式

博客地址:http://blog.csdn.net/qq1084283172/article/details/52422205 在学习Android逆向的时候,总会用到Android的调试模式.一般情况下,Nexus 5手机上的Android系统是运行在user模式下的,为了方便对Android应用程序进行动态调试,因此采取一劳永逸的方法,修改手机系统ROM里的boot.img文件,将Nexus 5手机里的系统由user模式修改为debug模式.虽然前面的文章中,已经记录了在Windows下修改…

java基础 File 递归删除文件夹中所有文件文件夹目录(包含子目录)下的.java文件复制到e:/abc文件夹中, 并统计java文件的个数

File 递归删除文件夹中所有文件文件夹 package com.swift.kuozhan; import java.io.File; import java.util.Scanner; /*键盘录入一个文件夹路径,删除该路径下的所有文件文件夹,包括自己. 要求:文件夹中包含有子文件夹*/ public class TheLat { public static void main(String[] args) { File dir = inputDir(); delete(dir); } pr…

【ubuntu下统计目录及其子目录文件个数】的更多相关文章

ubuntu下统计目录及其子目录文件个数