txt 开关 csv 可通用 工具
Ruby Txt 开关 CSV 常用工具
to
require 'csv' namespace :sys_file_conver do desc "把txt数据导入到csv中"
task :txt_to_csv => :environment do
amount = 100
head_hash = {
'对账文件名' =>[12],
'商户号' =>[15],
'商户类型' => [4],
'清算日期' => [8],
'总比数' => [12],
'总金额' => [15, amount],
'支付总比数' => [12],
'支付总金额' => [15, amount],
'退款总比数' => [12],
'退款总金额' => [15, amount],
'撤销总比数' => [12],
'撤销总金额' => [15, amount]
} body_hash = {
'清算日期' => [8],
'入账日期' => [8],
'卡号' => [19],
'交易类型' => [4],
'交易金额' => [ 15, amount],
'入账金额' => [ 15, amount],
'手续费金额' => [ 15, amount],
'流水号' => [6],
'交易日期时间' => [10],
'终端号' => [8],
'商户号' => [15],
'商户类型' => [4],
'受理机构号' => [6],
'系统检索号' => [12],
'授权号' => [6],
'渠道类型' => [2],
'支付卡种' => [2],
'订单号' => [40]
} txt_file_path = ENV['txt_file_path'] || "#{Rails.root}/tmp/txt_file.txt" csv_file_path = ENV['csv_file_path'] || "#{Rails.root}/tmp/csv_file.csv"
File.new(csv_file_path) if FileTest::exists?(csv_file_path) CSV.open(csv_file_path,'wb:gbk:gbk') do |data| # wb:gbk:gbk to gbk default encoding is utf-8
data << hash_to_array_value(head_hash) txt_array = IO.readlines(txt_file_path, :encoding => 'GB2312')
txt_array.each_with_index do |str,index|
case index
when 0
data << str_to_array_by_hash(str,head_hash)
data << hash_to_array_value(body_hash)
else
data << str_to_array_by_hash(str,body_hash)
end
end
end
end
# ----------------------------Hash to array------------------------------------
def str_to_array_by_hash(str,hash)
array = []
hash_to_array_value(hash, 1).inject(0){ |idx, code| str_code = str[idx,code[0]]
str_code = str_code.to_f/code[1] unless code[1].blank?
array << convert_gbk(str_code)
idx+code[0]
} array
end # def hash_to_array_key(hash)
# hash.inject([]){|a,d| a << convert_gbk(d[0])}
# end
def hash_to_array_value(hash,i=0)
hash.inject([]){|a,d| a << convert_gbk(d[i])}
end # ---------------------------Convert util--------------------------------------
def convert(str)
require 'iconv'
begin
converter = Iconv.new("UTF-8", "GB2312")
converter.iconv(str)
rescue
str
end
end def convert_gbk(str)
require 'iconv'
begin
converter = Iconv.new("GB2312", "UTF-8")
converter.iconv(str)
rescue
str
end
end end
Html form tag
.upload-body
= form_tag upload_file_file_converts_url, :multipart => true do
%p
%span.label 上传文件
= file_field :public, :picture %p
%input.button.ml20{ :type => 'submit', :value => '转码' }
controller upload to download
#iconv -f gbk csv_file.csv
def upload_file
uploaded_io = params[:public][:picture] file = File.join("public", uploaded_io.original_filename)
FileUtils.cp uploaded_io.path, file
send_file FileConvert.txt_convert_csv(file),:filename => "CSV-#{uploaded_io.original_filename} #{Time.now.strftime('%F %T')}.csv"
end
版权声明:本文博客原创文章,博客,未经同意,不得转载。
txt 开关 csv 可通用 工具的更多相关文章
- 【游戏开发】Excel表格批量转换成CSV的小工具
一.前言 在工作的过程中,我们有时可能会面临将Excel表格转换成CSV格式文件的需求.这尤其在游戏开发中体现的最为明显,策划的数据文档大多是一些Excel表格,且不说这些表格在游戏中读取的速度,但就 ...
- txt文件按行处理工具类(可以截取小说、分析日志等)【我】
txt文件按行处理工具类(可以分析日志.截取小说等) package file; import java.io.BufferedReader; import java.io.BufferedWrite ...
- 预读(读取文件前几行)文件(txt,dat,csv等)程序
需求: txt.dat.csv文件很大,需要花很长的时间打开, 但实际上我们只需要查看文件的前几行,查看数据的内容和格式 exe & code : https://github.com/co ...
- save tracking results into csv file for oxuva long-term tracking dataset (from txt to csv)
save tracking results into csv file for oxuva long-term tracking dataset (from txt to csv) 2019-10-2 ...
- solr6.6 导入 pdf/doc/txt/json/csv/xml文件
文本主要介绍通过solr界面dataimport工具导入文件,包括pdf.doc.txt .json.csv.xml等文件,看索引结果有什么不同.其实关键是managed-schema.solrcon ...
- python读取txt、csv、xml
读取txt,无需引入任何包: user_file = open('user_info.txt','r') lines = user_file.readlines() user_file.close() ...
- mysql将表数据导出为txt或csv文件
语法:select 字段 from 表名 into outfile 路径 示例txt:select * from stu_class into outfile './stu_class.text'; ...
- 20171026python读取txt写入csv
import csv def get_lines(filepath): with open(filepath) as file_object: lines=set(file_object.readli ...
- R语言学习——R读取txt、csv、xls和xlsx格式文件
最近项目中运用到了R读取文件数据,所以把相关好用的.经过验证的方法总结了一下,有效避免下次入坑. 1. R读取txt文件 使用R读取txt文件直接使用read.table()方法进行读取即可,不需要加 ...
随机推荐
- Redis时延问题
单线程你别阻塞,Redis时延问题分析及应对 内容目录: 耗时长的命令造成阻塞 fork产生的阻塞 持久化造成的阻塞 单线程你别阻塞,Redis时延问题分析及应对 Redis的事件循环在一个线程中处理 ...
- android中获取屏幕的信息
获取屏幕信息比较简单,可以通过android的sdk自带的工具类DisplayMetrics.话不多说,上代码: // 获取屏幕的信息 DisplayMetrics dm = new DisplayM ...
- 【UML】概念、关联、画画(一)
最近画UML画画,于UML观看视频后还没有学会.它是的结果UML九图是不是太懂,我想加深绘制过程的理解,我一个新的水平. 现在我觉得是时候..地介绍一下UML.了解一下它的基本内容.达到深入浅出的效果 ...
- Python调用微博API
上头叫通过微博ID获取用户公布过的历史微博内容,于是研究了下新浪微博提供的API 1 首先在微博开放中心下"创建应用"创建一个应用,应用信息那些随便填,填写完成后,不须要提交审核, ...
- java流的性能优化1-文件复制
传统的I/O速度相对照较慢,它会成为系统性能的瓶颈,所以在java1.4之后提供了NIO,它是一种全新的流:它具有下面特性: 1.为全部的原是类型提供Buffer缓存支持: 2.使用java.nio. ...
- 如何从Terminal Command Line编译并运行Scope
Ubuntu SDK我们大部分的开发者是非常有效的.它甚至可以帮助我们进行在线调试.在这篇文章中,我们介绍了如何使用command line编译和执行我们scope. 1)创建一个主Scope 我们能 ...
- 【转】介绍Jython,第一部分:轻轻松松写JAVA程序
本文转自:http://www.ibm.com/developerworks/cn/education/java/j-jython1/index.html 关于本教程 本教程介绍哪些内容? 这个两部分 ...
- innerHTML使用方法
使用方法: 比方在<body>中写了例如以下的代码:<div id=top></div> 如今用top.innerHTML="..........&quo ...
- 数据库管理——安全管理——识别SQLServer中空密码或者弱密码的登录名
原文:数据库管理--安全管理--识别SQLServer中空密码或者弱密码的登录名 原文译自: http://www.mssqltips.com/sqlservertip/2775/identify-b ...
- mysql常见操作汇总
1.Mysql服务突然启不来了,报错: 在分析时发现MySQL Server 5.0\data下面有个名称为用户名,扩展名为.err的文件: 150725 20:01:19 [Note] 自己的安装目 ...