Golang csv操作
csv读写
封装成工具包
package utils
import (
"encoding/csv"
"fmt"
"log"
"os"
"path"
"time"
)
func ReadCsv(filePath string) (data [][]string, err error) {
f, err := os.Open(filePath)
if err != nil{
fmt.Println(err)
return
}
defer f.Close()
w := csv.NewReader(f)
data, err = w.ReadAll()
if err != nil{
fmt.Println(err)
return
}
//fmt.Println(data)
return data,nil
}
/*
filename := "shodan-port-all" 文件名,不要后缀
columns := [][]string{{"姓名", "电话", "公司", "职位", "加入时间"}, {"1", "2", "刘犇,刘犇,刘犇", "4", "5"}}
utils.ExportCsv("log/", "shodan-port", columns) 会存到log/shodan-port-2021-09-07 23:23:14.csv里
*/
func ExportCsv(savePath, fileName string, data [][]string) {
fmt.Println("data22222",data)
filePath := fmt.Sprintf("%s-%s.csv",fileName,time.Now().Format("2006-01-02"))
floder := "./"
if len(savePath) >= 0 {
floder = path.Join(floder, savePath)
}
if _, err := os.Stat(floder); err != nil {
if !os.IsExist(err) {
os.MkdirAll(floder, os.ModePerm)
}
}
fp, err := os.Create(path.Join(floder,filePath)) // 创建文件句柄
if err != nil {
log.Fatalf("创建文件["+filePath+"]句柄失败,%v", err)
return
}
defer fp.Close()
fp.WriteString("\xEF\xBB\xBF") // 写入UTF-8 BOM
w := csv.NewWriter(fp) //创建一个新的写入文件流
w.WriteAll(data)
w.Flush()
}
原文链接:https://blog.csdn.net/ljrsunshine/article/details/100107705
追加写入
Golang
判断文件是否存在:如果文件不存在,那么创建文件,并写入csv的标题字段和第一条数据;如果文件存在,追加写一条数据
需求
- 给定一个以@为分隔符的字符串,分隔了4条信息,还需要再加上时间戳信息,然后按照特定的顺序写入csv中
笔者因为任务需要,在windows和linux系统中都运行了一遍代码,发现在追加写操作时: - 在windows系统中,代码 txt, err := os.OpenFile(csvName, os.O_APPEND, 0666) 运行无误
- 而在linux系统中,必须添加 os.O_RDWR(以读写的方式打开) 才能追加写成功,代码为 os.OpenFile(csvName, os.O_APPEND|os.O_RDWR, 0666)
- 给定一个以@为分隔符的字符串,分隔了4条信息,还需要再加上时间戳信息,然后按照特定的顺序写入csv中
笔者刚开始接触Go语言,若有代码结构和语法不规范的地方,请多包涵!
代码
package main
import (
"encoding/csv"
"fmt"
"os"
"strings"
"time"
)
func main() {
m3u8_dir_path := "13429235688@01@05@09"
data := strings.Split(m3u8_dir_path, "@")
//需要在index=1的地方插入时间戳,方便以“id time emo val arou”的顺序写入csv文件
//将index=1后面的数据保存到一个临时的切片(其实是对index后面数据的复制)
tmp := append([]string{}, data[1:]...)
//拼接插入的时间戳
data = append(data[0:1], time.Now().Format("20060102150405"))
//与临时切片再组合得到最终的需要的切片
data = append(data, tmp...)
fmt.Printf("data[0]: %s\n", data[0])
fmt.Printf("data[1]: %s\n", data[1])
fmt.Printf("data[2]: %s\n", data[2])
fmt.Printf("data[3]: %s\n", data[3])
fmt.Printf("data[4]: %s\n", data[4])
csvName := data[0] + ".csv"
file, er := os.Open(csvName)
defer file.Close()
// 如果文件不存在,创建文件
if er != nil && os.IsNotExist(er) {
file, er := os.Create(csvName)
if er != nil {
panic(er)
}
defer file.Close()
// 写入字段标题
w := csv.NewWriter(file) //创建一个新的写入文件流
title := []string{"user_id", "time", "emo", "val", "arou"}
// 这里必须刷新,才能将数据写入文件。
w.Write(title)
w.Write(data)
w.Flush()
fmt.Printf("if end")
} else {
// 如果文件存在,直接加在末尾
txt, err := os.OpenFile(csvName, os.O_APPEND|os.O_RDWR, 0666)
defer txt.Close()
if err != nil {
panic(err)
}
w := csv.NewWriter(txt) //创建一个新的写入文件流
w.Write(data)
w.Flush()
fmt.Printf("else end")
}
}
追加写入封装
func FileExists(filename string) bool {
info, err := os.Stat(filename)
if os.IsNotExist(err) {
return false
}
if info == nil {
return false
}
return true
}
/*
文件没有创建并写入,有追加写
filename := "/Users/icsoc/Downloads/test.csv"
columns := [][]string{{"姓名", "电话", "公司", "职位", "加入时间"}, {"1", "2", "刘犇,刘犇,刘犇", "4", "5"}}
utils.ExportCsvWithAdd("log/", "shodan-port", columns) 会存到static/downloads.csv里
*/
func ExportCsvWithAdd(savePath, fileName string, data [][]string) (fPath string) {
fileNamePath := fmt.Sprintf("%s.csv", fileName)
floder := "./"
if len(savePath) >= 0 {
floder = filepath.Join(floder, savePath)
}
// 创建文件夹
if _, err := os.Stat(floder); err != nil {
if !os.IsExist(err) {
os.MkdirAll(floder, os.ModePerm)
}
}
fPath = filepath.Join("./", floder, fileNamePath)
if !FileExists(fPath) {
fp, err := os.Create(fPath) // 创建文件句柄
if err != nil {
log.Fatalf("创建文件["+fileNamePath+"]句柄失败,%v", err)
return
}
defer fp.Close()
fp.WriteString("\xEF\xBB\xBF") // 写入UTF-8 BOM
w := csv.NewWriter(fp) //创建一个新的写入文件流
w.WriteAll(data)
w.Flush()
} else {
// 如果文件存在,直接加在末尾
txt, err := os.OpenFile(fPath, os.O_APPEND|os.O_RDWR, 0666)
defer txt.Close()
if err != nil {
log.Printf("os.OpenFile fail , fPath:%v", fPath)
return
}
w := csv.NewWriter(txt) //创建一个新的写入文件流
w.WriteAll(data)
w.Flush()
}
return fPath
}
Golang csv操作的更多相关文章
- Java CSV操作(导出和导入)
Java CSV操作(导出和导入) CSV是逗号分隔文件(Comma Separated Values)的首字母英文缩写,是一种用来存储数据的纯文本格式,通常用于电子表格或数据库软件.在 CSV文件 ...
- csv操作帮助类
功能描述: 集合转换为csv数据 DataSe转换为csv数据 using System; using System.Collections.Generic; using System.Data; u ...
- 【Java】Java CSV操作代码
CSV是逗号分隔文件(Comma Separated Values)的首字母英文缩写,是一种用来存储数据的纯文本格式,通常用于电子表格或数据库软件.在 CSV文件中,数据“栏”以逗号分隔,可允许程序通 ...
- python之pandas数据筛选和csv操作
本博主要总结DaraFrame数据筛选方法(loc,iloc,ix,at,iat),并以操作csv文件为例进行说明 1. 数据筛选 a b c (1)单条件筛选 df[df[] # 如果想筛选a列的取 ...
- pandas 写csv 操作
pandas 写csv 操作 def show_history(self): df = pd.DataFrame() df['Time'] = pd.Series(self.time_hist) df ...
- golang csv问题
go语言自带的有csv文件读取模块,看起来好像不错,今天玩玩,也算是系统学习go语言的一部分--^_^ 一.写csv文件 函数: func NewWriter(w io.Writer) *Writer ...
- Golang 中操作 Mongo Update 的方法
Golang 和 MongoDB 中的 ISODate 时间交互问题 2018年02月27日 11:28:43 独一无二的小个性 阅读数:357 标签: GolangMongoDB时间交互时间转换 更 ...
- python之csv操作
在使用python爬虫时或者其他情况,都会用到csv存储与读取的相关操作,我们在这里就浅谈一下: CSV(Comma-Separated Values)逗号分隔符,也就是每条记录中的值与值之间是用分号 ...
- Golang文件操作整理
基本操作 文件创建 创建文件的时候,一定要注意权限问题,一般默认的文件权限是 0666 关于权限的相关内容,具体可以参考鸟叔p141 这里还是再回顾下,文件属性 r w x r w x r w x,第 ...
- golang数据库操作初体验
在golang中,提供了标准的数据库接口database/sql包,做过数据库开发的应该知道,不同的数据库有不同的数据库驱动.比如mysql等,我们可以去找 https://golang.org/s/ ...
随机推荐
- archlinux xfce禁用Alt+F打开终端文件菜单
参照:https://superuser.com/questions/456024/how-to-disable-alt-f-shortcut-binding-from-file-menu-acces ...
- Python爬虫爬取爱奇艺电影片库首页
1 import time 2 import traceback 3 import requests 4 from lxml import etree 5 import re 6 from bs4 i ...
- Techwalk攻略 | 来北京与OpenHarmony技术大会一起技术漫游!
去北京Citywalk已经不是新鲜事? 不如来第二届OpenHarmony技术大会一起Techwalk! 大会即将开幕请速速收藏以下打卡攻略↓ 点击链接,观看线上直播
- 深入理解 Java 多线程、Lambda 表达式及线程安全最佳实践
Java 线程 线程使程序能够通过同时执行多个任务而更有效地运行. 线程可用于在不中断主程序的情况下在后台执行复杂的任务. 创建线程 有两种创建线程的方式. 扩展Thread类 可以通过扩展Threa ...
- 深入了解 Java 方法和参数的使用方法
Java 方法 简介 方法是一块仅在调用时运行的代码.您可以将数据(称为参数)传递到方法中.方法用于执行特定的操作,它们也被称为函数. 使用方法的原因 重用代码:定义一次代码,多次使用. 提高代码的结 ...
- Windows wsl2安装Ubuntu
wsl(Windows Subsystem for Linux)即适用于Windows的Linux子系统,是一个实现在Windows 10 / 11上运行原生Linux的技术. wsl2 为其迭代版本 ...
- 如何使用 Grafana 监控文件系统状态
当 JuiceFS 文件系统部署完成并投入生产环境,接下来就需要着手解决一个非常重要的问题 -- 如何实时监控它的运行状态?毕竟,它可能正在为关键的业务应用或容器工作负载提供持久化存储支持,任何小小的 ...
- 分类算法(Classification Algorithm)需求记录
[toc] 比如说,在WEB扫描器场景中.一个扫描器在扫描过程中,它可以自动识别接口类型并采用相应分类规则进行漏洞检测的算法,这种通常属于一种称为"智能扫描"(Intelligen ...
- 性能提升40%!阿里云神龙大数据加速引擎获TPCx-BB世界排名第一
简介:神龙大数据加速引擎,针对大数据常用组件,如Spark.Hadoop.Alluxio等,结合阿里云神龙架构的特性,进行软硬一体化优化,形成独一无二的性能优势,最终,使复杂SQL查询场景性能相比社 ...
- Spring官方RSocket Broker 0.3.0发布: 快速构建你的RSocket架构
简介:Spring官方的RSocket Broker其实开发已经非常久了,我以为会伴随着Spring Cloud 2021.0发布的,但是没有发生.不过Spring RSocket Broker还是 ...