JavaDBF:保存行情实时数据到DBF文件
JavaDBF.jar其实很早都不再更新了,在日新月异的科技圈算得上远古上神的jar包,早该身归混沌了。
但我们的项目要用到,因为之前做的大宗期货交易行情的分析文件依然是dbf文件,没有办法,还得用
JavaDBF库把行情实时数据保存到DBF文件中。
第一步,新建DBFManager类
public class DBFManager {
private static Logger logger = Logger.getLogger(DBFManager.class);
// 构造一个单线程service,保证调用dbf写入的方法不阻塞
private static ExecutorService pool = Executors.newSingleThreadExecutor();
public static void startDbf(List<Quotation> allQuotation) {
try {
if (Variables.openDBF) {
logger.info("写入DBF数据库开始");
long dt1 = System.currentTimeMillis();
// 执行线程
pool.execute(new Thread(new DBFThread(allQuotation)));
logger.info("写入DBF数据库结束");
long dt2 = System.currentTimeMillis();
logger.info("读取行情和写入DBF花费时间:(" + (dt2 - dt1) + ")");
}
} catch (Exception e) {
logger.error("dbf写入错误");
}
}
}
在行情推送过来的地方调用
DBFManager.startDbf(quotations);
第二步,新建DBF线程类
public class DBFThread implements Runnable {
private List<Quotation> quotations;
/**
* 传递构造方法.
*
* @param quotations
*/
public DBFThread(List<Quotation> quotations) {
this.quotations = quotations;
}
@Override
public void run() {
// 将行情信息写入到dbf文件中
DBFOperation.writeDBFByQuotation(Variables.path_info_dbf, quotations);
}
}
第三步,新建DBF操作类
public class DBFOperation {
private static Logger logger = Logger.getLogger(DBFOperation.class);
/**
* 删除文件内容.
*/
public static void deleteQuotation(String path) {
File myDelFile = new File(path);
if (myDelFile.exists()) {
myDelFile.delete();
}
}
/**
* 将行情信息添加到文件中
*
* @param path
* @param quotaionList
* @throws IOException
*/
public static void writeDBFByQuotation(String path, List<Quotation> quotaionList) {
FileOutputStream fos = null;
try {
DBFField fields[] = new DBFField[30];
// S1 HQZQDM 证券代码 Char 6
fields[0] = new DBFField();
fields[0].setName("S1");
fields[0].setDataType(DBFField.FIELD_TYPE_C);
fields[0].setFieldLength(6);
// S2 HQZQJC 证券名称 Char 8
fields[1] = new DBFField();
fields[1].setName("S2");
fields[1].setDataType(DBFField.FIELD_TYPE_C);
fields[1].setFieldLength(80);
// S3 HQZRSP 前收盘价格 Num 8 3
fields[2] = new DBFField();
fields[2].setName("S3");
fields[2].setDataType(DBFField.FIELD_TYPE_N);
fields[2].setFieldLength(8);
fields[2].setDecimalCount(3);
// S4 HQJRKP 今开盘价格 Num 8 3
fields[3] = new DBFField();
fields[3].setName("S4");
fields[3].setDataType(DBFField.FIELD_TYPE_N);
fields[3].setFieldLength(8);
fields[3].setDecimalCount(3);
Object[] obj1 = new Object[4];
obj1[0] = "000000";
obj1[1] = "";
for (int i = 2; i < obj1.length; i++) {
obj1[i] = Double.parseDouble("0");
}
// 定义DBFWriter实例用来写DBF文件
DBFWriter writer = new DBFWriter();
// 字符编码设置为GB2312,防止中文乱码
writer.setCharactersetName("GB2312");
writer.setFields(fields);
// 添加纪录,此时未写入到dbf文件,而是在内容中
writer.addRecord(obj1);
// Object[] objs = new Object[30];
for (Quotation quotation : quotaionList) {
Object[] obj = new Object[4];
// 证卷代码
obj[0] = quotation.getScode();
// 证卷名称
// 中文乱码解决方法
Pattern pWord = Pattern.compile("[\u4e00-\u9fa5]");// 校验中文的正则表达式
String value = quotation.getSname();
String blank = "";
if (pWord.matcher(value).find()) {// 如果包含中文就要补够2倍中文字数个空格,否则会导致中文乱码
for (int j = 0; j < value.getBytes().length; j++) {
blank += " ";
}
}
obj[1] = value + blank;
// 前收盘价
obj[2] = quotation.getLastPrice().doubleValue();
// 今开盘价
obj[3] = quotation.getOpen().doubleValue();
writer.addRecord(obj);
}
fos = new FileOutputStream(path);
writer.write(fos);
} catch (IOException e) {
logger.error("写入DBF出错了" + e.getMessage());
} finally {
try {
fos.close();
} catch (IOException e) {
logger.error("输出流关闭出错" + e.getMessage());
}
}
}
}
写的操作我已经提供了,但我一直没有找到dbf文件的更新操作,也就是说,假如已存在一行数据,但第二次数据过来时,只需要更新一列,这时候该如何做呢?

JavaDBF:保存行情实时数据到DBF文件的更多相关文章
- Linux中Matlab保存多个数据到同一个文件当中
% load pyrim % NumTrain = 50; % load machine %NumTrain = 150; % load housing % NumTrain = 300; % loa ...
- Java读取Level-1行情dbf文件极致优化(1)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- delphi 2010 导出sql server 数据到DBF乱码问题
近日,由于业务需要导出sql server 数据到DBF文件,要查询多表记录,并适当处理后生成导出DBF文件,系统使用delphi2010平台开发. 首先按要求在VFP里创建DBF表,字段数有240个 ...
- xls/csv文件转换成dbf文件
转至:https://blog.csdn.net/linhai1028/article/details/80211252 编写的一个小脚本,主要是利用python中的pandas,xlrd,dbfpy ...
- Java读取Level-1行情dbf文件极致优化(3)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- Java读取Level-1行情dbf文件极致优化(2)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- matlab结构体形式保存数据生成.mat文件< 转>
2015年 参加天池大数据竞赛 为了建立模型,打算基于matlab使用Random Forest Algorithm的工具包 该工具包我在此分享给大家,http://yunpan.cn/cVX ...
- MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中
MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中 作者:凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 用MATLAB实现:指定路径下 ...
- EasyDSS高性能RTMP、HLS(m3u8)、HTTP-FLV、RTSP流媒体服务器功能简介---实时数据统计报表、视频文件上传、点播、分享、集成
熟悉EasyDSS流媒体服务器的小伙伴应该都知道,EasyDSS通过将EasyRTMP推流的直播流进行直播转码.智能处理.视频分发,再通过 CDN 分发节点分发到终端播放 SDK为观众播放高清低延时的 ...
随机推荐
- Asp.net并发请求导致的数据重复插入问题
前段时间工作中,有客户反应了系统中某类待办重复出现两次的情况.我核实了数据之后,分析认为是并发请求下导致的数据不一致性问题,并做了重现.其实这并不是一个需要频繁调用的功能,但是客户连续点击了两次,导致 ...
- spark DataFrame 读写和保存数据
一.读写Parquet(DataFrame) Spark SQL可以支持Parquet.JSON.Hive等数据源,并且可以通过JDBC连接外部数据源.前面的介绍中,我们已经涉及到了JSON.文本格式 ...
- spring boot 入门之 helloworld
第一步:创建一个普通的maven项目 第二步:配置springboot基础依赖配置(即配置pom和启动类) POM配置 <project xmlns="http://maven.apa ...
- 分红包算法Java实现
需要考虑几个点: 红包形成的队列不应该是从小到大或者从大到小,需要有大小的随机性. 红包这种金钱类的需要用Decimal保证精确度. 考虑红包分到每个人手上的最小的最大的情况. 下面是利用线段分割算法 ...
- python 爬虫与数据可视化--matplotlib模块应用
一.数据分析的目的(利用大数据量数据分析,帮助人们做出战略决策) 二.什么是matplotlib? matplotlib: 最流行的Python底层绘图库,主要做数据可视化图表,名字取材于MATLAB ...
- 图形上下文导论(Introduction to SWT Graphics)zz
图形上下文导论(Introduction to SWT Graphics) 摘要: org.eclipse.swt.graphics包(package),包含了管理图形资源的类.只要实现了org.ec ...
- Linux内核内存管理架构
内存管理子系统可能是linux内核中最为复杂的一个子系统,其支持的功能需求众多,如页面映射.页面分配.页面回收.页面交换.冷热页面.紧急页面.页面碎片管理.页面缓存.页面统计等,而且对性能也有很高的要 ...
- BZOJ1386 : [Baltic2000]Stickers
显然每一位的限制独立,对于每一位求出仅限制该位下的最大数,然后求最小值即可. 假设当前要求数字$d$的答案: 考虑填数字的过程,可以看作依次考虑一个序列中的每个数,当前缀和$<0$时退出. 设$ ...
- vscode设置中文语言
https://jingyan.baidu.com/article/7e44095377c9d12fc1e2ef5b.html
- R语言grid包just参数如何just图形位置
思路 grid的画图函数都含有just,但是just参数的是怎么调节图形位置的总是让人非常费解,于是便写了代码来一探究竟. 思路非常简单:放一个2*2的布局viewport,每个布局里面放一个 ...