JavaDBF:保存行情实时数据到DBF文件
JavaDBF.jar其实很早都不再更新了,在日新月异的科技圈算得上远古上神的jar包,早该身归混沌了。
但我们的项目要用到,因为之前做的大宗期货交易行情的分析文件依然是dbf文件,没有办法,还得用
JavaDBF库把行情实时数据保存到DBF文件中。
第一步,新建DBFManager类
public class DBFManager { private static Logger logger = Logger.getLogger(DBFManager.class); // 构造一个单线程service,保证调用dbf写入的方法不阻塞 private static ExecutorService pool = Executors.newSingleThreadExecutor(); public static void startDbf(List<Quotation> allQuotation) { try { if (Variables.openDBF) { logger.info("写入DBF数据库开始"); long dt1 = System.currentTimeMillis(); // 执行线程 pool.execute(new Thread(new DBFThread(allQuotation))); logger.info("写入DBF数据库结束"); long dt2 = System.currentTimeMillis(); logger.info("读取行情和写入DBF花费时间:(" + (dt2 - dt1) + ")"); } } catch (Exception e) { logger.error("dbf写入错误"); } } }
在行情推送过来的地方调用
DBFManager.startDbf(quotations);
第二步,新建DBF线程类
public class DBFThread implements Runnable { private List<Quotation> quotations; /** * 传递构造方法. * * @param quotations */ public DBFThread(List<Quotation> quotations) { this.quotations = quotations; } @Override public void run() { // 将行情信息写入到dbf文件中 DBFOperation.writeDBFByQuotation(Variables.path_info_dbf, quotations); } }
第三步,新建DBF操作类
public class DBFOperation { private static Logger logger = Logger.getLogger(DBFOperation.class); /** * 删除文件内容. */ public static void deleteQuotation(String path) { File myDelFile = new File(path); if (myDelFile.exists()) { myDelFile.delete(); } } /** * 将行情信息添加到文件中 * * @param path * @param quotaionList * @throws IOException */ public static void writeDBFByQuotation(String path, List<Quotation> quotaionList) { FileOutputStream fos = null; try { DBFField fields[] = new DBFField[30]; // S1 HQZQDM 证券代码 Char 6 fields[0] = new DBFField(); fields[0].setName("S1"); fields[0].setDataType(DBFField.FIELD_TYPE_C); fields[0].setFieldLength(6); // S2 HQZQJC 证券名称 Char 8 fields[1] = new DBFField(); fields[1].setName("S2"); fields[1].setDataType(DBFField.FIELD_TYPE_C); fields[1].setFieldLength(80); // S3 HQZRSP 前收盘价格 Num 8 3 fields[2] = new DBFField(); fields[2].setName("S3"); fields[2].setDataType(DBFField.FIELD_TYPE_N); fields[2].setFieldLength(8); fields[2].setDecimalCount(3); // S4 HQJRKP 今开盘价格 Num 8 3 fields[3] = new DBFField(); fields[3].setName("S4"); fields[3].setDataType(DBFField.FIELD_TYPE_N); fields[3].setFieldLength(8); fields[3].setDecimalCount(3); Object[] obj1 = new Object[4]; obj1[0] = "000000"; obj1[1] = ""; for (int i = 2; i < obj1.length; i++) { obj1[i] = Double.parseDouble("0"); } // 定义DBFWriter实例用来写DBF文件 DBFWriter writer = new DBFWriter(); // 字符编码设置为GB2312,防止中文乱码 writer.setCharactersetName("GB2312"); writer.setFields(fields); // 添加纪录,此时未写入到dbf文件,而是在内容中 writer.addRecord(obj1); // Object[] objs = new Object[30]; for (Quotation quotation : quotaionList) { Object[] obj = new Object[4]; // 证卷代码 obj[0] = quotation.getScode(); // 证卷名称 // 中文乱码解决方法 Pattern pWord = Pattern.compile("[\u4e00-\u9fa5]");// 校验中文的正则表达式 String value = quotation.getSname(); String blank = ""; if (pWord.matcher(value).find()) {// 如果包含中文就要补够2倍中文字数个空格,否则会导致中文乱码 for (int j = 0; j < value.getBytes().length; j++) { blank += " "; } } obj[1] = value + blank; // 前收盘价 obj[2] = quotation.getLastPrice().doubleValue(); // 今开盘价 obj[3] = quotation.getOpen().doubleValue(); writer.addRecord(obj); } fos = new FileOutputStream(path); writer.write(fos); } catch (IOException e) { logger.error("写入DBF出错了" + e.getMessage()); } finally { try { fos.close(); } catch (IOException e) { logger.error("输出流关闭出错" + e.getMessage()); } } } }
写的操作我已经提供了,但我一直没有找到dbf文件的更新操作,也就是说,假如已存在一行数据,但第二次数据过来时,只需要更新一列,这时候该如何做呢?
JavaDBF:保存行情实时数据到DBF文件的更多相关文章
- Linux中Matlab保存多个数据到同一个文件当中
% load pyrim % NumTrain = 50; % load machine %NumTrain = 150; % load housing % NumTrain = 300; % loa ...
- Java读取Level-1行情dbf文件极致优化(1)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- delphi 2010 导出sql server 数据到DBF乱码问题
近日,由于业务需要导出sql server 数据到DBF文件,要查询多表记录,并适当处理后生成导出DBF文件,系统使用delphi2010平台开发. 首先按要求在VFP里创建DBF表,字段数有240个 ...
- xls/csv文件转换成dbf文件
转至:https://blog.csdn.net/linhai1028/article/details/80211252 编写的一个小脚本,主要是利用python中的pandas,xlrd,dbfpy ...
- Java读取Level-1行情dbf文件极致优化(3)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- Java读取Level-1行情dbf文件极致优化(2)
最近架构一个项目,实现行情的接入和分发,需要达到极致的低时延特性,这对于证券系统是非常重要的.接入的行情源是可以配置,既可以是Level-1,也可以是Level-2或其他第三方的源.虽然Level-1 ...
- matlab结构体形式保存数据生成.mat文件< 转>
2015年 参加天池大数据竞赛 为了建立模型,打算基于matlab使用Random Forest Algorithm的工具包 该工具包我在此分享给大家,http://yunpan.cn/cVX ...
- MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中
MATLAB实例:新建文件夹,保存.mat文件并保存数据到.txt文件中 作者:凯鲁嘎吉 - 博客园 http://www.cnblogs.com/kailugaji/ 用MATLAB实现:指定路径下 ...
- EasyDSS高性能RTMP、HLS(m3u8)、HTTP-FLV、RTSP流媒体服务器功能简介---实时数据统计报表、视频文件上传、点播、分享、集成
熟悉EasyDSS流媒体服务器的小伙伴应该都知道,EasyDSS通过将EasyRTMP推流的直播流进行直播转码.智能处理.视频分发,再通过 CDN 分发节点分发到终端播放 SDK为观众播放高清低延时的 ...
随机推荐
- shiro(四)项目开发中的配置、
配置拦截.过滤.验证请求 <!-- shiro --> <!-- 項目自定义的Realm --> <bean id="ShiroRealm" clas ...
- fine-tuning 两阶段模型
目前大部分的nlp任务采用两阶段的模型,第一阶段进行预训练,一般是训练一个语言模型.最出名的是BERT,BERT的预训练阶段包括两个任务,一个是Masked Language Model,还有一个是N ...
- [转]HTML5 script 标签的 crossorigin 属性到底有什么用?
HTML5 script 标签的 crossorigin 属性到底有什么用? 最近Bootstrap 4已经正式发布了,可能已经有爱尝鲜的小伙伴在 alpha 阶段就尝试过 BS4.不过今天要说的不是 ...
- Android全平台书籍
<Android Database Programming>:全书研究Android平台下的数据库技术. <Android Application Programming with ...
- Java的四种引用——强引用、软引用、弱引用、虚引用
目录 强引用 软引用 弱引用 虚引用 强引用 拥有强引用的对象永远不会被GC,可以根据引用的get方法获取到被引用对象 软引用 在内存充足的额时候,拥有软引用的对象不会被GC:即将内存溢出的时候,会对 ...
- MyBatis(八)联合查询 级联属性封装结果集
(1)接口中编写方法 public Emp getEmpandDept(); (2)编写Mapper文件 <resultMap type="com.eu.bean.Emp" ...
- su;su -;sudo;sudo -i;sudo su;sudo su - 之间的区别
今天我们来聊聊su;su -;sudo;sudo -i;sudo su;sudo su -他们之间的区别. su :su 在不加任何参数,默认为切换到root用户,但没有转到root用户家目录下,也就 ...
- BUAA-OO-第一单元总结
BUAA-OO第一单元博客总结 第一次作业总结 (1)类关系图 第一次作业类图关系简单,仅有一个Poly封装类以及一个Main主类调用Poly,Poly封装类内部完成了包括对象构造,求导,生成字符串的 ...
- mysql中Table is read only的解决方法
首先去到mysq的bin目录 cd /usr/local/mysql/bin 执行如下mysqladmin ./mysqladmin -p flush-tables 接着输入数据库存的root密码即可
- barrel_shift
barrel_shift的目的就是在一个bus中根据idx动态选择一部分数据输出如: *dw-:]; -:];// 0~132 *dw-:]; 上面就要求从256的数据单元中选择124个数据单元输出, ...