JAVA中调用LevelDB用于Linux和Window环境下快速存储KV结构
一、简介
JAVA中调用LevelDB用于Linux和Window环境下快速存储KV结构
二、依赖
<!-- https://mvnrepository.com/artifact/org.fusesource.leveldbjni/leveldbjni-all -->
<dependency>
<groupId>org.fusesource.leveldbjni</groupId>
<artifactId>leveldbjni-all</artifactId>
<version>1.8</version>
</dependency>
三、代码
package com.dearcloud.utils.leveldb; import lombok.extern.log4j.Log4j2;
import org.fusesource.leveldbjni.JniDBFactory;
import org.iq80.leveldb.DB;
import org.iq80.leveldb.Options; import java.io.File;
import java.io.IOException;
import java.util.Map;
import java.util.Objects;
import java.util.concurrent.ConcurrentLinkedQueue; @Log4j2
public class LeveldbUtils {
private DB db;
private File file;
private Options options; public LeveldbUtils(File file, Integer cahceSize, Integer blockSize) {
Objects.requireNonNull(file);
File[] files = file.listFiles();
if (files != null && files.length > 0) {
log.warn("levelDb directory is not empty. file=[{}]", file);
}
this.file = file;
if (blockSize == null) blockSize = 1024 * 1024 * 10;
if (cahceSize == null) cahceSize = 1024 * 1024 * 20;
options = new Options();
options.cacheSize(cahceSize);
options.blockSize(blockSize);
options.maxOpenFiles(5);
options.writeBufferSize(10000000);//单个文件32MB
reOpenDb();
} private void openDb() {
synchronized (this) {
boolean isok = false;
try {
JniDBFactory.factory.destroy(file, options);
isok = true;
} catch (Exception ex) {
log.warn("levelDb destroy failed. file=[{}]", file);
}
try {
db = JniDBFactory.factory.open(file, options);
isok = isok && true;
} catch (IOException e) {
log.error("levelDb rebuild init failed. file=[{}]", file);
}
if (isok)
log.info("leveldb rebuild success.");
}
} public synchronized void put(String key, byte[] value) {
try {
db.put(JniDBFactory.bytes(key), value);
} catch (Exception ex) {
log.warn("[save to localDb] save single item to localDb failed.", ex);
}
} public synchronized void put(ConcurrentLinkedQueue<Map.Entry<byte[], byte[]>> data) {
for (Map.Entry<byte[], byte[]> datum : data) {
try {
db.put(datum.getKey(), datum.getValue());
} catch (Exception ex) {
log.warn("[save to localDb] save to localDb failed.", ex);
}
} } public synchronized void close() {
try {
db.close();
JniDBFactory.factory.destroy(file, options);
} catch (IOException e) {
log.error("[LeveldbUtils]:levelDb close failed.", e);
}
} }
JAVA中调用LevelDB用于Linux和Window环境下快速存储KV结构的更多相关文章
- linux和window环境下安装ruby和sass
linux下安装ruby 下载linux的ruby安装包 http://www.ruby-lang.org/en/downloads/ 将ruby安装包在linux环境下解压 tar -x ...
- java中调用dll文件的两种方法
一中是用JNA方法,另外是用JNative方法,两种都是转载来的, JNA地址:http://blog.csdn.net/shendl/article/details/3589676 JNativ ...
- 如何在Java中调用Python代码
有时候,我们会碰到这样的问题:与A同学合作写代码,A同学只会写Python,而不会Java, 而你只会写Java并不擅长Python,并且发现难以用Java来重写对方的代码,这时,就不得不想方设法“调 ...
- 在Java中调用Python
写在前面 在微服务架构大行其道的今天,对于将程序进行嵌套调用的做法其实并不可取,甚至显得有些愚蠢.当然,之所以要面对这个问题,或许是因为一些历史原因,或者仅仅是为了简单.恰好我在项目中就遇到了这个问题 ...
- 在Java中调用Python代码
极少数时候,我们会碰到类似这样的问题:与A同学合作写代码, A同学只会写Python,不熟悉Java ,而你只会写Java不擅长Python,并且发现难以用Java来重写对方的代码,这时,就不得不想方 ...
- Tensorflow 保存模型 & 在java中调用
本节涉及: 保存TensorFlow 的模型供其他语言使用 java中调用模型并进行预测计算 一.保存TensorFlow 的模型供其他语言使用 如果用户选择“y” ,则执行下面的步骤: 判断程序执行 ...
- Java中调用c/c++语言出现Exception in thread "main" java.lang.UnsatisfiedLinkError: Test.testPrint(Ljava/lang/String;)V...错误
错误: Exception in thread "main" java.lang.UnsatisfiedLinkError: Test.testPrint(Ljava/lang/S ...
- java中调用js脚本
JDK1.6加入了对Script(JSR223)的支持.这是一个脚本框架,提供了让脚本语言来访问Java内部的方法.你可以在运行的时候找到脚本引擎,然后调用这个引擎去执行脚本.这个脚本API允许你为脚 ...
- autoit 处理文件上传弹出框,并在JAVA中调用
Java 代码 //定义exe 文件存放的绝对路径 File file2 = new File("."); String command = file2.getCanonical ...
随机推荐
- Ubuntu18.04上安装Docker CE
建立 REPOSITORY 1.更新索引包 更新 /etc/apt/sources.list 和 /etc/apt/sources.list.d 中列出的源的地址,这样才能获取到最新的软件包 sudo ...
- HDU 4768 Flyer【二分】||【异或】
<题目链接> <转载于 >>> > 题目链接: n个社团派发传单,有a,b,c三个参数,派发的规则是,派发给序号为a,a+c....a+k*c,序号要求是小 ...
- [ 高危 ] hash碰撞DOS漏洞
这是一个很神奇的漏洞 hotel.meituan.com订单页面,POST提交的是一串json数据.当把这串数据换成json碰撞数据 后,服务器原本 100毫秒可以响应的数据包,变成需要30秒才能响应 ...
- 大数据技术 - 分布式文件系统 HDFS 的设计
本章内容介绍下 Hadoop 自带的分布式文件系统,HDFS 即 Hadoop Distributed Filesystem.HDFS 能够存储超大文件,可以部署在廉价的服务器上,适合一次写入多次读取 ...
- 从小白到区块链工程师:第一阶段:Go语言环境的搭建(1)
一,Golang语言简介 2009年由谷歌公司推出,由C语言之父Ken Thompson主导研发.Go(又称Golang)是Google开发的一种静态强类型.编译型.并发型,并具有垃圾回收功能的编程语 ...
- python 元类的简单解释
本文转自博客:http://www.cnblogs.com/piperck/p/5840443.html 作者:piperck python 类和元类(metaclass)的理解和简单运用 (一) p ...
- FasterRCNN代码解读
之前的文章简要介绍了Faster-RCNN等物体检测的算法,本文将从代码角度详细分析介绍Faster-RCNN的实现.本文使用的代码参考了chenyuntc的实现,代码的位置看这里.需要注意的是,本文 ...
- Eclipse块选择快捷键
快捷键:Shift+Alt+A 功能:可删除复制选中区域中的内容 效果图:
- ES6基础语法
1. 什么是ECMAScript ECMAScript是一种由Ecma国际(前身为欧洲计算机制造商协会,英文名称是European Computer Manufacturers Association ...
- Stm32常见英文缩写
Stm32常见英文缩写 https://wenku.baidu.com/view/4b9c2eee5022aaea998f0f5b.html STM32嵌入式开发常见缩写 https://wenku. ...