一.概述 "光说不练假把式." 官网上的介绍多少让人迷迷糊糊的,各种高大上的词语仿佛让 NiFi 离我们越来越远. 实践是最好的老师.那就让我们试用一下 NiFi 吧! 二.安装 由于我的整个学习和使用过程都是在 Linux 下完成,所以,整个教程也是面向 Linux 用户的. 其他系统下的使用方法类似,如有其他系统的用户,那么还请有选择性的进行参考本教程. NiFi 是免安装地,仅需从官网下载压缩包,然后解压,旋即完成了整个安装过程. 官网下载压缩包:nifi.apache.org/…
『NiFi 学习之路』简介 『NiFi 学习之路』入门 -- 下载.安装与简单使用 『NiFi 学习之路』资源 -- 资料汇总 『NiFi 学习之路』把握 -- 架构及主要组件 『NiFi 学习之路』使用 -- 主要组件的使用 『NiFi 学习之路』自定义 -- 组件的自定义及使用 『NiFi 学习之路』感悟 -- 我对 NiFi 的理解 NiFi 这个东西到底有哪些应用场景?这些功能特性是如何在使用过程中发挥作用的?这些功能特性的底层实现是如何 一.概述 2017 年的 2 月初到写就这篇文章…
一.概述 许多业务仅仅使用官方提供的组件不能够满足性能上的需求,往往要通过高度可定制的组件来完成特定的业务需求. 而 NiFi 提供了自定义组件的这种方式. 二.自定义 Processor 占坑待续 三.Debug Processor 目前似乎没有较好的方式,有一个邮件列表就此话题进行了探讨. Getting started developing/debugging Nifi processors [hortonworks]Is there a way to debug a custom NiF…
一.概述 大部分 NiFi 使用者都是通过 NiFi 的 Processor 来实现自己的业务的.因此,我也主要就 NiFi 官方提供的 Porcessor 进行介绍. 二.Processor 如果你没有修改 Processor 的存放目录的话,Processor 被存放在 [nifi_install_location]/libs 目录下,NiFi 被启动时,都会将该目录下的组件加载到系统中,供用户使用. 这里我主要对我使用的一些 Processor 进行介绍. http://nifi.apac…
一.概述 通过前面几篇文章的学习,相信你对 NiFi 有了一个基础性的了解. 数据处理和分发系统 是什么概念? NiFi 系统中数据的传递方式是怎样的? NiFi 的重要 Processor 有哪些? Processor 间是以何种方式进行协作的? 上述问题对于阅读并练习了前几章内容的你来说,应该都不难理解. 那么对于更加深层次的问题诸如:各个 Processor 是如何运行的?ExecuteScript 是如何对脚本初始化的?整个系统是如何实现对数据进行存储.分发和处理的?应该更能勾起你的兴趣…
一.概述 由于 NiFi 是一个比较新的开源项目,国内的相关资料少之又少. 加之,大家都知道,国内的那么些个教程,原创都只是停留在初级使用阶段,没有更多深入的介绍. 再者,其余的文章不是东抄抄就是西抄抄,有的是翻译国外的资料,蹩脚得很,还不如直接看英文原文呢. 二.资源列表 2.1 官方文档 官网:nifi.apache.org 官网文档:nifi.apache.org/docs 2.2 国外博客 Matt Burgess: 此人出了一系列的 NiFi ExecuteScript 的文章 --…
1.下载安装目前最新版的qt,官网链接:https://www.qt.io/qt5-8/: 和qt4不同,qt5在线安装,轻巧快速,而且不用配置一些繁琐的东西,安装之后会出现Qt creator这就是我们之后使用的IDE. 2.Qt creator工程包含不同类型的文件 _ .pro项目描述文件 _ .pro.user 用户配置描述文件  _ .ui 界面描述文件  _ 资源文件(图片,音频等) 2.1 .pro项目描述文件的基本组成 _ .#  注释符 _ QT 模块声明 _ TARGET  …
C#/.NET 学习之路--从入门到放弃 此系列只包含 C#/CLR 学习,不包含应用框架(ASP.NET , WPF , WCF 等)及架构设计学习书籍和资料. C# 入门 <C# 本质论> <果壳中的C#> 设计模式 <大话设计模式> <Head First 设计模式> C# 进阶 <深入理解C#> <你必须知道的.NET> <C#高效编程 : 改进C#代码的50个行之有效的办法(第2版)> <More Effe…
go语言,golang学习笔记1 官网下载安装,中文社区,开发工具LiteIDE Go语言是谷歌2009发布的专门针对多处理器系统应用程序的编程进行了优化,使用Go编译的程序可以媲美C或C++代码的速度,而且更加安全.支持并行进程. Go语言中文网 - Golang中文社区https://studygolang.com/ The Go Programming Language (官方网站需要翻)https://golang.org/ 下载后直接下一步,下一步安装就可以了 下载 LiteIDE -…
标题:我的 Delphi 学习之路 -- Delphi 助手的安装 作者:断桥烟雨旧人伤 Delphi 助手的安装 CnWizards 类似于 VS 中的番茄助手,在编写 Delphi 代码时帮助极大,以下为它的安装过程. CnWizards 安装语言支持简体中文,所以这里我们选择简体中文安装,如下: 点击下一步: 点击我接受: 这里需将下面三个勾勾上,然后再点击下一步: 选择安装路径: 把自述文件的勾去掉,点击完成: 在 Delphi IDE 启动画面上会出现 Wizards,说明已经安装成功…
Netty学习——Apache Thrift 简介和下载安装 Apache Thrift 简介 本来由Facebook开发,捐献给了Apache,成了Apache的一个重要项目 可伸缩的,跨语言的服务开发,他将融合了软件栈和代码生成引擎. IDL:Interface Description LanguageAndroid:AIDL:Android interface description language 下载安装Thrift,加载Thrift的依赖安装thrift编译器(安装稍微麻烦一些,因…
MySQL数据库初识 MySQL数据库 本节目录 一 数据库概述 二 MySQL介绍 三 MySQL的下载安装.简单应用及目录介绍 四 root用户密码设置及忘记密码的解决方案 五 修改字符集编码 六 初识sql语句 一 数据库概述 1. 数据库??? 什么是数据库呢? 先来看看百度怎么说的 数据库,简而言之可视为电子化的文件柜——存储电子文件的处所,用户可以对文件中的数据运行新增.截取.更新.删除等操作. 所谓“数据库”系以一定方式储存在一起.能予多个用户共享.具有尽可能小的冗余度.与应用程序…
​ 0 序篇 2015年11月,Google正式发布了Tensorflow的白皮书并开源TensorFlow 0.1 版本. 2017年02月,Tensorflow正式发布了1.0.0版本,同时也标志着稳定版的诞生. 2019年10月,TensorFlow在经历七个多月(2019年3月1日-2019年10月1日)的 2.0 Alpha 版本的更新迭代后发布 2.0 正式版. 2.0 正式版官方介绍视频 https://v.qq.com/x/page/b3003v2g8dq.html 虽然 2.0…
字数1374 阅读4622 评论0 喜欢49 以前学习过一段时间的web前端开发,整理了一些我看过的/我认为比较好的学习资料(网站.书籍).不要问我为啥没有进阶版,我只是一条产品汪而已,求轻喷.== 以下引用知乎 @李路 的话. 以我的经验,大部分技术,熟读下列四类书籍即可. 入门,用浅显的语言和方式讲述正确的道理和方法,如head first系列全面,巨细无遗地探讨每个细节,遇到疑难问题时往往可以在这里得到理论解答,如Definitive Guide/Programming xx系列实践,结合…
▓▓▓▓▓▓ 大致介绍 前面一片博客介绍了Git到底是什么东西,如果有不明白的可以移步 Git学习之路(1)-Git简介 ,这篇博客主要讲解在Windows上安装Git和创建一个版本库 ▓▓▓▓▓▓ 安装Git 因为我是用的Windows,所以就介绍一下在Windows上怎样安装,Linux.Mac的请移步 廖雪峰的官方网站-Git教程 或者 CODE帮助文档-Progit中文版 下载Git的客户端可以点击 Git for Windows ,由于网速感人,所以我提供了一个百度云的链接,点击下载…
今天自己一直在瞎捣鼓 最后这里整理下 selenium IDE 这个录制工具的下载安装 首先这个工具只支持火狐浏览器firefox.使用火狐浏览器进入selenium官网: http://www.seleniumhq.org/download/ 依次下图操作 等待安装成功后.重启浏览器即可使用selenium IDE录制工具 入口如下图: 录制成功后.可以根据需要生成代码,这里可以直接生成unittest框架下webdriver基础的python代码…
Oracle体系结构 实例: 一个操作系统只有一个 Oracle 数据库 一个 Oracle 数据库可以有多个 Oracle 实例(通常只安装一个实例) 一个实例对应着一系列的后台进程和内存结构 表空间: 一个实例在逻辑上可以分成若干个表空间 表空间是 Oracle 对数据文件的逻辑映射 表空间不属于任何用户 多个用户可以共用一个表空间 数据文件(ora/dbf): 一个表空间由若干个物理磁盘上的数据文件组成 一个数据文件只能属于一个表空间 数据表: 一个表空间可以有多个数据表 一个用户可以有多…
<读书报告 – Elasticsearch入门 > 第一章 Elasticsearch入门 Elasticsearch是一个实时的分布式搜索和分析引擎,使得人们可以在一定规模上和一定速度上实现数据检索,常用于全文本检索,结构化检索.分析以及三种的结合应用.Wikipedia.Guardian.Stack Overflow.Github都在使用Elasticsearch实现自己的相关检索工作. 1.1 you konw,for search Elasticsearch是一个基于Apache Lu…
Docker的简介 Docker是一个基于GO语言开发的应用容器,它是一款适合运维人员和后段开发人员学习的开源容器引擎.Docker容器可以让开发的应用或者依赖包存储其中,可以运行在任何的Linux 机器上.Docker容器完全利用沙箱机制,相互之间不会通过任何接口关联,开销非常低. Docker的下载与安装 1.手动下载安装包安装: Docker的下载可以通过官网的方式手动下载安装包:https://www.docker.com/get-started 我使用的是MacBook Pro 依我的…
android studio,简称AS,是集成开发环境,所谓集成,就是集编辑.编译.调试.打包等于一体.简单来说,通过AS,就可以开发出在android系统上运行的APP. 我使用的是macos系统.在这个网站寻找AS来安装:https://developer.android.com/studio/,这个网站的最下面有提到对电脑的最低要求. 下载3.2版本,安装. 安装后就可以启动as,如果是覆盖安装,比如从2.3升级到3.2,那可以按向导的指引,使用之前的偏好设置. 这时as这个ide已经安装…
①前言:昨天已经上线了的智能家居项目出现了一个BUG,需要重新写个html发布到服务器上,由于公司大佬都在忙别的项目,时间比较紧张,这种小事就落到了我这个小喽啰身上.其实,写个html我还是可以接受的,但是要部署到服务器上就有点脑袋大了,(因为从来没有接触过,哈哈)昨天把页面写好后,今天上午研究了一上午,终于部署好了,然后写下这篇博客记录一下.②需求:Linux环境下部署一个html页面③解决方案:第一步:首先我们需要一个shell,什么是shell?简单来说就是一个可以连接Linux服务器的软…
不知不觉学习python已经两个月了,从一开始不知道如何对print的格式化,到现在可以手撸orm,这期间真的是 一个神奇的过程.为了巩固自己的基础知识,为后面的拓展埋下更好的伏笔,此文当以导师的博客来仔细的复习.老 师的博客地址http://www.cnblogs.com/linhaifeng/p/7278389.html. 首先第一天学习的便是python入门,即对python基础以及编程语言进行了简单的介绍. 一 编程与编程语言 首先python是一门编程语言,我们要学python首先要搞…
后台框架是真难入门啊!!!IDE的使用,环境的搭建,框架下载,上手,每一步都恶心人. 花了整整两天,才学会用idea,并且初步了解了maven(TM就是一个npm),然后跟着下载了对应的jar包,搭建了一个简单的servlet. 这里暂时记录一下遇到的坑. 首先,为什么放弃Myeclipse?这个IDE只能下破解版的,界面是真的丑,下载的那些主题也特别僵硬.最重要的是,由于版本太低,只能用低版本的jdk,经常报一个version 51***的error,只能把jdk调到1,6,对应maven.s…
Linux操作系统 Download, extract and compile Redis with: $ wget http://download.redis.io/releases/redis-4.0.11.tar.gz$ tar xzf redis-4.0.11.tar.gz$ cd redis-4.0.11$ makeThe binaries that are now compiled are available in the src directory. Run Redis with:…
预习内容 defer 的作用有哪些? 多个 defer 的执行顺序是怎样的? defer,return,函数返回值 三者之间的执行顺序 defer的作用 go中的defer是延迟函数,一般是用于释放资源或者收尾工作. 由于defer是具有延迟特性且执行动作是在函数return之后,因此作为资源释放作用再好不过. 典型例子:释放锁.关闭文件.关闭链接等 // 释放锁 func getValue() { s.Lock() defer s.Unlock() ... } // 关闭文件 func rea…
代码没有优化,暂时先实现结果 package download; import java.io.File; import java.io.InputStream; import java.io.RandomAccessFile; import java.net.HttpURLConnection; import java.net.URL; /** * @author Liu Yutao * @className Down * @email koal@vip.qq.com * @date 2016…
原文链接地址:http://blog.liuhaoyang.me/dotnet/2016/11/25/csharp-books/ 向架构师大步迈进的书单 C# 入门 <C# 本质论> <果壳中的C#>     设计模式 <大话设计模式> <Head First 设计模式>     C# 进阶 <深入理解C#> <你必须知道的.NET> <C#高效编程 : 改进C#代码的50个行之有效的办法(第2版)> <More E…
1.计算机组成 2.开发接口标准 ABI--(Application Binary Interface) ABI描述了应用程序与OS之间的底层接口,允许编译好的目标代码在使用兼容ABI的系统中无需改动就能运行. API--(Application Programming Interface) API定义了源代码和库之间的接口,因此同样的源代码可以在支持这个API的任何系统中编译(AIEEE在操作系统上定义的一系列API标准). 3.Linux运行文件格式 ELF:可运行文件格式(类似于Windo…
2006年ARM公司推出了基于ARMV7架构的cortex系列的标准体系结构,以满足各种技术得不同性能要求,包含了A,R,M三个分工明确的系列 其中A系列面向复杂的尖端应用程序,用于运行开放式的复杂操作系统:R系列适合实时操作系统,M系列专门针对低成本的微控制领域.而我们今天要学习的STM32就是M3的处理器 STM32(M3)处理器的基本结构,基本结构如图所示,主要包括处理器核cortex-m3 core,NVIC,BUS MATRIS,FLASH转换,及断点单元,DWT,ITM,MPU,ET…
一.Scala解释器的使用 REPL:Read(取值)-> Evaluation(求值)-> Print(打印)-> Loop(循环) scala解释器也被称为REPL,会快速编译scala代码为字节码,然后交给JVM来执行. 计算表达式:在scala>命令行内,键入scala代码,解释器会直接返回结果. 如果你没有指定变量来存放这个值,那么值默认的名称为res,而且会 显示结果的数据类型,比如Int.Double.String等等. 例如,输入1 + 1,会看到res0: Int…