下载Kafka 1.下载Kafka:http://mirror.bit.edu.cn/apache/kafka/2.3.0/kafka_2.12-2.3.0.tgz 2.解压后复制Kafka文件夹,分别命名为kafka1.kafka2.kafka3 修改配置文件 修改config文件夹下的server.properties ,其中的brokerId是惟一的,集群中kafka服务器配置的brokerId不能相同,相当于zookeeper的myid zookeeper.connect=127.0.0

一.组件版本说明 Java JDK:1.8.0_144 spark-2.4.3-bin-hadoop2.7hadoop-2.7.7 scala-2.12.8 hadooponwindows-master Python3.7 注意事项: Spark运行在Java 8 +,Python 2.7 + / 3.4 +和R 3.1+上.对于Scala API,Spark 2.4.3使用Scala 2.12.您需要使用兼容的Scala版本(2.12.x) 1.JDK安装 下载安装后配置环境变量: 配置环境变

一.安装JDK 1.下载(网页链接) 2.双击安装文件进行安装,安装在合适目录,例如:D:\Java\jdk1.8.0_201与D:\Java\jre1.8.0_201 3.设置环境变量 3.1.JAVA_HOME 新建一个系统环境变量,变量名为JAVA_HOME,变量值为JDK的安装路径 3.2.Path 在系统变量中找到Path,将%JAVA_HOME%\bin和%JAVA_HOME%\jre\bin添加到变量表中 3.3.CLASSPATH 新建一个系统环境变量,变量名为CLASSPATH

window10本地搭建SVN服务器教程:https://www.cnblogs.com/warmlight/p/11075644.html 我按照这篇教程成功搭建SVN服务器. 有个比较坑的地方是windows中,在使用VisualSVN server Manager中修改server names时,修改不成功.一直不能使用,后来重新装了几次也不行.实在没办法了.因为修改了server.conf文件后依然没用,之后重启了.重启HTTP(SVN的)也没用.可能是修改后就需要重启电脑吧.反正我不想

前言 经过三次重装,查阅无数资料后成功完成hadoop在win10上实现伪分布式集群,以及IDEA开发环境的搭建.一步一步跟着本文操作可以避免无数天坑. 下载安装Hadoop 下载安装包 进入官网下载下载hadoop的安装包(二进制文件)http://hadoop.apache.org/releases.html 我们这里下载2.10.1版本的,如果想下载更高版本的请先去maven仓库查看是否有对应版本 解压文件 下载好的.gz文件可以直接解压. winRAR和Bandizip都可以用来解压,但

https://juejin.im/post/5d22e46ee51d45775746b9b1 导读 在使用window系统开发时由于系统环境和线上环境不一致可能导致各种问题,以及部分扩展库只支持liunx 系统 下运行,Linux的开发环境尤为重要. window的linux环境一般由vm/vbox 在虚拟机下运行当然也可以在虚拟机上将window挂载在linux 挺麻烦就是了.加上虚拟机运行占用高等问题 更新2019-07-10 使用 VM VirtualBox 搭建完善的Linux开发环境

去年底入手一台联想Y7000P,配置了Nvidia GeForce GTX 1660 Ti GPU,GPU内存6G,但是因为有GPU服务器,所以一直没有在这台笔记本上跑过模型,如今经过一番折腾,终于在此笔记本上搭建好了环境,并成功使用GPU训练了一些模型,本篇记录了环境搭建的过程. 检查你的GPU 首先确保你的电脑有Nvidia的GPU,并且支持CUDA,可以参考这个网址. 安装vs2017 Visual Studio 2017 Community下载地址 安装选项:勾选"C++的桌面开发&qu

1:首先安装nodejs C:\Users\yan>node -v v4.5.0 2:安装Electron C:\Users\yan>npm install --g electron-prebuilt 使用淘宝镜像 npm install -g cnpm --registry=https://registry.npm.taobao.org 再次安装 cnpm install electron-prebuilt -g 3:安装完成后运行 electron -v 检查是否安装成功 C:\Users

我在配置Vue.js环境的时候遇到了很多的问题,希望能把这些解决方法也介绍给大家,希望能帮到大家,共同学习. 如果要转发,请注明原作者和原产地,谢谢! 注释:下面任何命令都是在windows的命令行工具下进行输入 安装步骤 第一步:nodejs安装 nodejs官网下载:http://nodejs.cn/download (建议:安装最新版,结合自己电脑的情况安装,我的是64位的)nodejs的安装路径更改一下,其他都是默认的就好了. 当你输入npm -v和node -v出现版本号就证明你安装成

安装python 下载python3.5.4 https://www.python.org/downloads/release/python-354/ 选择Windows x86-64 executable installer 自定义安装勾选tk/tl选项 安装pip curl https://bootstrap.pypa.io/get-pip.py -o get-pip.py python get-pip.py 安装TensorFlow-gpu 执行pip3 install tensorgfl

1.安装 Electron 首先要安装Node.js     (安装方法:https://www.cnblogs.com/inkwhite/p/9685520.html) 我这里已经安装好了. 2:安装Electron C:\Users\Administrator>npm install --g electron-prebuilt 安装完成 1.找到你的前端网页项目文件夹,新建 package.json.main.js.index.html 三个文件(注:其中的 index.html 是你的网页

面向微服务开发时会涉及到多系统的日志跟踪,一旦出现问题过滤起来系统间切换非常麻烦,所以需要采用特定工具将日志统一归类处理,方便查询排查错误,下面将介绍一种开源的工具ELK. ELK由ElasticSearch.Logstash和Kiabana三个开源工具组成.官方下载地址:https://www.elastic.co/cn/downloads/ 准备环境 客户机:win10 Java环境: jdk1.8(必须1.7以上版本!!!) 组件信息:    logstash: 日志收集过滤工具, 下载 

最近,问的比较多的问题居然是jdk的问题,对于新手来说这确实有点难度,毕竟一个人经常上网浏览新闻和观看视频的人,一下子开始一门编程语言的环境搭建.这中间需要一个慢慢适应的过程.回想当初我在这个阶段也很纠结,在此和大家分享一下我的经验. ☆ 准备工作 ①,保证自己自己电脑连接网络②,知道怎么打开dos(注:window徽标键+R键,输入cmd,然后回车) ☆ JDK下载 ①,凯哥学堂官网下载专区下载,在浏览器输入www.kaige123.com回车,进入官网,点击下载专区.找到下图所示: ②,去o

用到的工具:VMware.hadoop-2.7.2.tar.jdk-8u65-linux-x64.tar.ubuntu-16.04-desktop-amd64.iso 1.  在VMware上安装ubuntu-16.04-desktop-amd64.iso 单击"创建虚拟机"è选择"典型(推荐安装)"è单击"下一步" è点击完成 修改/etc/hostname vim hostname 保存退出 修改etc/hosts 127.0.0.1 loc

最近两个星期一直在琢磨kvm安装window10操作系统,并且通过桥接模式与外界通信,经历了九九八十一难,终于搞定.下面就记录以下我们在探索的过程中踩过的坑. 安装KVM 1. 系统要求:需要一台可以运行最新linux内核的intel处理器(含VT虚拟化技术)或者AMD处理器(含SVM安全虚拟化技术的AMD处理器,也可以叫AMD-V).(如果没有配置可以在BIOS中进行配置) 使用命令进行检查: [root@corehadoop31 ~]# cat /proc/cpuinfo |egrep "v

1.hbase的介绍(自行百度hbase,比我总结的全面具体) HBase – Hadoop Database,是一个高可靠性.高性能.面向列.可伸缩的分布式存储系统,利用HBase技术可在廉价PC Server上搭建起大规模结构化存储集群. HBase是Google Bigtable的开源实现,类似Google Bigtable利用GFS作为其文件存储系统,HBase利用Hadoop HDFS作为其文件存储系统;Google运行MapReduce来处理Bigtable中的海量数据,HBase同

---恢复内容开始--- django搭建一个通讯录应用 一.环境介绍 window10 64位 Django-1.5.12 python 2.7 Sqlite3 二.基本安装 python2.7安装教程地址:http://jingyan.baidu.com/article/19192ad8399a62e53e5707e0.html Django安装教程地址:http://www.runoob.com/django/django-install.html SQLite3安装教程: 下载地址:ht

上期我们已经进行Linux的平台搭建,今期我们就来搭建下我们最常用的.最适合初学者的一种方式,那就是搭建Windows平台开发环境,只需要两种工具即可,一个就是编辑器(编辑代码的工具),另一个就是编译器,也就是上期我们在CentOS 7系统所安装的那个gcc 编译器,下面就开始我们的平台搭建吧. 零基础学习C语言---Windows平台配置 Window 10下的搭建 两个工具 为什么我们先在window 10下搭建,因为现在的电脑的系统普遍都是window 10了,而且我用的也是window

eclipse工具下hadoop环境搭建:    window10操作系统中搭建eclipse64开发系统,配置hadoop的eclipse插件,让eclipse可以查看Hdfs中的文件内容.    1.将hadoop-eclipse-plugin-2.5.2.jar文件移动到eclipse的plugins文件夹中.    2.重启eclipse工具.打开eclipse工具以后,找到如下位置,打开map/reduce.     3.切换视图到MapReduce视图下面,配置连接信息. 注意: a

前言 hexo是一个台湾人做的基于Node.js的静态博客程序,优势是生成静态文件的速度非常快,支持markdown, 我最终选定它的原因是它速度快而且不容易出错,并且可以一键部署到github或者其它静态服务器上去.折腾了一天总算搞定.江湖小剑客 环境:window10,nodejs(v8.10.0),git(version 2.15.1.windows.2),hexo 环境准备 1.安装Node.js和配置好Node.js环境,打开cmd命令行,成功界面如下 C:\Users\liquan>

本文将带领您一步一步地搭建Java开发环境 一.认识什么是Java Java 是由Sun Microsystems公司于1995年5月推出的高级程序设计语言. Java可运行于多个平台,如Windows, Mac OS,及其他多种UNIX版本的系统. 二.安装JDK 下载JDK 首先我们需要下载java开发工具包JDK,下载地址:http://www.oracle.com/technetwork/java/javase/downloads/index.html,点击如下下载按钮: 在下载页面中你