本文是Python大数据与机器学习系列文章中的第6篇,将介绍学习Python大数据与机器学习所必须的NumPy库。

通过本文系列文章您将能够学到的知识如下:

  • 应用Python进行大数据与机器学习

  • 应用Spark进行大数据分析

  • 实现机器学习算法

  • 学习使用NumPy库处理数值数据

  • 学习使用Pandas库进行数据分析

  • 学习使用Matplotlib库进行Python绘图

  • 学习使用Seaborn库进行统计绘图

  • 使用Plotly库进行动态可视化

  • 使用SciKit-learn处理机器学习任务

  • K-Means聚类

  • 逻辑回归

  • 线性回归

  • 随机森林与决策树

  • 自然语言处理与垃圾邮件过滤

  • 神经网络

  • 支持向量机

另外小编也会拥抱变化,根据评论中的需求情况增加其它有意义的内容。例如增加一些相关面试题等等。

什么是NumPy

NumPy是非常重要的Python数值计算扩展库,基本整个Python大数据生态都依赖它,并且由于绑定了C语言库,因此速度非常快。可以说我们要学好Python大数据,必须要学的就是NumPy库了。

安装NumPy

如果你根据之前的文章安装了anaconda,那么你已经默认安装了NumPy库了。如想单独安装请继续往下看。

使用conda安装的命令:

conda install numpy

使用pip安装的命令:

pip install numpy

NumPy array

本系列文章主要用到的是numpy的array(数组);

numpy array有两种基本形式:vector(向量)和matrics(矩阵)

vector是一维的,而matrics是二维的。

打开Jupyter,输入如下内容:

import numpy as np

my_list = [1,2,3]

arr = np.array(my_list)

arr

运行得到如下结果:

以上就是vector的一般形式

继续输入如下内容:

my_mat = [[1,2,3],[4,5,6],[7,8,9]]

np.array(my_mat)

运行得到如下结果:

以上就是二维matrics矩阵。

numpy有自己的range函数

np.arange(0,10)

运行结果如下:

还可以指定步长np.arange(0,10,2)

运行结果如下:

生成所有元素为0的向量np.zeros(3)

运行结果如下:

生成所有元素为0的矩阵np.zeros((5,5))

运行结果如下:

同样生成所有元素为1的向量和矩阵分表为np.ones(4),np.ones((2,3))

运行结果如下:

np.linspace(0,5,20)

第一个参数是起始点,第二个参数是结束点,第三个参数是从起点到终点距离分成多少份。

运行结果如下:

np.eye(4)生成4*4的主对角线为1的矩阵

运行结果如下:

np.random.rand(5)生成随机向量

运行结果如下:

np.random.rand(5,5)生成5*5的随机向量

运行结果如下:

np.random.randn(2)生成标准正态分布曲线。

运行结果如下:

np.random.randn(4,4)二维的标准正态分布曲线

运行结果如下:

提示:

在Jupyter输入框中按tab键可以提示联想菜单,按shift+tab可以提示函数用法

按tab键

按shift+tab键

np.random.randint(1,100)生成1个1到100之间的随机整数,不包含100

运行结果如下:

np.random.randint(1,100,10)生成10个1到100之间的随机整数,不包含100

运行结果如下:

array类型支持的一些函数:

reshape函数可以修改array的维数。例如:

arr = np.arange(25)

arr.reshape(5,5)

运行结果如下:

max函数:最大值

min函数:最小值

argmax函数:返回最大值的索引

argmin函数:返回最小值的索引

ranarr = np.random.randint(1,100,10)

ranarr.max()

ranarr.min()

ranarr.argmax()

ranarr.argmin()

运行结果如下:

shape函数,返回array的大小

dtype,返回数据类型

调用简化:

from numpy.random import randint

我们就可以直接使用randint了

randint(2,10)

运行结果如下:

Python大数据与机器学习之NumPy初体验的更多相关文章

  1. 零基础入门到精通:Python大数据与机器学习之Pandas-数据操作

    在这里还是要推荐下我自己建的Python开发学习群:483546416,群里都是学Python开发的,如果你正在学习Python ,小编欢迎你加入,大家都是软件开发党,不定期分享干货(只有Python ...

  2. 零起点PYTHON足彩大数据与机器学习实盘分析

    零起点PYTHON足彩大数据与机器学习实盘分析 第1章 足彩与数据分析 1 1.1 “阿尔法狗”与足彩 1 1.2 案例1-1:可怕的英国足球 3 1.3 关于足彩的几个误区 7 1.4 足彩·大事件 ...

  3. 《零起点,python大数据与量化交易》

    <零起点,python大数据与量化交易>,这应该是国内第一部,关于python量化交易的书籍. 有出版社约稿,写本量化交易与大数据的书籍,因为好几年没写书了,再加上近期"前海智库 ...

  4. H2O是开源基于大数据的机器学习库包

    H2O是开源基于大数据的机器学习库包 H2O能够让Hadoop做数学,H2O是基于大数据的 统计分析 机器学习和数学库包,让用户基于核心的数学积木搭建应用块代码,采取类似R语言 Excel或JSON等 ...

  5. 学习推荐《零起点Python大数据与量化交易》中文PDF+源代码

    学习量化交易推荐学习国内关于Python大数据与量化交易的原创图书<零起点Python大数据与量化交易>. 配合zwPython开发平台和zwQuant开源量化软件学习,是一套完整的大数据 ...

  6. 零起点Python大数据与量化交易

    零起点Python大数据与量化交易 第1章 从故事开始学量化 1 1.1 亿万富翁的“神奇公式” 2 1.1.1 案例1-1:亿万富翁的“神奇公式” 2 1.1.2 案例分析:Python图表 5 1 ...

  7. 【阿里云产品公测】结构化数据服务OTS之JavaSDK初体验

    [阿里云产品公测]结构化数据服务OTS之JavaSDK初体验 作者:阿里云用户蓝色之鹰 一.OTS简单介绍 OTS 是构建在阿里云飞天分布式系统之上的NoSQL数据库服务,提供海量结构化数据的存储和实 ...

  8. python大数据

    http://blog.csdn.net/xnby/article/details/50782913 一句话总结:spark是一个基于内存的大数据计算框架, 上层包括了:Spark SQL类似Hive ...

  9. 使用 .NET 5 体验大数据和机器学习

    翻译:精致码农-王亮 原文:http://dwz.win/XnM .NET 5 旨在提供统一的运行时和框架,使其在各平台都有统一的运行时行为和开发体验.微软发布了与 .NET 协作的大数据(.NET ...

随机推荐

  1. ArcGIS Engine的安装

    1.双击安装文件“setup.exe”. 2.点击“Next”. 3.选择“ I accept the license agreement”,点击“Next”. 4.选择“Complete”,点击“N ...

  2. SpringBoot 集成Web

    1,静态资源访问: 在我们开发Web应用的时候,需要引用大量的js.css.图片等静态资源. 默认配置 Spring Boot默认提供静态资源目录位置需置于classpath下,目录名需符合如下规则: ...

  3. JS事件之onmouseover 、onmouseout 与onmouseenter 、onmouseleave区别

    疫情过后回武汉的第一天打卡,今天偶然遇到一个问题onmouseover .onmouseout 与onmouseenter .onmouseleave这些事件的区别,也看了一些博客,感觉不是很清楚,所 ...

  4. Step by Step!教你如何在k3s集群上使用Traefik 2.x

    本文来自边缘计算k3s社区 作者简介 Cello Spring,瑞士人.从电子起步,拥有电子工程学位.尔后开始关注计算机领域,在软件开发领域拥有多年的工作经验. Traefik是一个十分可靠的云原生动 ...

  5. Spring IOC/ AOP 笔记

    扫描 Bean 以下主要是使用基于注解方式配置 组件扫描(一般用于自己写的类) 添加 @Component 注解,被扫描到后自动作为 Bean 组件 @ComponentScan 扫描配置的位置,将添 ...

  6. Elasticsearch创建mapping

    (put)请求方式 http://192.168.1.200:9200/index_mapping body 参数 { "mappings":{ "properties& ...

  7. 微信小程序将外部数据从父组件中传入到子组件

    小程序组件开发遇到一个组件内嵌两个组件,而这两个子组件所使用的数据来自于同一个API,如下图所示. 如果这时候两个子组件各自导入同一个接口就会显得多余.另外的办法是由父组件导入接口数据,再从父组件将接 ...

  8. Linux基础:Day04

    进程管理1.操作系统基础 调用:kernel通过给应用程序提供system call方式来提供硬件资源:  注意:这个应用程序也包括库文件:  库文件是运行在ring 0上的一段程序代码,不对客户直接 ...

  9. JVM 理解性学习(二)

    1.G1 垃圾回收器 G1 能更少的 "Stop the World" ,能同时对新生代老年代进行垃圾回收. G1 将 Java 堆内存拆分为多个大小相等的 Region,并且新生 ...

  10. webpack中引用jquery

    1.首先需要添加项目中jquery的依赖 npm install jquery --save-dev 2.参考配置代码: var webpack = require("webpack&quo ...