Spark Streaming揭秘 Day28 在集成开发环境中详解Spark Streaming的运行日志内幕 今天会逐行解析一下SparkStreaming运行的日志,运行的是WordCountOnline这个Demo. 启动过程 SparkStreaming启动是从如下日志开始: 16/06/16 21:26:44 INFO ReceiverTracker: Starting 1 receivers 16/06/16 21:26:44 INFO ReceiverTracker: Recei…

isinstance和issubclass isinstance(obj,cls)检查是否obj是否是类 cls 的对象 判断这个对象是不是这个类,或者是不是这个类的子类的实例化 class Foo(object): pass obj = Foo() isinstance(obj, Foo) issubclass(sub, super)检查sub类是否是 super 类的子类(派生类 ) class Foo(object): pass class Bar(Foo): pass issubclas…

1,CRM项目实战-万能权限组件开发参考博客:http://www.cnblogs.com/alex3714/articles/6661911.html 参考代码:https://github.com/liyongsan/git_class/tree/master/day28/LuffyCRM 2.堡垒机 + 主机管理 参考代码:https://github.com/liyongsan/git_class/tree/master/day28/luffyEye 参考博客:http://www.cn…

#上下文协议:文件操作时使用with执行# with open('a.txt','w',encoding='utf-8') as f1:# with语句,为了让一个对象兼容with语句,必须在这个对象的类中声明__enter__和__exit__方法# class Open:# def __init__(self,name):# self.name = name# def __enter__(self):# print('如果出现with语句,__enter__就被触发')# def __exi…

day28 C/S B/S架构 C:client 客户端 B:browse浏览器 S:server 服务端 C/S C/S架构:基于客户端与服务端之间的通信 ​ QQ.游戏.皮皮虾 ​ 优点:个性化设置,响应速度快 ​ 缺点:开发成本,维护成本高,占用空间,用户固定 B/S B/S架构:基于浏览器与服务端之间的通信 ​ 谷歌浏览器.360浏览器.火狐浏览器等等 ​ 优点:开发维护成本低,占用空间相对低,用户不固定 ​ 缺点:功能单一,没有个性化设置,响应速度相对慢一些 网络通信原理 网络通信模拟…

day28 进程(Process) 1.进程的概念 进程(Process)是计算机中的程序关于某数据集合上的一次运行活动,是系统进行资源分配和调度的基本单位,是操作系统结构的基础. # 进程是系统进行资源分配和调度的基本单位 程序:做事的过程,而且是没有生命周期的,程序是永久的 进程:是动态的,是有生命周期的,进程是暂时的 协程:解决单线程下的高并发 # 进程中还可以开线程 线程就是干活的人,进程不是干活的人 线程就是最小的执行单元 进程和线程都是有操作系统来调度的 2.进程的并行和并发 一.进…

先来两张图片,看一看今天写什么: 看到图片右上角是什么了么看到图片以下是什么了么 相信这个大家都不会陌生吧.那些生活中等着秒杀,等着抢小米人们,焦躁等待的你曾一秒一秒的盯着它看么,我不知道答案,可我知道有那么一批人.可能已经在心里開始一秒一秒的開始数了.这一年一度的高考也又要到了.倒计时的时间也是已经越来越小,我不知道哪些在数着考试的时间.哪些在数着毕业的时间.哪些纯粹在数着解脱的时间,呜呼哀哉,各有各路,这道路口现在也就那么着吧. 言归正传,今天来写一下倒计时,到如今来看确然是简单的非常了,可…

1,继续上一小节,讲解双下内置方法,双下getitem,setitem,delitem方法,是对象可以像字典一样的来访问属性 # 普通的字典是像下面这样操作的 dic = {'k' : 'v'} dic['k'] = 'v' class Foo: def __init__(self,name,age,sex): self.name = name self.age = age self.sex =sex def __getitem__(self, item): if hasattr(self,it…

同步锁: Python不是有一把锁了吗?为什么还要加锁? Python解释器的GIL的作用是同一时刻只有一个线程被CPU执行,而同步锁的作用同一时刻只有一个线程对锁定代码块操作 如果不加锁,当多个线程对同一数据操作的时候就有可能出问题,代码如下: import threading import time def minus_num(): global num temp = num time.sleep(0.001) num = temp - 1 num = 100 threads = [] fo…

面向对象进阶博客地址链接: http://www.cnblogs.com/Eva-J/articles/7351812.html 复习昨日内容: # 包 # 开发规范 # # hashlib # 登录验证 密文密码检测 # 密文存储 # 加盐 # 动态加盐 # 检测文件一致性 md5 #MD5.update() # configparser : 配置文件相关 #网络编程 ftp #[section1] #o1 = yes # logging : 日志 #记录一些信息和结果 #打日志 #日志就和p…