关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 打开SQL Server Data Tools 2015它比2012版增加了不少大数据相关的数据处理组件,SSIS是微软BI的ETL(抽取.转换.加载)工具,SSIS 是 购买安装SQL Server时附加的一个免费工具:它的性能不比第三方收…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277   获取学习资料和一起探讨问题. SSAS是微软BI组件系列中最核心的组件,商业智能的心脏所有的数据都从这里统一输出,它能把数据库表压缩成多维数据集压缩比例大约是10:1,也就是你说100G的数据库能压缩成10G的多维数据库,它最大的特点是从预先设置好的角度任意拖拉维度属性展现数据,这是微软BI的联机分析处理服务(OLAP),面向的是分析主题.它最大的缺点是无法查询大量的明细数据,这也是在商业智能项目实施中甲方没有理解商…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 这张照片确实很帅,我承认我不是因为这张照片而入行BI的,而是没有别的选择了才入行BI的. 大家不要看他拖动图表那么爽.那么自然,你可不知道背后的数据团队要付出多少心血才能让他做分析报表那么轻松自然.在商业智能项目实施的过程中数据清洗整理占用了…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 总线矩阵也是BI核心之一,基本上只要详细了解企业业务战略线就能得出总线矩阵,它对应着企业每一个业务单元,提取业务单元中的一致性维度和事实量值组 组合成企业总线矩阵也就是多维分析模型:总线矩阵也是BI项目实施交付的必要成果之一,它与数据仓库的概…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 首先自我介绍一下,我叫Focus(中文意思:聚焦.焦点.集中),从事BI工作,所以取名叫FocusBI,希望大家不要理解为福克斯汽车品牌了. 从事BI工作已有5年有余,经历大大小小的BI项目8个:从工厂的操作工到BI小白,从小白开始进入BI行…

微信公众号:FocusBI关注可了解更多的商业智能.数据仓库.数据库开发.爬虫知识及沪深股市数据推送.问题或建议,请关注公众号发送消息留言;如果你觉得FocusBI对你有帮助,欢迎转发朋友圈或在文章末尾点赞[1] <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 在 FocusBI:SSIS体系结构.<SSIS开发案例>这两篇文章中讲到SSIS 开发完最终是要被执行的,但是被执行后会…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 数据行业发展的很快,很多一起做BI的朋友都已转入大数据.云计算.人工智能等高大上的领域去了,而我还停留在原地做BI,导致能一起讨论问题的人越来越少,我还有太多BI领域的知识不会,需要深入学习,只好一个人慢慢前行一点一点的去学. 在做BI实施的…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 数据仓库是决策支持系统的核心,是为企业所有级别的决策制定过程,提供所有类型数据支持的战略.战术.运营集合.它是从多个独立的信息系统集成为一个企业信息工厂出于分析性报告和决策支持目的而创建,它为高层提供关键指标数据为中层提供统计指标数据为运营提…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277   获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 商业智能(BI)是用于分析业务数据的一套工具,从纸质记录和手工算术开始已经走了很长的路.算一算,从欧洲18世纪60年代工业革命至今大概160年了.从19世纪的银行家到今天的物联网.大数据.云计算.人工智能. 高中时候我在<销售与市场…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 在为企业实施商业智能时,大部分都是使用内部数据建模和可视化:以前极少企业有爬虫工程师来为企业准备外部数据,最近一年来Python爬虫异常火爆,企业也开始招爬虫工程师为企业丰富数据来源. 我使用Python 抓取过一些网站数据,如:美团.点评.…

微信公众号:FocusBI关注可了解更多的商业智能.数据仓库.数据库开发.爬虫知识及沪深股市数据推送.问题或建议,请关注公众号发送消息留言;如果你觉得FocusBI对你有帮助,欢迎转发朋友圈或在文章末尾点赞[1] <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v MDX引擎 MDX是一种结构化查询语言,它比SQL查询语言更复杂,因为MDX是面向多维数据模型进行数据检索用来支持复杂的商业环境数据验…

微信公众号:FocusBI关注可了解更多的商业智能.数据仓库.数据库开发.爬虫知识及沪深股市数据推送.问题或建议,请关注公众号发送消息留言;如果你觉得FocusBI对你有帮助,欢迎转发朋友圈或在文章末尾点赞[1] <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 在<租房分析&星型模型>中讲了如何创建一个星型模型的SSAS项目方案,这里我做一个雪花模型案例.雪花模型是在星型模…

微信公众号:FocusBI关注可了解更多的商业智能.数据仓库.数据库开发.爬虫知识及沪深股市数据推送.问题或建议,请关注公众号发送消息留言;如果你觉得FocusBI对你有帮助,欢迎转发朋友圈或在文章末尾点赞[1] <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v OLAP(联机分析处理)多维数据库与关系数据库的实体关系图表示形式所显示的内容完全不同.不同之处在于,对于用于构建OLAP数据库的架构…

微信公众号:FocusBI关注可了解更多的商业智能.数据仓库.数据库开发.爬虫知识及沪深股市数据推送.问题或建议,请关注公众号发送消息留言;如果你觉得FocusBI对你有帮助,欢迎转发朋友圈或在文章末尾点赞[1] <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 在<租房分析&星型模型>文章中已经把多维模型建立起来. 能在多维数据库中查询租房数据,但是不太直观,怎样才能让租客…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. <商业智能教程>pdf下载地址 链接:https://pan.baidu.com/s/1f9VdZUXztwylkOdFLbcmWw 密码:2r4v 了解SQL Server 内部组件是如何运作对学习BI是非常有帮助的,它是BI数据的主要来源. 一:SQL Server 网络接口(SNI)是一个协议层,负责建立客户端和服务器之间的网络连接.SQL Server支持的协议有: 共享内存.TC…

这是我从工厂出来的第五个年头,也是我第一次主动写年终总结: 回想这一年来一点成就都没有,想想都有点后怕:而且每天还是干着同样的事情,容易被新手代替,由于我比较厌烦每天重复的干同样的活,所以我开始思考是否有系统能帮我干活或者帮我处理掉大部分工作来提高工作效率和解决问题的速度.我的工作是每天处理不同的数据问题,这些数据几乎是整个企业的数据整合,所以得建立数据仓库来管理企业数据支持企业各层次的业务需求. 建数据仓库大部分是体力活,看在体力活的面子上我萌发出一个想法,把体力活让系统来完成.这个想法就是<…

关注微信公众号:FocusBI 查看更多文章:加QQ群:808774277 获取学习资料和一起探讨问题. Django 入门案例开发(中) http://www.cnblogs.com/focusBI/p/7858267.html   Django 入门案例开发(下) ——创建项目应用及模型类    http://www.cnblogs.com/focusBI/p/7868737.html Django是一个重量级的web开发框架,它提供了很多内部已开发好的插件供我们使用:这里不去描述 Djan…

原文:实例学习SSIS(五)--理论介绍SSIS 导读: 实例学习SSIS(一)--制作一个简单的ETL包 实例学习SSIS(二)--使用迭代 实例学习SSIS(三)--使用包配置 实例学习SSIS(四)--使用日志记录和错误流重定向 实例学习SSIS(五)--理论介绍SSIS    一.概述 Integration Services 是用于生成高性能数据集成和工作流解决方案(包括针对数据仓库的提取.转换和加载 (ETL) 操作)的平台. Integration Services 包括: a)生…

在上一章节中我们初步了解了SSIS体系结构以及如何创建一个SSIS包.现在就介绍一下如何在创建的包中使用各个选项卡.打开上一章节创建的SSIS包.整个界面风格如下: 在整个包中包含了控制流选项卡.数据流选项卡.事件处理程序选项卡等等.下面通过一个简单的例子介绍如何利用这些选项卡创建一个完成的工作任务包. 本示例的主要功能是从数据库AdventureWorks中Product表中读取2001年到2007年的数据导入到Excel中. 创建变量 从图左边的变量或从SSIS菜单中选择变量来的打开变量(V…

SSIS 其全称是Sql Server Integration Services ,是Microsoft BI 解决方案的一大利器. SSIS 的体系结构主要由四部分组成:Integration Services 服务.Integration Services 对象模型.Integration Services 运行时和运行时可执行文件以及封装数据流引擎和数据流组件的数据流任务(如图): 这是我们初学者必须要了解的,只要明白了这个体系统结构,体会了各组成部分之间的关系,清楚了什么是控制流.什么是…

SSIS是SQL Server Integraion Services的简称.是生成高性能数据集成解决方案(包括数据仓库的提取.转换和加载 (ETL) 包)的平台.   SSIS组件转换_模糊查找转换 摘要: 模糊查找转换与查找转换之间的不同之处在于:它使用了模糊匹配.查找转换使用同等连接在引用表中查找匹配记录.它返回引用表中完全匹配的项.或者不返回任何内容.与此相比,模糊查找转换使用模糊匹配返回引用表中一个或多个接近的匹配项. 模糊查找转换的引用数据源必须是sql2000或更高版本的数据库.而…

参阅:<innodb存储引擎内幕> innodb整体的体系结构如下图所示:  整体结构分两大部分:内存和进程其中内存包括:buffer_pool\redo log buffer\additional memory pool进程包括:master thread\io thread\purge thread\page cleaner thread 其中最主要的缓存buffer pool的构成如下图所示: 其中最主要的进程master thread的工作伪代码如下图所示: Innodb 1.0.X…

俗话说:“十年磨一剑”,Microsoft 通过5年时间的精心打造,于2005年浓重推出Sql Server 2005,这是自SQL Server 2000 以 后的又一旷世之作.这套企业级的数据库解决方案,主要包含了以下几个方面:数据库引擎服务.数据挖掘.Analysis Services.Integration Services.Reporting Services 这几个方面,其中Integration Services (即SSIS),就是他们之间的中转站.纽带,将各种源头的数据,经ET…

聚集索引 概述 关于索引和表体系结构的概念一直都是讨论比较多的话题,其中表的各种存储形式是讨论的重点,在各个网站上面也有很多关于这方面写的不错的文章,我写这篇文章的目的也是为了将所有的知识点尽可能的组织起来结合自己对这方面的了解些一篇关于的详细文章出来,同时也会列出一些我自己有疑惑的地方拿出来探讨,介于表达能力有限,有些地方可能无法表达的很明了,还望大家包涵:对于文章中有不对的地方也希望大家能提出,写文章的目的就是为了共享资源:对于这个系列会写5篇文章,在接下来的几天里逐一发布,分别是“聚集索引…

标签:MYSQL/数据库/查询原理/体系结构 概述 学习一门数据库系统首先得了解它的架构,明白它的架构原理对于后期的分析问题和性能调优都有很大的帮助,接下来就通过分析架构图来认识它. 目录 概述 架构图 总结 架构图 1.连接管理与安全验证 每个客户端都会建立一个与服务器连接的线程,服务器会有一个线程池来管理这些连接:如果客户端需要连接到MYSQL数据库还需要进行验证,包括用户名.密码.主机信息等. 2.解析器 解析器的作用主要是分析查询语句,最终生成解析树:首先解析器会对查询语句的语法进行分析…

SSIS全称(Sql Server Integration Services),是 Microsoft BI 解决方案的一大利器.除了作为ETL的一种工具,在以下方面还有着突出的表现: (1) 系统维护: 1) 在数据库维护方面:数据库备份:统计信息更新:数据库完整性检查:索引重建SSIS 包执行:SSAS 任务处理. 2) 业务处理:执行 SQL 任务:Web Service 任务. 3) 操作系统维护:WMI 事件观察器任务:文件系统任务. 4) 其它:执行 SQL 任务:执行进程任务:Ac…

一.概述 在上一篇文章<深入浅出Flex Viewer (一)——概述>中,笔者对Flex Viewer用于构建以地图为中心的富客户端(RIA)应用的原型的功能和价值做了简要地介绍.在本文中,笔者将继续介绍该框架的体系结构.通过本文,读者可以详细了解到Flex Viewer框架源代码的关键目录和文件结构,以及这些文件中所包含或涉及到的系统的哪些构件(第二章):以及这些构件间的逻辑关系和连接这些构件所用的关键技术,如:消息总线(EventBus).配置项管理(Config Manager).数据…

利用SSIS不仅可以做BI项目的ETL,而且还可以做一些系统监控和维护工作,由于之前供应商写的Windows服务是读取ESB的消息进行处理,且通过OA流程与访客系统进行了集成,无论是ESB出现状况,还是Windows服务出现状况,都会对访问系统造成严重影响,导致内部员工无法进行接待外部人员,因此整体对ESB进行优化,在本人博客的前一篇已介绍了<通过SSIS监控远程服务器磁盘空间并发送邮件报警!>.本文实现的方法思路与此相同,仅仅是监控Windows服务的状态是否为运行,如果不是运行状态则自动发…

[原创]上海好买基金招高级Java技术经理/运维主管/高级无线客户端开发等职位(内推) 内部推荐职位 高级JAVA技术经理: 岗位职责: 负责项目管理(技术方向),按照产品开发流 ,带领研发团队,制定项目计划,并达成项 目的进度与质量目标: 2.负责系统框架设计.对产品的代码进行重构.体系结构优化: 3.参与核心代码的编码与开发工作: 4.负责开发团队人员管理,同时负责团队成员的业务技能和技术能力的培养工作. 任职资格: 1.本科及以上学历,五年以上软件开发经验,负责过不少于1个项目(3 人以上…

由于OFFICE 2010的安装包比较庞大,如果仅仅为了在服务器中实现操作EXCEL,完全没有必要安装整个OFFICE,是否可以不装OFFICE也实现与OFFICE文件的互相操作呢?答案是肯定的,在SSIS中只要安装Microsoft Access 2010 数据库引擎可再发行程序包即可实现2010 Microsoft Office System 文件与非 Microsoft Office 应用程序之间传输数据,支持现有的 Microsoft Office 文件(例如 Microsoft Off…