每个项目的都有各自的场景,但是其实往小处说,场景的处理基本都是很相似,之前做copy文件的程序,其实就是一种很常见的ETL的过程(转移文件,异构系统通过文件系统交换数据,存在数据同步)。

了解一下ETL:就是数据转移的一个处理过程(A库与B库之间进行数据抽取)---最重要就是格式的转换。

了解一下ESB,专门的数据处理中心的平台系统(建立一个数据中心,对外提高数据服务)。

开源ESB平台:Mule,Spring Intergation

       数据源:DB,FTP,File,Socket,HTTP,JMS

==============================================================================================

mule例子:拷贝文件

File数据源:
<?xml version="1.0" encoding="UTF-8"?>
<mule xmlns:file="http://www.mulesoft.org/schema/mule/file"
xmlns:tracking="http://www.mulesoft.org/schema/mule/ee/tracking" xmlns="http://www.mulesoft.org/schema/mule/core"
xmlns:doc="http://www.mulesoft.org/schema/mule/documentation"
xmlns:spring="http://www.springframework.org/schema/beans" version="EE-3.4.0"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance"
xsi:schemaLocation="http://www.springframework.org/schema/beans http://www.springframework.org/schema/beans/spring-beans-current.xsd
http://www.mulesoft.org/schema/mule/core http://www.mulesoft.org/schema/mule/core/current/mule.xsd
http://www.mulesoft.org/schema/mule/file http://www.mulesoft.org/schema/mule/file/current/mule-file.xsd
http://www.mulesoft.org/schema/mule/ee/tracking http://www.mulesoft.org/schema/mule/ee/tracking/current/mule-tracking-ee.xsd">
<file:connector name="FileConnector" streaming="true"
pollingFrequency="5000">
<file:expression-filename-parser />
</file:connector>
<model name="FileDataChange">
<service name="fileService">
<inbound>
<file:inbound-endpoint path="c:/data/snapshot" />
</inbound>
<outbound>
<pass-through-router>
<file:outbound-endpoint path="c:/data/archive" outputPattern="#[message.inboundProperties['originalFilename']]"/>
</pass-through-router>
</outbound>
</service>
</model>
</mule>
概念:连接器、端点、轮询器(队列轮询机制)
控制台数据源
---------------------------------------------------------------------------------------------------------------------------------------------------
Spring integration配置文件例子(借鉴cafe例子写)
<?xml version="1.0" encoding="UTF-8"?>
<beans xmlns="http://www.springframework.org/schema/beans"
xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns:int="http://www.springframework.org/schema/integration"
xmlns:int-file="http://www.springframework.org/schema/integration/file"
xsi:schemaLocation="http://www.springframework.org/schema/beans
http://www.springframework.org/schema/beans/spring-beans.xsd
http://www.springframework.org/schema/integration
http://www.springframework.org/schema/integration/spring-integration.xsd
http://www.springframework.org/schema/integration/file
http://www.springframework.org/schema/integration/file/spring-integration-file.xsd"> <!-- Spring 框架组件的挂节点(gateway,spliter,fliter,transformer,router,service-activator,aggregator,adapter,channel) -->
<bean id="tools" class="com.yyb.test.ite.OrderTools"></bean> <!-- 轮询器 -->
<int:poller id="poller" default="true" fixed-rate="1000"/> <!-- 数据采集的源端 -->
<int:gateway id="cafe" service-interface="com.yyb.test.ite.IOrderService" /> <!-- 数据采集的通道 -->
<int:channel id="orders" /> <int:header-enricher input-channel="orders" output-channel="addHeader_orders" >
<int:header name="type" value="cofe_china"/>
</int:header-enricher>
<int:channel id="addHeader_orders" /> <int:filter input-channel="addHeader_orders" output-channel="after_orders" ref="tools" method="filterOrder"/> <int:channel id="after_orders" /> <!-- 通道数据的切割器 -->
<int:splitter input-channel="after_orders" ref="tools"
method="spliteOrder" output-channel="drinks" /> <!-- 第二个数据通道 -->
<int:channel id="drinks"/> <!-- 通道数据路由器 -->
<int:router input-channel="drinks" ref="tools"
method="routerOrder" /> <!-- 通道一 -->
<int:channel id="coldDrinks">
<int:queue capacity="10" />
</int:channel>
<!-- 挂接在通道上的服务激活器 -->
<int:service-activator input-channel="coldDrinks"
ref="tools" method="service_01" output-channel="preparedDrinks" /> <!-- 通道二 -->
<int:channel id="hotDrinks">
<int:queue capacity="10" />
</int:channel>
<!-- 挂接在通道上的服务激活器 -->
<int:service-activator input-channel="hotDrinks"
ref="tools" method="service_02" output-channel="preparedDrinks" /> <!-- 通道 -->
<int:channel id="preparedDrinks" />
<!-- 数据聚合器 -->
<int:aggregator input-channel="preparedDrinks" ref="tools"
method="completeOrder" output-channel="deliveries" /> <!-- 数据转换器 -->
<int:transformer input-channel="deliveries"
output-channel="successOrder" ref="tools" method="orderTransString"/> <!-- 输出通道 -->
<int:channel id="successOrder" /> <!-- 数据源目的端 采用文件讲数据保存 形成数据落地 -->
<int-file:outbound-channel-adapter
channel="successOrder" directory="c:/b"></int-file:outbound-channel-adapter> </beans>

//数据接收端
public interface IOrderService {
@Gateway(requestChannel="orders")
public void orderFood(Order order);
}
package com.yyb.test.ite;

import java.util.List;

import org.springframework.integration.annotation.Aggregator;
import org.springframework.integration.annotation.Filter;
import org.springframework.integration.annotation.Header;
import org.springframework.integration.annotation.Headers;
import org.springframework.integration.annotation.Payload;
import org.springframework.integration.annotation.Router;
import org.springframework.integration.annotation.ServiceActivator;
import org.springframework.integration.annotation.Splitter;
import org.springframework.integration.annotation.Transformer;

//组件挂接点(扩张点)--实现自己的业务对其组件扩展
public class OrderTools { @Transformer
public String orderTransString(@Payload Order order) {
return order.toString();
} @Filter
public boolean filterOrder(@Header String type) {
System.out.println(type);
return true;
} @Router
public String routerOrder( @Payload OrderItem order) {
System.out.println(order);
return order.getType();
} @Splitter
public List spliteOrder(Order order) {
return order.getItems();
} @Aggregator
public Order completeOrder(List<OrderItem> items) {
Order order = new Order();
order.setUserName("tty");
order.setOrderName("ppi");
order.setItems(items);
return order;
}

  //挂接自己的业务实现
@ServiceActivator
public OrderItem service_01(@Payload OrderItem orderItem) {
System.out.println("service_01=" + orderItem.toString());
return orderItem;
}

   //挂接自己的业务实现
@ServiceActivator
public OrderItem service_02(@Payload OrderItem orderItem) {
System.out.println("service_02=" + orderItem.toString());
return orderItem;
} @Transformer
public OrderItem transStringToObject(@Payload OrderItem order) {
return null;
}
}

public class Order {

    private String orderName;
private String orderId;
private String userName; private List<OrderItem> items;
}
public class OrderItem { private String name;
private String type;
}
//省略get set

public static void main(String[] args) {

        ApplicationContext context = new ClassPathXmlApplicationContext("spring-cafe.xml");
IOrderService service = (IOrderService) context.getBean("cafe"); Order order = new Order();
order.setUserName("yyg");
order.setOrderName("一份辣子鸡");
order.setOrderId("001"); OrderItem item01 = new OrderItem();
item01.setName("鸡汤一碗");
item01.setType("coldDrinks"); OrderItem item02 = new OrderItem();
item02.setName("一知排骨");
item02.setType("hotDrinks"); List<OrderItem> items = new ArrayList<OrderItem>(); items.add(item01);
items.add(item02); order.setItems(items); service.orderFood(order );//添加数据到通道 }
 

ESB初步配置文件认识的更多相关文章

  1. Shuttle ESB实现消息推送

    ESB全称Enterprise Service Bus,即企业服务总线.它是传统中间件技术与XML.Web服务等技术结合的产物. ESB的出现改变了传统的软件架构,能够提供比传统中间件产品更为便宜的解 ...

  2. 关于MTK平台SIM-ME Lock的配置方案

    针对一些运营商的锁网需求,MTK平台已经对其有很好的支持.绝大多数的海外需求可以通过直接配置相关文件来完成.这里简单描述一下配置方法,不做原理分析. 相关数据结构分析: Modem中与SML锁网配置相 ...

  3. 对EBS中配置文件的初步认识

    配置文件(PROFILE)在EBS系统配置占有很重要的位置,功能顾问要对很多重要的配置文件做到非常熟悉才行.否则出现一个问题,可能在郁闷许久后,发觉只是某个不起眼的配置文件在捣乱.配置文件相当于带有权 ...

  4. Nginx入门讲解——初步认识了解nginx.conf配置文件以及配置多个虚拟主机

    本文引自网络进攻学习之用https://blog.csdn.net/weixin_38111957/article/details/81080539 一. 引言上节文章讲述了如何用信号控制Nginx服 ...

  5. Linux系统的vim编辑器的配置文件的初步说明

    vim 编辑器的基本说明 vi编辑器的功能类似于Windows下的记事本,只能编辑普通文本,而vim编辑器则相当于Windows下的notepad++等高级编辑器,提升了代码开发效率. 将vi命令默认 ...

  6. lwip【5】 lwIP配置文件opt.h和lwipopts.h初步分析之二

    如何去配置lwip,使它去适合不同大小的脚,这就是本贴的主题lwIP的配置问题.尤其是内存的配置,配置多了浪费,配置少了跑不了或者不稳定(会出现的一大堆莫名奇妙的问题,什么打开网页的速度很慢啊?什么丢 ...

  7. lwip【4】 lwIP配置文件opt.h和lwipopts.h初步分析之一

    在这里先说一下这两个配置lwip协议栈文件opt.h和lwipopts.h的关系:          opt.h是lwip"出厂"时原装的配置文件,它的作者是瑞士科学院的Adam等 ...

  8. ssh整合思想初步 struts2与Spring的整合 struts2-spring-plugin-2.3.4.1.jar下载地址 自动加载Spring中的XML配置文件 Struts2下载地址

    首先需要JAR包 Spring整合Structs2的JAR包 struts2-spring-plugin-2.3.4.1.jar 下载地址 链接: https://pan.baidu.com/s/1o ...

  9. 初步了解Shuttle ESB

    ESB:EnterpriseService Bus,即企业服务总线.它是传统中间件技术与XML.Web服务等技术结合的产物.从面向服务体系架构发展而来. ESB採用了"总线"这种模 ...

随机推荐

  1. XCODE中使用Main.Storyboard拉入控件并实现事件(Swift语言)

    如何在XCODE中的Main.Storyboard内拉入控件并实现一个简单的效果呢?本人由于刚接触Swift语言不久,对于IDE的操作还是很生疏,不懂了就在网上参考了网上前辈们的文章.以下我将演示如何 ...

  2. 第十七篇 make的路径搜索综合实践

     本节我们编写路径搜索相关的makefile,具体需求如下:  1.工程项目中不希望源码文件夹在编译时被改动(只读文件夹).  2.在编译时自动创建文件夹(build)用于存放编译结果.  3.编译过 ...

  3. 允许发生http请求

  4. CUDA H624解码性能测试

    测试环境: Cpu:       Inter(R)Core(TM)i7-4790 CPU @3.6GHZ GPU:         NVIDIA GeForce GTX960* 1 操作系统:   W ...

  5. 使用migration创建表时,出错的解决方法

    Laravel 5.4 migrate时报错: Specified key was too long error 解决问题升级MySql版本到5.5.3以上. 手动配置迁移命令migrate生成的默认 ...

  6. vim golang 插件

    最好用的vim golang 插件 可自动缩进 git clone git@github.com:aimin/InstallvimGo.git

  7. sql server 数字字符串的排序

    假如我们有这样的数据格式1#XXXXX 20#CCCCC等的一系列数据那么我们如何可以排序出1 ,2,3,4,5,6,7.......这样的数据呢 我们知道整数是可以排序成这样的格式的,但是字符串就不 ...

  8. 充电 IC 对 0V 电池充电问题

    只讨论锂聚合物电池,由于设置漏电流原因,有些锂电池会放电到 0V(正常是不应该的). 但是在时候就是会发电到 0V,这里就要考虑充电 IC 是否有对 0V 电池充电的功能,还有保护 IC 是否允许 0 ...

  9. c#中如何保存焦点控件?

    对所有文本框添加焦点获得事件,头部再定义一个全局的object或者control的类型对象,在焦点获得事件中把当前控件对象赋值给之前定义的object或者control对象,操作的话就对这个全局量操作 ...

  10. 洛谷4030(Codeplus11月月赛)可做题1

    题目:https://www.luogu.org/problemnew/show/P4030 原来一个方阵巧妙的充要条件是该方阵的每个2*2子方阵都是巧妙的!!! 可以把每一行选的列视为一个排列,需要 ...