company_base_info_staff_job
    "company_base_info_staff_job": {
        "engine": "python script", # datax or python script
        "update_priority": 2,
        "insert_priority": 1,
        "insert_schedule_time": [
            {"hou": "", "min": "*", "sec": "*",
             "end_time": "2019-03-14 10:00"}],
        "update_schedule_time": [
            {"day_of_week": "*", "start_date": "2019-03-18 11:40:00",
             "hou": "", "min": "", "sec": ""}],
        "mongo_read": {
            "address": [mongo_cfg["raw_data"]["addr"]],
            "dbName": mongo_cfg["raw_data"]["db_name"],
            "collectionName": "company_base_info",
            "userName": mongo_cfg["raw_data"]["user"],
            "userPassword": mongo_cfg["raw_data"]["pwd"],
            "query": '',
            "column": [('string', 'company_name'),
                       ('string', 'main_staff.position'),
                       ('string', 'main_staff.name'),
                       ]
        },
        "mysql_write": {
            "host": mysql_cfg["seeyiidatabase"]["host"],
            "port": mysql_cfg["seeyiidatabase"]["port"],
            "username": mysql_cfg["seeyiidatabase"]["user"],
            "password": mysql_cfg["seeyiidatabase"]["pwd"],
            "dbName": mysql_cfg["seeyiidatabase"]["db_name"],
            "table": ["company_base_info_staff"],
            "session": [],
            "preSql": [],
            "postSql": [],
            "column": [
                "company_name",
                "staff_position",
                "staff_name",
            ],
        },
        "setting": {},
        "create_table_column": [
            {"name": "company_name", "type": "varchar", "size": 2555,
             "unique": False, "default_null": True, "COMMENT": "公司名称"},
            {"name": "staff_position", "type": "varchar", "size": 200,
             "unique": False, "default_null": True, "COMMENT": "职位名称"},
            {"name": "staff_name", "type": "varchar", "size": 2555,
             "unique": False, "default_null": True, "COMMENT": "高管人员名"},
        ],
        "query_cfg": {
        },
        "reader_type": "mongodb_read"
    }
company_base_info_staff_job的更多相关文章
随机推荐
- Gephi——使用map of countries和Geo Layout实现包含地理坐标的数据可视化
			
前言: Gephi(以下内容基于0.9.2)比较擅长用来处理社会网络分析,其自身以及插件对地理数据的支持非常不足.主要有以下几点: 1.map of countries这个插件可以在gephi底图上以 ...
 - Storage 002 电商数据库设计
			
[用户模块] 账户登录:邮箱/用户名/已验证手机 密码 如果将所有字段都放到一张表里存储? 数据插入异常 只想插入一个值的 由于需要主键信息,插入的一行变成新的一行,和原来的记录无关. ...
 - 【AGC 005F】Many Easy Problems
			
Description One day, Takahashi was given the following problem from Aoki: You are given a tree with ...
 - Contest2178 - 2019-4-18 高一noip基础知识点 测试7 题解版
			
刚刚改完题,才有时间发题解 传送门 T1 exgcd裸题 对a,b跑exgcd,答案就是x*c/gcd(a,b),y*c/gcd(a,b) 不合法的情况:当且仅当c%gcd(a,b)!=0 代码 T2 ...
 - Luogu P1082 同余方程(NOIP 2012) 题解报告
			
题目传送门 [题目大意] 求关于x的同余方程 ax≡1(mod b)的最小整数解. [思路分析] 由同余方程的有关知识可得,ax≡1(mod b)可以化为ax+by=1,此方程有解当且仅当gcd(a, ...
 - hibernate 一对多 取多方数据重复问题,FetchMode.JOIN、FetchMode.SELECT、FetchMode.SUBSELECT区别
			
问题描述:稿件附件表数据时出现多条重复数据. 介绍: 表:稿件实体Manuscripts (数据库表MANUSCRIPTS),稿件附件实体ManuscriptsAtt(表MANUSCRIPTS_ATT ...
 - web---资源的下载及中文乱码问题
			
1.html网页,超链接交由Servlet处理 <!DOCTYPE html> <html lang="en"> <head> <meta ...
 - ffmypeg 视频处理类库使用方法
			
(经常用到ffmpeg 做一些视频数据的处理转换等,用来做测试,今天总结了一下,参考了网上部分朋友的经验,一起在这里汇总了一下,有需要的朋友可以收藏测试一下,有问题欢迎在下面回帖交流,谢谢;by te ...
 - 算法工程师<编程题>
			
<编程题> 1.[Maximum Product Subarray 求最大子数组乘积] 这个求最大子数组乘积问题是由最大子数组之和问题演变而来,但是却比求最大子数组之和要复杂,因为在求和的 ...
 - Django—常用功能
			
索引 一.静态文件 二.中间件 三.Admin站点 3.1 列表页选项 3.2 编辑页选项 3.3 重写模板 四.上传图片 4.1 在管理页面admin中上传图片 4.2 自定义form表单中上传图片 ...