company_base_info_staff_job
"company_base_info_staff_job": {
"engine": "python script", # datax or python script
"update_priority": 2,
"insert_priority": 1,
"insert_schedule_time": [
{"hou": "", "min": "*", "sec": "*",
"end_time": "2019-03-14 10:00"}],
"update_schedule_time": [
{"day_of_week": "*", "start_date": "2019-03-18 11:40:00",
"hou": "", "min": "", "sec": ""}],
"mongo_read": {
"address": [mongo_cfg["raw_data"]["addr"]],
"dbName": mongo_cfg["raw_data"]["db_name"],
"collectionName": "company_base_info",
"userName": mongo_cfg["raw_data"]["user"],
"userPassword": mongo_cfg["raw_data"]["pwd"],
"query": '',
"column": [('string', 'company_name'),
('string', 'main_staff.position'),
('string', 'main_staff.name'),
]
},
"mysql_write": {
"host": mysql_cfg["seeyiidatabase"]["host"],
"port": mysql_cfg["seeyiidatabase"]["port"],
"username": mysql_cfg["seeyiidatabase"]["user"],
"password": mysql_cfg["seeyiidatabase"]["pwd"],
"dbName": mysql_cfg["seeyiidatabase"]["db_name"],
"table": ["company_base_info_staff"],
"session": [],
"preSql": [],
"postSql": [],
"column": [
"company_name",
"staff_position",
"staff_name",
],
},
"setting": {},
"create_table_column": [
{"name": "company_name", "type": "varchar", "size": 2555,
"unique": False, "default_null": True, "COMMENT": "公司名称"},
{"name": "staff_position", "type": "varchar", "size": 200,
"unique": False, "default_null": True, "COMMENT": "职位名称"},
{"name": "staff_name", "type": "varchar", "size": 2555,
"unique": False, "default_null": True, "COMMENT": "高管人员名"},
],
"query_cfg": {
},
"reader_type": "mongodb_read"
}
company_base_info_staff_job的更多相关文章
随机推荐
- 【bzoj 3495】PA2010 Riddle
Description 有n个城镇被分成了k个郡,有m条连接城镇的无向边.要求给每个郡选择一个城镇作为首都,满足每条边至少有一个端点是首都. Input 第一行有三个整数,城镇数n(1<=n&l ...
- Spring Cloud微服务实践之路-起始
由于各种原因,公司要对现有的营销产品进行微服务化,如果可以,则对公司所有产品逐步进行微服务化. 而本人将探索这条路,很艰难,但干劲十足.整个过会记录下来,以便以后查阅. 感谢公司!感谢领导! 相关书籍 ...
- python函数的闭包
---恢复内容开始--- python允许有内部函数,也就是说可以在函数内部再定义一个函数,这就会产生变量的访问问题,类似与java的内部类,在java里内部类可以直接访问外部类的成员变量和方法,不管 ...
- HTTPS加密那点事-对称、非对称加密、数字证书
转自:[漫画]https 加密那点事 首先,HTTP协议的缺点:没有对数据进行加密,都是明文传输的.如果要改进这种明文传输的协议,该如何做呢? 对称加密: 在每次发送真实数据之前,服务器先生成一把密钥 ...
- package.json 里的 dependencies和devDependencies区别
dependencies(依赖的意思): 通过 --save 安装,是需要发布到生产环境的.比如项目中使用react,那么没有这个包的依赖就会报错,因此把依赖写入dependencies devDep ...
- spring kafka生产、消费消息
参考网址: https://blog.csdn.net/lansetiankong12/article/details/54946641 1.新建Maven项目-KafkaMaven ->点击n ...
- 关于JDK1.7+中HashMap对红黑树场景的思考
背景 在1.7之前的版本,当数组元素较多(几百.几千,或者更多)的时候,在这种前提扩容,涉及全量元素的遍历和坐标的重新定位,这个耗时会比较长.这是之前存在的一个弊端吧.那么引入红黑树之后就解决了问题, ...
- CentOS下TensorFlow安装命令
安装扩展源:sudo yum -y install epel-release 安装python-pip模块:sudo yum install python-pip 直接把whl文件download下来 ...
- android的nfc卡模拟开发
这是andorid官方文档对于卡模拟方式的描述: https://developer.android.google.cn/guide/topics/connectivity/nfc/hce 有两种方式 ...
- 清北学堂学习总结day3
小学知识总结 上午篇 •积性函数的卷积公式 (1)(f * g)( n ) = ∑(d|n) f( d ) x g ( n / d ) (2)代码实现 LL f[N], g[N], h[N]; voi ...