11月16日,由AWS主办的云计算行业沙龙在中油阳光酒店举行,速石科技CEO陈熹就高性能计算如何助力生命科学领域发表了精彩的演讲。

面临的问题及挑战

在算力及高性能领域,随着行业客户的业务需求量,数据量,以及创新的驱动,困扰行业客户的主要问题也突显出来,诸如算的慢,算的贵,不灵活,以及安全合规等。行业用户所面临的挑战更是枝节交错,首先,有很多应用不是云原生的。其次,如果用户在自己的环境里面已经有了基础设施,如何平滑且对本身业务不受影响的情况下过渡到超大规模的云上集群,这些都是用户在使用云资源的过程中会碰到的问题。

如何应对

云的价值显而易见,它是一个基础,有着近乎无限的资源,也可以横向扩展出一个巨大的资源池。陈熹认为,应对上述问题不能一蹴而就,它应该是一个循序渐进的演进过程,首先要有无缝过渡到公有云的能力,其次在本地和公有云间做调度,最后过渡到多云的基础架构。基于云原生的应用去对典型的应用做改造,陈熹认为这是一个非常可行甚至是当前唯一可行的一条路线,对于这方面有一系列的工具技术可以应用。

解决方案架构图解析

案例分享环节,针对客户的异构计算环境,速石科技给出了自己的解决方案,并对架构图进行了阐述。

1. Application Compiler

这是一套编译器和一套工具链,它能够自动的对用户应用做转换,使用户现有的基于单机的单节点的应用被自动转换成云原生分布式多节点的应用,在不改变用户的应用逻辑的情况下,做到性能的线性提升。

2. Serverless Framework

无服务器的架构,它可以将用户所有的云的资源,不管是本地还是公有的,变为一个大的资源池,并且以函数的形式把这个功能暴露给上层应用,从而为用户减少大量的重复工作。

3. Orchestrator

它可以在多云的环境当中,对资源做有效的调度,例如spot instance,竞价实例,它可以让用户以很低的价格去使用原本很贵的实例,但是竞价实例是不保证持续性的,就是说用户在使用过程中可能突然被关掉,那么这个调度器就会帮助用户的应用自动调整和迁移受影响的任务和资源,确保spot被抢,分析过程不中断,极大的降低了成本。

4. Fastone Virtual Cloud

它是跨越多种公有云及私有云基础架构上的私有层,它屏蔽了底层不同异构的云平台的差异性,从而使得上层应用获得统一的基础架构环境。在数据传输这一块,解决方式有网络,aws snow ball等等,基于这些之上,速石会提供一套分布式的文件系统,是为用户做数据的去重和压缩,在下层的网络和基础设施的基础上,我们可以进一步提高用户传输数据的效率和性能。

FastOne专业计算平台助力生命科学研发的更多相关文章

  1. Polaristech 刘洋:基于 OpenResty/Kong 构建边缘计算平台

    2019 年 3 月 23 日,OpenResty 社区联合又拍云,举办 OpenResty × Open Talk 全国巡回沙龙·北京站,Polaristech 技术专家刘洋在活动上做了<基于 ...

  2. TOP100summit:【分享实录】Twitter 新一代实时计算平台Heron

    本篇文章内容来自2016年TOP100summit Twitter technical lead for Heron Maosong Fu 的案例分享. 编辑:Cynthia Maosong Fu:T ...

  3. 克拉克拉(KilaKila):大规模实时计算平台架构实战

    克拉克拉(KilaKila):大规模实时计算平台架构实战 一.产品背景:克拉克拉(KilaKila)是国内专注二次元.主打年轻用户的娱乐互动内容社区软件.KilaKila推出互动语音直播.短视频配音. ...

  4. 5000量子位支持量子编程,D-Wave推出下一代量子计算平台计划

    5000量子位支持量子编程,D-Wave推出下一代量子计算平台计划 近日,全球量子商用化重要参与者 D-Wave 公司又有大动作:推出其5000量子比特量子计算的发展蓝图.D-Wave 下一代量子计算 ...

  5. [BigData - Hadoop - YARN] YARN:下一代 Hadoop 计算平台

    Apache Hadoop 是最流行的大数据处理工具之一.它多年来被许多公司成功部署在生产中.尽管 Hadoop 被视为可靠的.可扩展的.富有成本效益的解决方案,但大型开发人员社区仍在不断改进它.最终 ...

  6. Odoo免费开源企业信息化平台助力企业成功

    企业信息化变革之路 信息孤岛的真实由来 打开百度App,看更多图片 左边为当下企业现状,右边为Odoo的整体 企业信息孤岛的严重性,来自于企业的自身高速发展,企业以销售为生命主题围绕着客户会搭建一系列 ...

  7. SLA 99.99%以上!饿了么实时计算平台3年演进历程

    作者介绍 倪增光,饿了么BDI-大数据平台研发高级技术经理,曾先后就职于PPTV.唯品会.15年加入饿了么,组建数据架构team,整体负责离线平台.实时平台.平台工具的开发和运维,先后经历了唯品会.饿 ...

  8. KubeEdge v0.2发布,全球首个K8S原生的边缘计算平台开放云端代码

    KubeEdge开源背景 KubeEdge在18年11月24日的上海KubeCon上宣布开源,技术圈曾掀起一阵讨论边缘计算的风潮,从此翻开了边缘计算和云计算联动的新篇章. KubeEdge即Kube+ ...

  9. 王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute

    如果说十年前,王坚创立阿里云让云计算在国内得到了普及,那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据技术向前跨越了一大步. 数据是企业的核心资产,但十年前阿里巴巴的算力已经无 ...

随机推荐

  1. Activiti - 新一代的开源 BPM 引擎

    http://www.ibm.com/developerworks/cn/Java/j-lo-activiti1/ ****************************************** ...

  2. Django入门8--Templates过滤器

    过滤器大大减少了开发的代码量

  3. P1094 百钱白鸡

    题目描述 公鸡5文钱一只,母鸡3文钱一只,小鸡3只一文钱,用100文钱买100只鸡,其中公鸡,母鸡,小鸡都必须要有,问公鸡,母鸡,小鸡要买多少只刚好凑足100文钱. 输入格式 无. 输出格式 输出所有 ...

  4. Laravel5 call to undefined function openssl cipher iv length() 报错 PHP7开启OpenSSL扩展失败

    在安装laravel5.5后, 访问显示报错. call to undefined function openssl cipher iv length() 经查为php7.1的OpenSSL扩展加载失 ...

  5. AI百度接口以及图灵接口的使用

    百度AI接口 AI智能种类方向 耳朵 = 倾听 = 麦克风 = 语音识别 ASR:Automatic Speech Recognition 嘴巴 = 诉说 = 扬声器 = 语音合成 TTS:Text ...

  6. poll 和 select 底层的数据结构

    poll 和 select 系统调用的真正实现是相当地简单, 对那些感兴趣于它如何工作的人; epoll 更加复杂一点但是建立在同样的机制上. 无论何时用户应用程序调用 poll, select, 或 ...

  7. js中的函数重载

    函数重载与js 什么是函数重载 重载函数是函数的一种特殊情况,为方便使用,C++允许在同一范围中声明几个功能类似的同名函数,但是这些同名函数的形式参数(指参数的个数.类型或者顺序)必须不同,也就是说用 ...

  8. ASP.NET MVC 实现页落网资源分享网站+充值管理+后台管理(9)之系统登录

    前面我们已经做好了一个文章管理功能模块,接下来,我们回头来做登录窗口,登录不仅涉及到登录验证还涉及到登录日志还有缓存时长等. 对于缓存的相关设置,我们已经写好封装在Bobo.Utilities.dll ...

  9. ZOJ3537 Cake

    ZOJ3537 Cake 传送门:http://acm.zju.edu.cn/onlinejudge/showProblem.do?problemCode=3537 题意: 给你几何形状的蛋糕,你需要 ...

  10. Destoon系统目录树SEO属性目录开发实例

    如何在destoon里设置树形目录结构的SEO优化方式官方给的SEO伪静态实例是没有这个方式的 楼主后来想了一下,就干脆自己做一个吧,已经测试完全无误通过,特意分享给大家 目前比如sell模块下类别[ ...