11月16日,由AWS主办的云计算行业沙龙在中油阳光酒店举行,速石科技CEO陈熹就高性能计算如何助力生命科学领域发表了精彩的演讲。

面临的问题及挑战

在算力及高性能领域,随着行业客户的业务需求量,数据量,以及创新的驱动,困扰行业客户的主要问题也突显出来,诸如算的慢,算的贵,不灵活,以及安全合规等。行业用户所面临的挑战更是枝节交错,首先,有很多应用不是云原生的。其次,如果用户在自己的环境里面已经有了基础设施,如何平滑且对本身业务不受影响的情况下过渡到超大规模的云上集群,这些都是用户在使用云资源的过程中会碰到的问题。

如何应对

云的价值显而易见,它是一个基础,有着近乎无限的资源,也可以横向扩展出一个巨大的资源池。陈熹认为,应对上述问题不能一蹴而就,它应该是一个循序渐进的演进过程,首先要有无缝过渡到公有云的能力,其次在本地和公有云间做调度,最后过渡到多云的基础架构。基于云原生的应用去对典型的应用做改造,陈熹认为这是一个非常可行甚至是当前唯一可行的一条路线,对于这方面有一系列的工具技术可以应用。

解决方案架构图解析

案例分享环节,针对客户的异构计算环境,速石科技给出了自己的解决方案,并对架构图进行了阐述。

1. Application Compiler

这是一套编译器和一套工具链,它能够自动的对用户应用做转换,使用户现有的基于单机的单节点的应用被自动转换成云原生分布式多节点的应用,在不改变用户的应用逻辑的情况下,做到性能的线性提升。

2. Serverless Framework

无服务器的架构,它可以将用户所有的云的资源,不管是本地还是公有的,变为一个大的资源池,并且以函数的形式把这个功能暴露给上层应用,从而为用户减少大量的重复工作。

3. Orchestrator

它可以在多云的环境当中,对资源做有效的调度,例如spot instance,竞价实例,它可以让用户以很低的价格去使用原本很贵的实例,但是竞价实例是不保证持续性的,就是说用户在使用过程中可能突然被关掉,那么这个调度器就会帮助用户的应用自动调整和迁移受影响的任务和资源,确保spot被抢,分析过程不中断,极大的降低了成本。

4. Fastone Virtual Cloud

它是跨越多种公有云及私有云基础架构上的私有层,它屏蔽了底层不同异构的云平台的差异性,从而使得上层应用获得统一的基础架构环境。在数据传输这一块,解决方式有网络,aws snow ball等等,基于这些之上,速石会提供一套分布式的文件系统,是为用户做数据的去重和压缩,在下层的网络和基础设施的基础上,我们可以进一步提高用户传输数据的效率和性能。

FastOne专业计算平台助力生命科学研发的更多相关文章

  1. Polaristech 刘洋:基于 OpenResty/Kong 构建边缘计算平台

    2019 年 3 月 23 日,OpenResty 社区联合又拍云,举办 OpenResty × Open Talk 全国巡回沙龙·北京站,Polaristech 技术专家刘洋在活动上做了<基于 ...

  2. TOP100summit:【分享实录】Twitter 新一代实时计算平台Heron

    本篇文章内容来自2016年TOP100summit Twitter technical lead for Heron Maosong Fu 的案例分享. 编辑:Cynthia Maosong Fu:T ...

  3. 克拉克拉(KilaKila):大规模实时计算平台架构实战

    克拉克拉(KilaKila):大规模实时计算平台架构实战 一.产品背景:克拉克拉(KilaKila)是国内专注二次元.主打年轻用户的娱乐互动内容社区软件.KilaKila推出互动语音直播.短视频配音. ...

  4. 5000量子位支持量子编程,D-Wave推出下一代量子计算平台计划

    5000量子位支持量子编程,D-Wave推出下一代量子计算平台计划 近日,全球量子商用化重要参与者 D-Wave 公司又有大动作:推出其5000量子比特量子计算的发展蓝图.D-Wave 下一代量子计算 ...

  5. [BigData - Hadoop - YARN] YARN:下一代 Hadoop 计算平台

    Apache Hadoop 是最流行的大数据处理工具之一.它多年来被许多公司成功部署在生产中.尽管 Hadoop 被视为可靠的.可扩展的.富有成本效益的解决方案,但大型开发人员社区仍在不断改进它.最终 ...

  6. Odoo免费开源企业信息化平台助力企业成功

    企业信息化变革之路 信息孤岛的真实由来 打开百度App,看更多图片 左边为当下企业现状,右边为Odoo的整体 企业信息孤岛的严重性,来自于企业的自身高速发展,企业以销售为生命主题围绕着客户会搭建一系列 ...

  7. SLA 99.99%以上!饿了么实时计算平台3年演进历程

    作者介绍 倪增光,饿了么BDI-大数据平台研发高级技术经理,曾先后就职于PPTV.唯品会.15年加入饿了么,组建数据架构team,整体负责离线平台.实时平台.平台工具的开发和运维,先后经历了唯品会.饿 ...

  8. KubeEdge v0.2发布,全球首个K8S原生的边缘计算平台开放云端代码

    KubeEdge开源背景 KubeEdge在18年11月24日的上海KubeCon上宣布开源,技术圈曾掀起一阵讨论边缘计算的风潮,从此翻开了边缘计算和云计算联动的新篇章. KubeEdge即Kube+ ...

  9. 王坚十年前的坚持,才有了今天世界顶级大数据计算平台MaxCompute

    如果说十年前,王坚创立阿里云让云计算在国内得到了普及,那么王坚带领团队自主研发的大数据计算平台MaxCompute则推动大数据技术向前跨越了一大步. 数据是企业的核心资产,但十年前阿里巴巴的算力已经无 ...

随机推荐

  1. 洛谷P3178 [HAOI2015]树上操作 题解 树链剖分+线段树

    题目链接:https://www.luogu.org/problem/P3178 这道题目是一道树链剖分的模板题. 但是在解决这道问题的同事刷新了我的两个认识: 第一个认识是:树链剖分不光可以处理链, ...

  2. 2019-2-28-C#-16-进制字符串转-int-

    title author date CreateTime categories C# 16 进制字符串转 int lindexi 2019-02-28 11:51:36 +0800 2018-04-2 ...

  3. java声明异常(throws)

    在可能出现异常的方法上声明抛出可能出现异常的类型: 声明的时候尽可能声明具体的异常,方便更好的处理. 当前方法不知道如何处理这种异常,可将该异常交给上一级调用者来处理(非RuntimeExceptio ...

  4. P1028 过河问题

    题目描述 为了躲避黑暗大魔王的追杀,zifeiy与他的伙伴们共N人连夜逃出了黑暗城堡,他们走到一条河的东岸边,想要过河到西岸.而东岸边有一条小船. 船太小了,一次只能乘坐两人.每个人都有一个渡河时间T ...

  5. 2019-4-10-win10-uwp-自定义标记扩展

    title author date CreateTime categories win10 uwp 自定义标记扩展 lindexi 2019-04-10 09:46:13 +0800 2019-04- ...

  6. linux进程唤醒的细节

    我们已展现的唤醒进程的样子比内核中真正发生的要简单. 当进程被唤醒时产生的真正动 作是被位于等待队列入口项的一个函数控制的. 缺省的唤醒函数[22]22设置进程为可运行的 状态, 并且可能地进行一个上 ...

  7. 2018-2-13-C#-解析-sln-文件

    title author date CreateTime categories C# 解析 sln 文件 lindexi 2018-2-13 17:23:3 +0800 2018-2-13 17:23 ...

  8. Linux 内核释放函数和 kobject 类型

    讨论中仍然缺失的一个重要事情是当一个 kobject 的引用计数到 0 时会发生什么. 创建 kobject 的代码通常不知道什么时候要发生这个情况; 如果它知道, 在第一位使用一个引 用计数就没有意 ...

  9. Linux 命令整理 vim

    Vim  一.官方网站 http://www.vim.org 二.背景 所有的 Unix Like 系统都会内建 vi 文书编辑器,但是在我们编程这里开发使用最多的要数 vim命令了. 三.操作 三种 ...

  10. 如何使用IoTSharp对接ModBus?

    提到对接ModBus 那么或许大家最熟悉的可能是 HslCommunication 和SharpSCADA 了,是GitHub 上关注最多的此类开源项目,  因此IoTSharp将通过HSL组件进行数 ...