首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

林帅上构建容器化的科学计算平台

一般来讲,在云端构建大规模计算集群是难以实现完整的资源自治的。那么在计算任务运行容器化之后,应当如何进行上构建计算集群并对大规模容器进行管理呢?请看这篇文章。...演讲嘉宾: 林帅 | 晶泰科技计算平台技术总监,2015年加入晶泰科技,主要负责晶泰科技高性能计算平台(majorana)的研发工作,专注于在公有上通过mesos/k8s构建大规模的容器化高性能科学计算平台...我是来自晶泰科技的林帅,今天我想和大家分享的主题是《上构建容器化的大规模计算平台》。 幻灯片1.JPG 晶泰科技(XtalPi)介绍 在讲之前,我会对公司有一个简单的介绍。...我们就会想到,现在计算发展得非常快,很多企业已经从传统企业转换成上企业,已经成功落地。能否把传统的科学计算移到上面?当然,现在很多公有平台已经在做,比较典型的产品可能是批量计算、高性能计算。...后面比较大,而且比较高,占据了计算的很大部分,这就需要我们借助计算在里面,可能需要把多个融合在一起,去构建一个比较大规模的资源池,在里面跑相关的计算任务。

2K40

化这道升维题,计算能答好吗?

从选择题,到必答题 无论计算化升级的浪潮,会演绎出多少种方向,归根结底都是回归到降本增效与优化服务这两个核心层面上来。...这也意味着,产品与技术构建的“数生态”,还是要回归到日常运营中,通过不断优化调整计算的能力,来探索更新的“数”经营路径。...最终,这些双向需求推动了端、边、的充分融合,端边逐渐一体化、逐渐一体化,“一体”也成为未来计算发展的必然选项。...在百度2022年第二季度财报电话会议上,管理层们提到:百度智能收入同比增长31%至43亿元,值得注意的是,百度智能已经实现连续五个季度同比增速超过30%。 “一体” 是计算的必经之路?...“”则是将百度深耕十余年的AI技术,以及AI赋能产业的实践经验,沉淀为助力产业智能化升级的技术、平台及方法论,加速产业数化升级。 从“数字化”到“数化”,百度智能如何理解计算的数化?

38220
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    计算正向算跨越

    计算力不仅是生产力,还是创造力,计算正向算跨越。”...浪潮信息总裁彭震认为,计算力和算法是算中心的核心,要想产生一流的智慧,就必须要有一流的算法,同时算法的高效运转要依赖领先的计算力,计算力基建化和算法基建化相辅相成。 ...全国在用超大型、大型数据中心超过450个,算中心超过20个。通用算力规模超过109每秒浮点运算次数,智能算力规模超过29每秒浮点运算次数。...张明说。《2021—2022全球计算力指数评估报告》认为,全球各国计算力格局已初步形成,美国和中国作为领跑者阵营国家,在全球计算力领域的主导地位进一步得到了增强。...联想依靠自身在温水水冷服务器和异构服务器的深入布局,帮助紫金大数据中心打造了“东数西算”工程启动后甘肃首个落地的项目——紫金高性能计算平台,为紫金搭建了高性能计算平台的系统、存储、网络、登录管理系统

    34020

    Web应用安全:腾讯网站管家WAF

    一、 认识腾讯网站管家WAF 腾讯网站管家WAF(Web Application Firewall,Web应用防火墙),是一款专业为用户网站及Web应用打造的基于AI的一站式Web业务运营风险防护方案...了解腾讯网站管家WAF: https://cloud.tencent.com/product/waf image.png 腾讯网站管家防护原理是通过更改DNS解析设置,将原本直接访问Web业务站点的流量先引流到腾讯网站管家...也就是说,相当于在用户的Web业务之上,部署了一套腾讯网站管家WAFWAF的保护层,保护直面互联网攻击的用户Web业务免被黑客攻击侵害。...---- 二、 腾讯网站管家WAF防护功能及价值 安全问题 业务影响 腾讯网站管家WAF防护功能 黑客入侵 数据窃取 ▪ 商业数据泄露,业务竞争力受损 ▪ 恶劣社会影响,严重时遭到政府主管单位罚款甚至被要求关闭整改...WAF 威胁检测能力: image.png Freebuf媒体评测:腾讯网站管家WAF体验:聊聊AI作为WAF市场转折的趋势 http://www.freebuf.com/news/180345

    5.9K00

    王琰:万物联,腾讯 IoT 边缘计算揭秘

    2.png 万物联:腾讯专注高效连接和智能应用 虽然现实残酷,但是我们也欣喜看到,经过过去三五年的努力,在2018年我们看到在一些局部的应用点,比如些酒店和公寓的场景,在今年看来是一个行业小爆发。...在每个环节,腾讯都在进行思考,首先从平台的角度来说,腾讯传统互联网部分的计算产品就不多讲,我们已经服务了几十万个物联网客户,我们缺的是一个云端的IOT平台,这个平台是我们为了打破云端的壁垒,我们会致力于打造一站式的平台...3.png 万物连:广泛连接合作伙伴共同推动行业智能物联升级 在设备端,其实也是今天要提的就是边缘计算,单纯靠云端没办法形成一个非常好的物联技术方案,在设备端我们也会做边缘计算相关能力提供给大家,通过云端的结合很好的落地我们的应用...12.png 物联网开发中需要边缘计算的能力 我再介绍一下IOT的边缘计算。刚才提到了我们在云端搭建了一套IOT的套件,我们为什么还需要边缘计算?...王琰:万物联,腾讯 IoT 边缘计算揭秘.pptx 请点击下方获取PPT文档 王琰:万物联,腾讯 IoT 边缘计算揭秘.pdf

    6.3K135

    云端数新引擎,腾讯原生数据湖计算重磅发布

    针对以上痛点, 腾讯发布原生数据湖计算服务,协同腾讯云端数据湖体系,帮助企业高效构建云端数据湖架构、降低数据计算成本,提升数据分析敏捷性、激发数据应用价值,助力企业数字化决策。...三、原生数据湖计算 通常使用大数据分析组件对对象存储中的数据进行分析时, 会面临两个核心问题: 如何基于服务兼容特性屏蔽底层架构,降低计算成本? 如何加速和优化存储侧的性能瓶颈?...[image.png] 为了解决数据湖敏捷高效的分析和计算问题,腾讯推出一款开箱即用的数据湖分析服务——腾讯数据湖计算(Data Lake Compute,DLC)。...[image.png] 腾讯 DLC 服务联合腾讯多个团队深耕核心技术, 以提供一款高性能数据计算服务为目标,实现了如下几个关键技术特征: 数据湖高性能计算 腾讯 DLC 引入高性能 serverless...低成本,无限算力原生数据湖 相对于传统固定规模集群,腾讯数据湖技术完全基于腾讯弹性容器技术(EKS)构建,理论上“无限”的计算资源随时可供秒级调度,满足不同规模的计算任务,使用者再也不用关心底层资源的部署和运维

    1.2K20

    云端数新引擎,腾讯原生数据湖计算重磅发布

    针对以上痛点, 腾讯发布原生数据湖计算服务,协同腾讯云端数据湖体系,帮助企业高效构建云端数据湖架构、降低数据计算成本,提升数据分析敏捷性、激发数据应用价值,助力企业数字化决策。...三、原生数据湖计算 通常使用大数据分析组件对对象存储中的数据进行分析时, 会面临两个核心问题: 如何基于服务兼容特性屏蔽底层架构,降低计算成本? 如何加速和优化存储侧的性能瓶颈?...image.png 为了解决数据湖敏捷高效的分析和计算问题,腾讯推出一款开箱即用的数据湖分析服务——腾讯数据湖计算(Data Lake Compute,DLC)(官网介绍:https://cloud.tencent.com...image.png 腾讯 DLC 服务联合腾讯多个团队深耕核心技术, 以提供一款高性能数据计算服务为目标,实现了如下几个关键技术特征: 数据湖高性能计算 腾讯 DLC 引入高性能 serverless...在传统基于物理机/虚拟机的大数据架构下,往往要维护一个规模相对固定的计算集群,资源成本存在巨大的浪费。而数据湖技术真正做到了随用随弃,充分利用弹性计算资源。

    1.5K20

    机器人:有一台音箱要当你的管家

    而和之前不同的是,小管家机器人更注重生态系统的角色。 根据小提供的数据,目前小管家机器人已经对接 20 余家知名品牌 200 款智能设备。...然后用户就能通过小管家机器人,对传统家电发号施令。何永说红卫星和市面上一些 WiFi 转红外发射器是完全不一样的,为此小还申请了专利。...而在对小的视频寄语中,我们也发现了 Novumind 公司创始人兼总裁吴韧。 ? 这是小管家机器人的相关方,有做投资的,家庭设备的,众筹销售的,运营商的,还有做超算业务的。...与音箱同期发布的,还有亚马逊的物联网计划,并希望智能设备能够用亚马逊的协议。...小管家机器人也许会面临相同的挑战。用智能音箱扮演家庭机器人的角色,是一件很艰难的事,但小显然想大干一笔,正如金沙江创投合伙人杨志伟在现场说的:“小是一个有平台化潜力的公司。”

    1.4K50

    云端数新引擎,腾讯原生数据湖计算重磅发布

    针对以上痛点, 腾讯发布原生数据湖计算服务,协同腾讯云端数据湖体系,帮助企业高效构建云端数据湖架构、降低数据计算成本,提升数据分析敏捷性、激发数据应用价值,助力企业数字化决策。...三、原生数据湖计算 通常使用大数据分析组件对对象存储中的数据进行分析时, 会面临两个核心问题: 如何基于服务兼容特性屏蔽底层架构,降低计算成本? 如何加速和优化存储侧的性能瓶颈?...为了解决数据湖敏捷高效的分析和计算问题,腾讯推出一款开箱即用的数据湖分析服务——腾讯数据湖计算(Data Lake Compute,DLC)(官网介绍:https://cloud.tencent.com...腾讯 DLC 服务联合腾讯多个团队深耕核心技术, 以提供一款高性能数据计算服务为目标,实现了如下几个关键技术特征: 数据湖高性能计算 腾讯 DLC 引入高性能 serverless presto 引擎...点击文末「阅读原文」,了解腾讯数据湖计算DLC更多信息~

    70520

    云端数新引擎,腾讯原生数据湖计算重磅发布

    针对以上痛点, 腾讯发布原生数据湖计算服务,协同腾讯云端数据湖体系,帮助企业高效构建云端数据湖架构、降低数据计算成本,提升数据分析敏捷性、激发数据应用价值,助力企业数字化决策。...三、原生数据湖计算 通常使用大数据分析组件对对象存储中的数据进行分析时, 会面临两个核心问题: 如何基于服务兼容特性屏蔽底层架构,降低计算成本? 如何加速和优化存储侧的性能瓶颈?...image (3).png 为了解决数据湖敏捷高效的分析和计算问题,腾讯推出一款开箱即用的数据湖分析服务——腾讯数据湖计算(Data Lake Compute,DLC)。...image (4).png 腾讯 DLC 服务联合腾讯多个团队深耕核心技术, 以提供一款高性能数据计算服务为目标,实现了如下几个关键技术特征: 数据湖高性能计算 腾讯 DLC 引入高性能 serverless...低成本,无限算力原生数据湖 相对于传统固定规模集群,腾讯数据湖技术完全基于腾讯弹性容器技术(EKS)构建,理论上“无限”的计算资源随时可供秒级调度,满足不同规模的计算任务,使用者再也不用关心底层资源的部署和运维

    1.2K50

    云端数新引擎,腾讯原生数据湖计算重磅发布

    针对以上痛点, 腾讯发布原生数据湖计算服务,协同腾讯云端数据湖体系,帮助企业高效构建云端数据湖架构、降低数据计算成本,提升数据分析敏捷性、激发数据应用价值,助力企业数字化决策。...三、原生数据湖计算 通常使用大数据分析组件对对象存储中的数据进行分析时, 会面临两个核心问题: 如何基于服务兼容特性屏蔽底层架构,降低计算成本? 如何加速和优化存储侧的性能瓶颈? ?...为了解决数据湖敏捷高效的分析和计算问题,腾讯推出一款开箱即用的数据湖分析服务——腾讯数据湖计算(Data Lake Compute,DLC)(官网介绍:https://cloud.tencent.com...腾讯 DLC 服务联合腾讯多个团队深耕核心技术, 以提供一款高性能数据计算服务为目标,实现了如下几个关键技术特征: 数据湖高性能计算 腾讯 DLC 引入高性能 serverless presto 引擎...点击文末「阅读原文」,了解腾讯数据湖计算DLC更多信息~ 腾讯大数据 ? 长按二维码 关注我们

    1K30

    腾讯网站管家Web应用防火墙

    image.png 基于的WAF 基于的WAF服务一开始就立足于多租户、基于,从长远来看它可以避免对遗留代码进行成本高昂的维护。...业务漏洞暴露 黑客入侵及数据窃取 网站被篡改或植入 Bot恶意数据爬取 域名非法劫持 拒绝服务攻击 image.png 腾讯网站管家介绍 企业组织通过部署腾讯Web应用防火墙服务,将Web业务的攻击压力转移到腾讯...image.png image.png image.png FAQ 问题 1: 非腾讯内的服务器能否使用网站管家(WAF)?...网站管家支持外机房用户接入。Web 应用防火墙可以保护任何公网的服务器,包括但不限于腾讯,其他厂商的,IDC等, 注意: 在大陆地区接入的域名必须按照工信部要求进行 ICP 备案。...问题 4: 网站管家(WAF)的源站 IP 可以填写 腾讯CVM内网 IP 吗? 目前网站管家不支持填写CVM内网 IP。 问题 5: 网站管家(WAF)可以直接利用高防包么?

    18.7K21

    腾讯数据库智能管家 DBbrain介绍

    TencentDB for DBbrain(以下简称DBbrain)中文名数据库智能管家,是一款智能诊断和优化数据库的产品,为用户提供实时的数据库防护,在出现故障时高效地定位原因并提供解决方案,同时也协助用户进行源头的预防...DBbrain 利用机器学习、大数据手段快速复制资深数据库管理员的成熟经验,将大量数据库问题的诊断优化工作自动化,服务于上和下企业。...· 支持上、下数据库实例接入。 · 支持多终端展示。 帮助用户更好的掌握所有数据库实例动态,以及监控数据库实例健康和异常状况。...多场景兼容 支持多款 SQL、NoSQL、NewSQL 数据库类型,应用于上、下数据库场景,不仅为腾讯数据库实例提供诊断分析服务,也支持用户自建的数据库和其他部署的数据库实例,助力用户打造数据库混合管理的场景...混合管理数据库场景 DBbrain 适用于上、下数据库场景,不仅为腾讯数据库实例提供诊断优化服务,也支持用户自建的数据库和其他部署的数据库实例,采用无入侵设计、安全的数据链路,确保数据安全,助力用户打造数据库混合管理的统一平台

    15.2K248

    腾讯网站管家WAF 一指禅

    腾讯网站管家优势陈述腾讯网站管家:共享腾讯Web 安全防护能力,让受护用户Web 业务轻松部署腾讯业务安全级别防护能力 防护对象:互联网Web 业务,如网站门户,互联网+站点,Webmail, APP...了解解决方案及功能细节:腾讯网站管家产品白皮书 2....Web 业务安全防护搭配方案组件: 腾讯上用户:网站管家(Web 安全)+大禹(抗DDoS)+镜(主机安全)+天御(业务安全) 腾讯外用户:网站管家(Web 安全)+大禹(抗DDoS) 5 技术方案概述...腾讯网站管家通过修改CNAME 接入,零硬件部署,无需对硬件架构做更改。...注意:接入网站管家防护后, 需要手动将网站管家回源IP 加入到网络现有防护的安全组,避免WAF 数据被现有防护拦截,造成断网。 问题2: 非腾讯内的服务器能否使用网站管家(WAF)?

    8.5K81

    腾讯- 产业启未来

    简介: 计算:IT 行业重要变革 腾讯公司成立16 年,第一个产品QQ 其实就是一朵。...计算为IT 乃至整个商业市场带来的变革早已不是空谈。传统企业在时代得以根本意义上的转型,大企业在云端获得源源不断的生命力,中小企业通过,更快地面向市场获得机遇与发展。...腾讯将输出大数据、计算、人工智能、视频服务、安全维护等方面的核心技术积累,助力搭建矛盾纠纷多元化解资源生态体系。...;计算机网络平台的开发及建设等,由腾讯计算(北京)有限责任公司全资控股。...产品介绍: 计算与网络 服务器 高性能高稳定的虚拟机,可在云中提供弹性可调节的计算容量,不让计算能束缚您的想象;您可以轻松购买自定义配置的机型,在几分钟内获取到新服务器,并根据您的需要使用镜像进行快速的扩容

    2.3K20

    前沿·汇 2017腾讯“+俱乐部”春季享会

    四月草长莺飞,万物复苏,2017腾讯“+俱乐部”春季享会在深圳举办,该场主题为“前沿·汇”。...英伟达全球副总裁、亚太区总裁郑义陶,顺丰科技CEO田民,碳智能联合创始人、首席信息官黎浩, 平安科技首席战略官李亮等数十位业内企业嘉宾汇聚一堂,共同探讨大数据、人工智能如何助力未来,以及服务如何助力企业赢在...汤道生:通过腾讯开放AI能力 [图片] 腾讯集团高级执行副总裁、SNG社交网络事业群总裁汤道生在现场分享了腾讯在AI领域的一些探索及成果,他认为除了场景、数据、人才以外,AI的技术领域的成果,结合计算资源要以的方式能够对外开放...目前在基础设施方面,腾讯已经提供了GPU、FPGA等高性能的服务器;在平台方面,腾讯开放了深度学习、机器学习的一些通用模型平台;腾讯的AI基础覆盖图象、语音、视频、自然语言处理等很多相关领域,...而随着未来AI研究的深入,通过腾讯开放的AI能力以及基于AI所提供的服务将会越来越丰富。

    2.7K00

    【数化人物展】同方有联合创始人兼总经理江琦:计算,引领数化升级的动能

    江琦 本文由同方有联合创始人兼总经理江琦投递并参与《2023中国企业数化转型升级先锋人物》榜单/奖项评选。...数据智能产业创新服务媒体 ——聚焦数 · 改变商业 在这个飞速发展的数字时代,我们置身于一个前所未有的机遇与挑战并存的时刻。...计算作为当今数字时代的关键技术之一,正迅速改变着政府和企业的运营、创新、服务等。计算不仅是一种技术,更是一项能够释放数字化潜力、推动智能升级的强大动能。 计算的魅力在于它的高度灵活性和可扩展性。...计算可以降低创业企业的初始成本,使其能够更快地推出新产品和服务。对于大型企业,计算可以提供弹性的计算资源,以适应需求的波动。 然而,计算也引发了一些担忧,尤其是与信息安全和可控性相关的问题。...如今的同方有已成为计算领域的佼佼者,入选2023年中国新科技100强,在“信创”领域位列第6,是年度唯一入选的计算厂商。

    26730
    领券