Loading [MathJax]/jax/output/CommonHTML/config.js
首页
学习
活动
专区
圈层
工具
发布
首页
学习
活动
专区
圈层
工具
MCP广场
社区首页 >专栏 >新晋IEEE Fellow给字节跳动设计这样一张网!

新晋IEEE Fellow给字节跳动设计这样一张网!

作者头像
用户6874558
发布于 2023-02-15 06:07:07
发布于 2023-02-15 06:07:07
1.8K0
举报

今年

数据通信领域喜报连连

先有Nick大神荣获Bell Medal

然后研发IPv6路由张老师喜提院士

上月最新IEEE Fellow评选揭晓字节跳动

郭传雄因对数据中心网络设计的贡献而获选

IEEE Fellow,即为 IEEE 会士,是 IEEE 最高等级会员,是 IEEE 授予成员的最高荣誉,在学术科技界被认定为权威的荣誉和重要的职业成就。当选人需要对工程科学与技术的进步或应用做出重大贡献,为社会带来重大价值。当选人数不超过 IEEE 当年会员总数的 0.1%。

郭大神当年在微软时

就专注于RDMA成绩斐然

一作论文也算是扬名立万之作

加入字节跳动

负责人工智能实验室后

ML系统依然离不开RDMA的加持

RDMA相对TCP

有更好的响应速度

目前基于以太网的部署

普遍基于RoCEv2和无损以太

无损交换机落地,但有人膨胀了

RDMA网络的部署

可以降低CPU的资源消耗

有个关键的命门就是RDMA网卡

精雕细琢RDMA

字节跳动目的只有一个

为DNN训练提供最佳网络环境

字节目前推出开源

分布式训练框架BytePS

号称性能远超过现有的开源代码

BytePS is a high performance and general distributed training framework. It supports TensorFlow, Keras, PyTorch, and MXNet, and can run on either TCP or RDMA network. BytePS outperforms existing open-sourced distributed training frameworks by a large margin. For example, on BERT-large training, BytePS can achieve ~90% scaling efficiency with 256 GPUs (see below), which is much higher than Horovod+NCCL. In certain scenarios, BytePS can double the training speed compared with Horovod+NCCL.

未来

火山引擎的爆发

离不开这张IEEE Fellow搭建的网

本文参与 腾讯云自媒体同步曝光计划,分享自微信公众号。
原始发表:2021-12-20,如有侵权请联系 cloudcommunity@tencent.com 删除

本文分享自 云深知网络 微信公众号,前往查看

如有侵权,请联系 cloudcommunity@tencent.com 删除。

本文参与 腾讯云自媒体同步曝光计划  ,欢迎热爱写作的你一起参与!

评论
登录后参与评论
暂无评论
推荐阅读
编辑精选文章
换一批
plink软件cookbook
快,真的是快,我用perl或者Python编写的代码运行需要50s,plink不到1s完成,在C语言面前,我掌握的语言是苍白的。所以,好好利用plink软件,对于速度的提升非常显著。
邓飞
2021/03/30
2.3K0
plink软件cookbook
Variant 分析阶段小结1-基础碎碎念
所谓遗传变异是生物体内遗传物质发生变化而造成的可以遗传给后代的变异,这些变异导致了生物在不同水品上体现出遗传的多样性。生物信息学中各种基因组研究的基础就是遗传变异的研究,比如进化和各种表型的研究。
生信技能树
2018/07/27
1.7K0
Variant 分析阶段小结1-基础碎碎念
vcf2maf—从VCF到MAF,解锁基因突变的秘密
vcf2maf 是由 Cyriac Kandoth 主导开发的一款用于将 VCF (Variant Call Format) 文件转换为 MAF (Mutation Annotation Format) 文件的生信分析工具。广泛应用于癌症基因组研究中的变异数据处理,其具有以下特性:
生信菜鸟团
2024/06/12
2.6K0
vcf2maf—从VCF到MAF,解锁基因突变的秘密
手把手学习TCGA数据库:SNP突变分析第二期
各位芝士的朋友好,今天我们继续聊我们的SNP话题,前面两讲我们分享了SNP发生的位置,发生的类型以及SNP的命名,并且特意提到了SNP的两个数据库,今天我们来学习一下这两个数据库的使用。
百味科研芝士
2019/06/17
4.7K0
手把手学习TCGA数据库:SNP突变分析第二期
图文详解 VCF 生信格式 (变异信息)
vcf (Variant Call Format)是一种用于存储基因组序列中的变异信息
白墨石
2023/11/10
4.2K1
图文详解 VCF 生信格式 (变异信息)
孟德尔随机化之遗传学概述
许多生物的遗传信息(或基因组)由长长的一串遗传密码组成,这些遗传密码以DNA(脱氧核糖核酸)的形式存在,DNA是编码生命的分子,被包装成染色体。人类有23对染色体,每对染色体中的一条来自母亲,一条来自父亲。染色体包含基因,这些基因是遗传密码的可定位区域,编码一个可遗传信息单元,但是并非所有的遗传序列都属于基因区域,并且染色体的大部分由称为非编码DNA的中间遗传物质组成。每个染色单体有两条链,每条链由一个可以由字母A(腺嘌呤)、T(胸腺嘧啶)、C(胞嘧啶)和G(鸟嘌呤)表示的核苷酸序列组成。这些核苷酸链以互补方式配对(A与T配对,C与G配对),这样每个链包含相同的信息,因此仅考虑其中一个链。
生信与临床
2020/08/06
8990
Nature | 基于四代家系参考的人类新生突变率
◉ 我们使用五种正交的下一代和长读长测序技术对四代系谱CEPH 1463中的28名成员进行了测序:对于G2至G4代,采用HiFi测序、Illumina和Element测序技术对其外周血进行了分析;而对于G1至G3代,则利用可用的永生化淋巴细胞系生成了UL-ONT和Strand-seq数据。该系谱数据集已被扩展,纳入了第四代以及G3代的配偶(编号为200080和200100)。◉ 该研究采用了多种先进的基因组测序平台,确保在不同世代之间获得全面且高精度的遗传信息,从而增强了对遗传变异传递模式的理解。
生信菜鸟团
2025/07/12
1020
Nature | 基于四代家系参考的人类新生突变率
读书笔记 | 第 03 章 基因组图谱绘制 | 《Genome 5》
在本章中,我们将研究构建基因组图谱的各种方法。基因组图谱就像任何其他类型的图谱一样,显示有趣特征和其他重要标志的位置。在基因组图谱中,这些特征和标志是基因和其他独特的 DNA 序列。尽管可以使用多种技术来绘制基因和其他 DNA 标志的图谱,但惯例是将基因组图谱绘制看作包含两种互补方法:
生信菜鸟团
2025/07/12
920
读书笔记 | 第 03 章 基因组图谱绘制 | 《Genome 5》
全基因组 - 人类基因组变异分析 (PacBio)(6)-- ANNOVAR
ANNOVAR是由王凯老师编写的一款用于SNP等变异位点注释的软件 (2),在注释软件(Annovar, SnpEff, VEP-Variant Effect Predictor)中相对引用较高。ANNOVAR能够利用最新的数据来分析各种基因组中的遗传变异。 给定一个包含染色体,起点,终点,参考核苷酸与检测核苷酸序列, ANNOVAR可以进行如下的功能注释:
三代测序说
2023/12/06
1.4K0
全基因组 -  人类基因组变异分析 (PacBio)(6)-- ANNOVAR
10X单细胞空间数据分析之SNP检测篇
Cellsnp-lite是在C/ c++中实现的,并执行每个细胞基因分型,supporting both with (mode 1) and without (mode 2) given SNPs。在后一种情况下,杂合snp将被自动检测。Cellsnp-lite适用于基于液滴的(例如10XGenomics数据)和well-based的平台(例如SMART-seq2数据)。
追风少年i
2023/04/29
9400
10X单细胞空间数据分析之SNP检测篇
使用XP-CLR检测基因组中的选择信号
检测基因组选择信号的方法有很多种,其中 XP-CLR 方法是常用的一种。XP-CLR 是陈华老师、Nick Patterson 和 David Reich 在 2010 年发表的方法,全称叫 the cross-population composite likelihood ratio test(跨群体复合似然比检验),是一种是基于选择扫荡(selective sweeep)的似然方法。
实验盒
2021/09/22
3K0
使用XP-CLR检测基因组中的选择信号
读书笔记 | 癌症计算系统生物学 | 第 03 章 实验性高通量癌症研究技术
第 2 章 描述了当正常细胞转化为癌细胞时,在不同分子水平上发生的一系列失调现象。突变(mutations)的逐步累积以及在肿瘤进展(tumour progression)过程中发生的事件会在以下各个层次上扰乱细胞的正常行为(参见图 3.1):
生信菜鸟团
2024/11/23
1970
读书笔记 | 癌症计算系统生物学 | 第 03 章 实验性高通量癌症研究技术
高通量测序常见名词解释
高通量测序平台产生的序列叫做reads,每一条由A,G,T,C组成的序列都叫做一条read。
生信交流平台
2022/09/21
9710
基因组研究和变异检测领域的重要工具—GATK初识
Genome Analysis Toolkit (GATK) 是一套由Broad Institute开发的用于基因组分析的软件工具。其主要用于处理高通量测序数据,特别是从Illumina测序平台得到的数据。GATK的主要功能包括针对单核苷酸多态性(SNPs)和小型插入删除(indels)的变异检测,质量控制,以及数据处理和分析。
生信菜鸟团
2024/01/06
1.2K0
基因组研究和变异检测领域的重要工具—GATK初识
maftools癌症体细胞变异(突变)分析工具学习
Maftools 是一个专门用于分析和可视化突变数据的 R 包。全名为 "Mutation Annotation Format Tools",它主要处理 MAF(Mutation Annotation Format)文件,这种文件格式广泛用于存储和共享癌症基因组中的突变数据。 Maftools 的主要功能包括:
凑齐六个字吧
2024/09/02
4060
maftools癌症体细胞变异(突变)分析工具学习
去除比对偏差 (remove mapping bias)
在做等位基因(allele)的研究中,其中一个重要的步骤就是去除比对偏差。 众所周知,人是二倍体生物,在染色体同样位置会有一对allele,一般情况下是纯合子(homozygous)状态;有时候其中一个allele发生变异(可以理解为一个SNP,寡核苷酸多态性),会变成杂合子(heterozygous)状态。
生信编程日常
2020/04/01
7490
去除比对偏差 (remove mapping bias)
统计遗传学:第九章,GWAS+群体分析+亲缘关系分析
本篇,使用数据和代码演示的形式,展示了GWAS分析、群体结构分析、亲缘关系分析三部分内容。我又重演了一遍,修正了一些bug。文中代码和数据我回头专门整理相关博文进行分享。
邓飞
2022/12/12
4.2K0
统计遗传学:第九章,GWAS+群体分析+亲缘关系分析
如何在Windows电脑上使用LDSC软件(3) ------ LDSC实操与结果解读
前两期的内容带大家学习了如何在windows系统上安装Linux子系统以及LDSC的安装,今天我将带大家正式开展LDSC分析并解读相关结果。
生信与临床
2022/08/21
4.3K4
如何在Windows电脑上使用LDSC软件(3) ------ LDSC实操与结果解读
ADNI数据和样例
ADNI临床数据集: 由各个学科的临床信息组成,包括招募、人口统计特征、体格检查和认知评估数据 所收集的临床数据:
范中豪
2019/09/10
1.6K0
ADNI数据和样例
TCGA数据库:SNP数据的下载整理及其可视化
单核苷酸多态性主要是指在基因组水平上由单个核苷酸的变异所引起的DNA序列多态性。它是人类可遗传的变异中最常见的一种,占所有已知多态性的90%以上。SNP在人类基因组中广泛存在,平均每300个碱基对中就有1个,估计其总数可达300万个甚至更多。SNP是一种二态的标记,由单个碱基的转换或颠换所引起,也可由碱基的插入或缺失所致。SNP既可能在基因序列内,也可能在基因以外的非编码序列上。
DoubleHelix
2020/05/26
8.8K1
推荐阅读
相关推荐
plink软件cookbook
更多 >
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档