首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

李卓豪:网易数数据逻辑数据湖的实践

内容分为五部分: 关于网易数 为什么做逻辑数据湖 怎么做逻辑数据湖 未来规划 精彩问答 01 关于网易数 网易数是从网易杭州研究院孵化出来的。网易杭研的重要职责是公共技术的研究和产品孵化。...2018年支持网易严选、考拉、音乐、新闻数据构建。通过在商业化过程对市场需求的摸索实践,终于在2019年形成了“全链路数据”解决方案,致力于将“数据生产力”的理念能力落实到解决方案。...纵观网易大数据的发展历史,可以看到这个过程贯穿了数据理念的变化。有数从公共数据平台逐渐转变为具备有业务属性的数据,最后逐步向“数据生产力”理念靠拢。...同时在落地过程,形成了技术业务双循环的模式。双循环中涉及三个角色,两种驱动力。三方分别是内部用户、外部用户、数据;业务场景、技术前瞻是推动双循环的驱动力。...这个问题就涉及到:系统整体复杂度、运行状态透明程度、以及运维团队是否组建等多个维度的考量。

1.3K10

的业务的关键词有哪些?

的关键词有哪些呢? 想做,首先要考虑的是通过解决什么问题,这个比是什么更重要,也就是说why比what更重要。 解决什么问题?...是什么? 不仅仅是一个技术问题,更是一个方法论问题。 涵盖了组织协作、需求分析、战略落地等相关内容。 在协作上,有一套能力接入标准。...可以将和数字化转型放在一起考虑,某种程度上来说,是企业架构方法论的一种具体实现。 需要考虑业务价值链,考虑价值链上的业务流程的串联和衔接。 形成工作流,抽象功能域,抽象扩展点。...落地中,在技术层面可以抽象成几方面。 包括业务身份、端组件的再组织、流程与流程承接领域、可视化&可配置、底层通用中间件能力。 领域抽象与领域建模,在建设初期非常重要。...这些关键词做好了之后,可以帮助你沉淀出一个很好服务于业务发展的

43220
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    #凯哥讲数据#一个订单服务的演进过程剖析之一

    01.前言 最近很多同学都在微信留言询问数据和业务的区别,希望能够深入浅出,很容易理解的解释什么情况下需要业务,什么情况下需要数据以及的关系。...我前面做了很多行业研究和案例分享,但是都是企业级的讲解,感觉都不够简单,不够落地,这里我用一个最清晰的订单服务的演进过程,来深度剖析的关系。 02....一个订单服务的演进过程 订单服务是最常见的场景,下面我们用一个电商领域的常见订单服务的演进过程来详细剖析为什么会出现,它们的价值以及关系。...数据一致性差,订单数据分散在不同的应用系统,数据不一致,同步复杂。 维护困难,当一个订单逻辑发生了变化,所有的应用逻辑都要重写,带来的很大的维护工作量,响应慢。 ?

    92620

    未来数据 Node.js BFF实践(一):基础篇

    未来数据 Node.js BFF实践系列文章列表: 基础篇 实战篇(TODO) 进阶篇(TODO) 未来数据的Node.js中间层从7月份开始讨论可行性,截止到9月已经支持了4个平台,...在现阶段数据的服务体系中有两类服务:常规 Java 后端和 T-Service 。...后者是数据将 OneService 方法论落地的统一数据服务,即服务于各个前台事业部,也为数据内部的各个应用平台提供数据服务。...数据有一个统一的用户管理中心提供登录/登出服务,客户端登录后会接收管理中心下发的 JWT,后续业务接口的请求会验证 JWT 的有效性。...数据的 Node.js 服务每个 pod 都是单核,没有起多进程,也就没有使用反向代理的必要性,所以最终使用 TCP 探针做存活检测。

    3.7K20

    数据与湖仓一体能碰出怎样的火花?网易数实时数据湖Arctic的新探索

    这是作为网易公司基础软件团队的网易数首次对外发布在湖仓一体方向的进展,同时宣布的还有网易数有数实时数据战略。...但对很多企业客户来说,他们以前采购了不同的数据库,后来要构建自己的数据湖和数据体系,网易数就给他们提供了逻辑数据湖的方案,客户可以继续使用原有方案,同时网易数给他们提供一个整套的入口,统一管理不同的数据孤岛...首先做数据,本身就是在 Hive 之上加了一层;其次增加的这些功能实际上是引擎端的适配,会有一个单独的治理服务,而这个治理服务是偏的模块,可以认为是整套数据体系的一部分。...因此网易数团队目前更希望先把所有的想法在 Arctic 上落实,让整个湖仓一体方案运转起来,然后将做出来的成果开放出来,再进一步跟社区沟通,看哪些东西可以贡献回社区。...今年在网易数字 + 大会上正式宣布将实时数据作为战略来推进,是网易数在推进湖仓一体过程中有优势的一点。 4 流批一体的最终目标还有多远?

    65120

    增长者50X走进腾讯|数据安全新挑战!零售企业营销增长何去何从?

    数据作为各行业领域与各类资源的核心载体,在其发展过程扮演着不可或缺的角色。越来越多的企业和机构意识到数据智能驱动业务提升效率所带来的价值与重要性。...腾讯私域安全保卫战之购物季11/12平痛点分析 4. ...腾讯众创空间、青腾、腾讯云启等生态型平台的创始人;腾讯千SaaS生态、腾讯产业区块链联盟创建负责人、腾讯TOB头部生态圈总架构师;对腾讯开放平台和腾讯云的品牌影响力、生产力做出了非常重要的贡献。...● 工业制造业数字化转型看哪家?广西柳工! ● 增长者50 | 企业数智化转型内幕!仅靠一套解决方案就能实现?!

    3.6K20

    【文末开奖】如何配置一以机器学习、深度学习为用途的工作站?

    来源:https://www.zhihu.com/question/310387269 转自:深度学习与计算机视觉 声明:仅做学术分享,侵删 作者:丁一 https://www.zhihu.com/question...基本上就写道这里把,我会一点cuda,主语言还是C++,人生苦短,python太慢,还是C++。...这个阶段不建议大家用云,性价比不高并且折腾的空间小,毕竟只有在不停折腾才能不断进步。...,两张显卡也不需要型号相同) 差钱的话可以考虑核显+矿卡,比如i3 8100+P106的配置,3000元左右就能配到一显存和算力都说过得去的深度学习主机,基本上17年以前的深度学习模型都能训练 10...2卡以下全塔塔都可以,如果用两个电源必须用全塔。 电源:把所有最大功耗加起来,然后除以70%。

    4.6K32

    慢公司VS快市场,网易能赶上企业数字化的时代列车吗?

    在强手林立的市场其还有几分胜算? 这时候再发力是否为时已晚?在刚刚落幕的“网易数字+大会”,这些问题一一揭晓。...4年来,网易数的私有部署产品已服务包括德邦快递、中国工商银行、名创优品、海亮集团等百余家行业头部标杆客户,并在多行业为企业完成双部署。...在强手环伺的云计算市场,擅长后发制人的网易会从哪个角度出其不意攻其不备?各家云计算厂商的打法各有不同,有的主打出海,强调海外节点的优势,有的则强调数据中心如何实现数据保护。...所以,网易数始终强调的都是场景化服务,陆续推出微服务平台、大数据平台、BI产品、业务和数据等一系列的能力,这些能力都汇聚成了基础软件方面的能力。...任何一家云计算厂商的背后都用了大量的开源技术,一方面,在构建自己的技术栈时不可能所有的设施都能够重复建设,或者自己重复建设了以后延续性可能也不一定就如开源社区那样

    37420

    王家贺:腾讯文旅四大新品助推文旅企业智慧化升级

    一、文旅易连 文旅易连由腾讯云千连接器提供服务,打通账号和服务,形成一站式工作,实现统一待办。...产品特点: 第一,无论是第三方应用,还是企业现有开发的一些系统,都可以通过文旅易连来得到集成,并且不同系统的待办系统,也可以通过文旅易连来得到集成,无论是通过PC端,还是移动端,进行相关待办信息的提醒...第二,基于腾讯云千连接器强大的配置能力和高效系统集成系统能力,到目前为止,文旅易连已经连接了超过1000款的SaaS工具和产品,覆盖文旅办公到业务所有领域,为企业提供一站式产品服务,文旅企业也可以自身需要...第三,快速实现多系统入口的统一,待办任务的统一,流程响应时间得到大幅降低,同时整体业务效率,以及员工使用体验度得到非常的提升和改善,企业办公数字化升级得以快速推进。...二、文旅数字营销 腾讯数字文旅超计划,目的地“超级名片”计划和文旅“超级卖场”计划,旨在把腾讯流量、IP、数字化工具优势能力以及高效的文旅营销数字化工具,作为数字营销矩阵底座,围绕从目的地品牌,用户活跃度

    83820

    业务增长这场比赛,你的企业能赢吗?

    在这场“比赛”,腾讯企点的“新一代智慧客户服务”通过“连接智能”、“数据智能”、“运营智能”帮助企业修炼内功,在各个环节为业务增长持续提供新功能。...企点客服独家法宝:微信+QQ通路接待,全渠道触达。 企点客服可以全面覆盖用户基数大、高日活的微信及QQ社交平台,为企业承接来自全社交场景的流量,同时也覆盖网页、APP、电话等全渠道。...客服在统一工作就能轻松应对来自任意渠道咨询,还能进一步转入私域运营,让业务交易、复购更高效,再也不用担心线索遗漏,让你在客户连接赛道成功领跑!...眼见为实# 以上,只是企点客服在“连接智能”上为“增长”做出的细微努力,当然企业业务持续增长的秘诀远远不止这些,更多精彩内容将在2021腾讯数字生态大会“智慧客服与营销企点专场”上为大家一一揭晓,共享增长方法...● 工业制造业数字化转型看哪家?广西柳工! ● 增长者50 | 企业数智化转型内幕!仅靠一套解决方案就能实现?!

    6.1K40

    智链引擎CEO李智:游戏化增长,让裂变营销快十倍、便宜十倍、十倍丨数据猿专访

    打造游戏化运营,达成全渠道归因 通过对国内市场的洞察,智链引擎推出游戏化运营增长,为客户提供丰富的裂变拉新、打卡留存、激励转化等运营玩法。...实现解决方案,不能不提智链引擎的深度链接技术。...打开智链引擎的面板工作,可以定制化分析标签,深度链接带来的点击、打开、安装的数据一目了然,让精细化运营成为可能。...Value-selling,“快十倍、便宜十倍、十倍” 在SaaS行业普遍遇冷之际,李智提出一个Value-selling的理念。...效果是不是十倍? 在“快十倍、便宜十倍、十倍”的打法指引下,智链引擎不断升级技术,打磨产品。

    30810

    Llama2等30+模型接入千大模型平台,推理成本降50%!还有超全Prompt模板开放体验

    最新消息,百度智能云千大模型平台又叒升级了,这回还悄然变身国内拥有最多大模型的平台: 不仅能跑文心大模型,Llama2全系列、ChatGLM2-6B、RWKV-4-World、MPT-7B-Instruct...在“模型仓库”的预置模型,可以找到文心大模型、BLOOMZ-7B和此番更新的全部第三方大模型,一键就能开始部署。 辣么问题来了,其中不少都是开源模型,在千上调用跟直接拿代码用相比,有啥好处?...直白一点说,就是便宜、易用,“千优选”。 首先,在诸多开源大模型,并不是每一个都效果理想,有可商用协议。...千工程师也表示,从百度自身的实践上来看,大模型最终要达到的应用效果,除了基础模型本身的能力之外,更重要的是要“找到场景”。...千大模型平台,如今正是在这一方向上持续打样。 这一方面是因为百度在打造文心大模型的过程,对大模型技术本身有更深入的理解。

    28640

    腾讯SaaS加速器“数字金融”伙伴真果科技实施“融资帮扶”计划|腾讯SaaS加速器·学员动态

    来源 | 腾讯SaaS加速器首期项目-真果科技 ---- 真果科技是创新领先的产业数字金融服务商,融合应用人工智能、区块链、云计算、大数据等技术,自研沉淀“产业数字金融产品”,开创 “链资产数据确权...12月,真果科技SaaS化“产业数字金融产品”正式上架——腾讯SaaS生态“千计划”的另一大项目“SaaS臻选”商城,联合品牌服务。...真果科技“产业数字金融产品”上架臻选市场 “复工复产,融资帮扶”计划一期内容 协助十个区域政府及十家核心企业,免费搭建“科技金融服务平台”,联合全国147家金融机构,赋能区域政府为所辖中小微企业提供专项的融资帮扶金融产品...疫情当下,金融科技服务刻不容缓,腾讯云联合生态伙伴在行动,落实“腾讯云抗疫产品的销售培训”,进行

    1.1K10

    网易数:数据生产力平台2.0,推动“人人用数据 时时用数据”

    余利华表示:“企业提升全链路数据生产力需要对技术、产品或服务去提升,以数据、数据产品(这里指无代码的数据产品化)为两大节点,通过数据汇聚来自业务的数据,再基于数据建设数据产品,为业务系统提供可执行的决策指导...数据生产力背后的技术“推手” 在这次全链路数据生产力平台2.0版本,网易数推出了有数DataOps、逻辑数据湖、数据湖引擎Arctic等最新技术产品,其中有数DataOps技术代表其数据的重磅升级...这是数据项目交付效率低,数据质量差的主要原因之一。网易有数支持DataOps就是为了解决数据的研发交付效率问题。”...据介绍,基于逻辑数据湖的数据,是一种物理分散,逻辑统一的数据, 数据可以建立在Oracle/MySQL/Vertica等7类系统之上,实现数据的统一开发和统一治理。...面向湖仓一体,网易数还发布了有数实时数据湖引擎Arctic,不仅实现了流批一体存储,还支持无缝对接数据台数据治理体系,可以说极大地提升了数据的实时能力。

    65820

    python实现的AI版飞花令

    本文是基于千大模型,尝试使用其接口实现的一个chat机器人,当然可以玩飞花令游戏,让我们一起看看这个模型语言理解能力吧。...二 实战 2.1 注册账号并实名认证个人版 本打算尝试腾讯混元模型,可惜其没有开放个人API,而千模型提供了个人版本,所以这里姑且使用千,截至2024年一月初可以在不提前够买的情况下进行按量付费,开通后的界面如下...you: 不对,要诗句 bot: 的,那下一句可以是“春花秋月何时了”。接下去你来定吧! you: 要有鸟字 bot: 的,那下一句可以是“双飞燕子几时回”。接下去你来定吧!...“月落乌啼燕飞”如何?接下去你来定吧! you: 不对 bot: 非常抱歉,我可能真的没有理解对。让我们再试一次吧!...,当然在之前的混元体验过程,我也明确感受到了混元大模型的语言理解的威力,让我们更近一步期待混元能对个人开放更多能力,让我再实现一个基于混元的飞花令机器人。

    47221

    基于千AppBuilder助力古诗词速记新方式

    目录前言千AppBuilder搭建古诗词速记应用使用体验及收获结束语前言不用多说想必大家都知道,古诗词作为中国文化的瑰宝,是中学生语文学习重要的组成部分,但是在中学时期关于古诗词的背诵,对于大部分人来说是个...千AppBuilder先来了解一下千AppBuilder,某度智能云千AppBuilder(简称AppBuilder)是基于大模型搭建AI原生应用的工作,提供RAG、Agent、GBI等应用框架...首先需要进入某度智能云千AppBuilder,登录某度账号进入即可,然后点击“立即使用”即可,如下所示:点击立即使用按钮,直接进入创建应用控制主页,如下所示:点击创建应用按钮,即可进入具体应用生成的管理页...简单总结一下关于使用千AppBuilder之后,发现它的几个比较好的功能点,这里着重分享几个方面,未说明的不代表不好,只分享我个人觉得千AppBuilder的几个点,具体如下所示。...随着国内外AI技术的快速发展,以及千AppBuilder的不断迭代和创新,我相信在未来,这种新方式将会在中学生古诗词学习以及教育领域发挥越来越重要的作用,不仅可以让“学生党”更好的快速记忆学习,而且也推动了中华民族传统古诗词文化的传承和发展

    8223

    11 特供!临战前收下这几款小程序,分分钟省下一个亿

    轮播图的时效性攻略、好文的推荐攻略,还有搜索的关键词攻略。时效性攻略负责满足眼下最痛的痛点,像 11.11 刷什么卡优惠最多,宝宝安全座椅选 11 购指南,实实在在的干货贴。...除此之外,当大家都不知道吃什么,喝什么,或争执不下没有定论时,亮出 「抛个硬币」,顺应天意,很快也就有了结果。 爽快地接受今天的麻婆豆腐+雪碧吧!...无论是吃吃喝喝,还是买买买,受不了持续纠结的时候,一步点开这个小程序,舒缓下自己的决策压力也是的。毕竟双十一,是为了让自己的更开心,不是更焦虑。 ?...那么问题来了,费心挑了不少优价物,怎么买才能最划算,对得起节日做活动的优惠? 「消费分期计算器」这款小程序就是帮你理性消费的高效工具。算计好,省下一波可以再买买买。...它最核心的益处就是告诉你分期付款哪家强,哪款分期产品最适合你。主流信用卡+互联网白条产品,基本覆盖了目前的常用分期选择。在各种选择,你最关心的无非就是哪家利息少,或者每月可以少还款。

    56.8K40

    大模型发展进入深水区,企业如何打造专属AI原生应用?

    对外部企业来说,可以根据自己的需求完成个性化的定制,让一些中小型企业也可以跟上AI这条光明大道一起共同发展,这对于他们来说绝对是非常的一件事情了!...---- 五、 重磅发布“千AI原生应用开发工作” 10月17日,在北京首钢园召开的百度世界2023上,百度智能云在大会期间宣布面向AI原生应用开发,重磅发布“千AI原生应用开发工作”,加速企业...---- 六、千AI原生应用开发工作的优势及特点 千AI原生应用开发工作将开发大模型应用的常见模式、工具、流程,沉淀成一个工作,帮助开发者聚焦在自身业务,而无需为开发过程牵扯多余精力。...结语 百度GBI 作为百度国际化产品团队打造的数字化,为企业提供了全方位的数据驱动、高效的业务处理能力、灵活的业务应用场景、全球化的业务支持能力和完善的技术支持体系。...千AI原生应用开发工作也是一种具有革命性的开发工具,它将为企业的数字化转型和创新发展提供强有力的支持。

    34940
    领券