首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

工作想法从哪里

提出论点 研究想法,兼顾摘果子和啃骨头。...两年前,曾看过刘知远老师一篇文章《研究想法从哪里来》,直到现在印象依然很深刻,文中分析了摘低垂果实容易,但也容易撞车,啃骨头难,但也可能是个不错选择。...初入团队,寻找自己立足点,需要一个工作想法。每年末,抓耳挠腮做规划,想要憋出一个工作想法。很多同学,包括我自己,陆陆续续零零散散想到很多点,然后自己不断否掉。...人三维+时间半维 具体如何找到想法,一时半会没有头绪。因此,回到最初起点,从人层面,我有什么?我想要有什么?...引用 研究想法从哪里来 杜跃进:数据安全治理基本思路 来都来了。

8.2K40

勿谈,且看Bloomberg数据处理平台

中数据意味着数据体积已经超越单服务器处理上限,但也无需使用数千台节点组成集群——通常是TB级,而不是PB级。这里,我们不妨走进Bloomberg用例,着眼时间序列数据处理数据和体积挑战。...时至今日,高核心数、SSD以及海量内存已并不稀奇,但是当下大数据平台(通过搭建商用服务器集群)却并不能完全利用这些硬件优势,存在挑战也不可谓不大。...但是这里仍然存在一个非常缺点,在任何给定时间,到给定region读写操作只被一个region服务器控制。如果这个region挂掉,故障将会被发现,故障转移会自动进行。...同时,更快机器也有利于缩短响应时间。通过使用开源平台,我们认真思索来自多个提供商意见,在中型数据处理上,我们可以看到很大发展空间。...使用HBase,用户可以在Portfolio文件上做拆分,并且分配到集群中多个主机上进行处理。

3.1K60
您找到你想要的搜索结果了吗?
是的
没有找到

什么是“平台工程?

为了改善开发人员体验,越来越多组织希望通过平台工程来减少繁琐工作,专注于创收功能和创新。 平台工程带来了两主要好处。第一个是引入了自助服务功能,允许组织中的人员尝试新软件。...平台工程主要目的是在降低安全性和可用性风险同时,有效地扩展开发人员工作。开发人员平台解决了大规模开发可能带来巨大成本和复杂性。...平台工程要取得成功,必须正确实施平台。由于组织对其平台需要定制化,因此不可能简单地购买现成产品。...平台工程要取得成功,需要组织全面支持。为了为内部用户构建更好体验,需要消除孤岛。平台工程需要自己团队才能成功;它不能仅仅被视为 IT 延伸。...面向未来平台工程 最终,平台工程目标是鼓励开发人员(无论其团队或职能如何)使用平台,而不是在平台之外进行试验。

9810

前端技术边界在哪里

为挖掘行业内技术融合最佳实践,GMTC 全球前端技术大会(北京站)策划了「IoT 动态应用开发」「前端技术融合与跨界」两个专题,我们希望在元宇宙(比如渲染能力)、智能汽车(语音、IM、地图、音乐、...部分精彩议题现已确认: 本次大会中,还有低代码、前端 DevOps、前端框架新体验、前端监控、移动端性能与效率优化等专题。...同时,我们也关注前端破圈有效姿势,首次聚焦 B 端研发效能、TypeScript、云研发实践等,并邀请 winter 等咖前来参与“师兄帮帮忙”晚场交流活动,与你讨论“前端如何有效增值”的话题。...06 ▊《低代码开发平台设计与实现――基于元数据模型》 谢用辉 著 本书能让你一举三得,一得低代码开发平台,二得元数据模型,三得软件抽象能力 低代码开发平台是在不写或者只写极少量代码即可实现业务功能软件平台...本书介绍低代码开发平台设计与开发详细过程,以元数据模型为核心,介绍服务、数据库、主数据、界面展现、功能配置,以及元数据自身管理,完整呈现元数据驱动低代码开发平台端到端实现机制。

1.2K30

搭建私有云平台优势在哪里

私有云特点就是在企业内部部署,不使用第三方平台辅助。有保密性高,安全性高,个性化私有定制特点。那么如何搭建私有云平台呢? 什么是私有云?...私有云计算相应为企业提供了众多优势(包括自助服务、伸缩性和弹性),通过专用资源提供额外控制和定制能力,远远优于当地管理计算基础结构。 私有云配图4.jpg 私有云优势体现在哪里?...私有云往往会在防火墙后面,而不是放在某个数据中心内。所以公司员工访问基于私有云应用程序时,网络应该非常稳定,不会受到不稳定影响。...私有云平台和公有云这两种形式平台都是可扩展、灵活计算能力集群,通常是服务器包括管理在内相关服务。公有云容易访问,通常由亚马逊、谷歌、微软等大公司提供。...另一方面,私有云仅供特定机构使用,可由idc数据中心服务器托管,使用自己设备和位置,或者经常由私有云第三方提供商管理,确保更新、服务质量和安全性。 私有云配图3.jpg

11.3K30

【学术分享】刘知远:研究想法从哪里

什么算是想法 2015年,我在微博上写过一个调侃小段子: ML派坐落美利坚合众山中,百年来武学奇才辈出,隐然成江湖第一名门正派,门内有三套入门武功,曰:图模型加圈,神经网加层,优化目标加正则。...研究想法从哪里来 想法还是不好,并不是非黑即白二分问题,而是像光谱一样呈连续分布,因时而异,因人而宜。...那么,研究想法从哪里来呢?我总结,首先要有区分研究想法与不好能力,这需要深入全面了解所在研究方向历史与现状,具体就是对学科文献全面掌握。...随着研究经历丰富,会越来越强烈地感受到,越是跨度交叉学术报告,越让你受到更大启发,产生更多让自己兴奋研究想法。 ?...几项研究工作放在一起,到底是互相割裂说不上话,还是在为一个统一目标而努力,格外反映研究大局意识和布局能力。

8.4K20

python读取图片信息_糖炒栗子还是小

大家,又见面了,我是你们朋友全栈君。...1.首先我们需要先导入所需要包,没有的话可以【 pip install ~】 来获取 import requests from lxml import etree 2.接下来我们要进行UA伪装,伪装目的就是把电脑伪装成人...(告诉电脑去哪里执行以下代码) URL = 我们所常说网址 #指定url url = '网址' 4.有了UA伪装以及URL,接下来我们就要去访问目标网站,把网站源代码给拿下来 #发起请求 resposne...()函数结合表达式进行标签定位,提取指定内容 我们这里是只要存储图片区域就可以了,有不懂可以去查一下 很简单 li_list = tree.xpath('/html/body/...索引定位 在href值adiv标签下有很多li标签,想要定位到第二个li标签,li标签后面用中括号加索引值(这里索引值是从1开始) /html/body/div[href=’a’]li[2]

64250

直播卖货平台开发突破点在哪里

很多软件开发商非常看重这块市场,着手为个体商家或者小企业打造直播卖货系统,不过,市场竞争是激烈,在开发模式逐渐雷同化今天,直播卖货平台开发突破点在哪里?...所以综合考虑,在未来直播卖货平台开发过程中,务必要达到商城商铺一体化,即商城商铺都是一手搭建,配套开发,虽然这样成本有些高,但毕竟是共用一个后台,对于个体商家来讲,这样做可大幅度减少在商品管理上时间...,而且商城也顺带加入了更多营销点,再者,对于平台运营来讲,在后续升级过程中会更加方便。...二、在线商城功能要完善 若在直播带货平台开发过程中,一点确定了商城商铺一体化模式,那么可就要对它核心功能深入探究一番了,一个在线商城基本功能大体包含:商品分类,广告位,购物车,商品管理(用于展示商品属性...除以上外,在直播卖货平台开发过程中,还要注意为平台预留出较多开发接口,用于和其它第三方应用进行对接。 以上,就是在直播带货平台开发过程中,需要注意突破点。

3.7K00

社交大佬们数据‘’在哪里

从电影制片厂,到唱片公司,再到有线电视台,娱乐产业中重头参与者们都在目不转睛地盯着这个指南针。每个月,超过10亿个独立用户会造访Youtube,使它成为名符其实世界第二社交媒体。...2013年12月数据显示,Youtube用户平均每月花费6个小时在这个平台上观看视频(而Facebook用户平均每月在其平台视频观看时间还不足1小时)。...LinkedIn是社交网络中为数不多常青树和盈利明星;它针对不是人们‘一时兴起’,而是逃不掉‘生计’问题(个人求职、公司招聘)。...目前,大约有22%LinkedIn用户在该平台上拥有500-999个一度人脉,拥有301-499个一度人脉占了19%。...每天5亿条推文为新闻和要闻提供了一个最接近于‘实时’窗口。据Pew研究数据,Twitter美国用户中有52%把该平台当做主要新闻获取渠道。 摘自:搜狐

2.7K110

微服务优势在哪里,为什么别人都在说微服务

我六月底参加深圳一个线下技术活动,某在线编程 CEO 谈到他们公司发版,说:“我说话这会儿,我们可能就有新版本在发布。”,这句话令我印象深刻。...传统单体应用,所有的功能模块都写在一起,有的模块是 CPU 运算密集型,有的模块则是对内存需求更大,这些模块代码写在一起,部署时候,我们只能选择 CPU 运算更强,内存更大机器,如果采用了了微服务架构...,不同系统独立部署,压力时候,可以独立进行集群化部署,这些操作都不会影响到已经运行其他微服务,非常灵活。...可以灵活采用最新技术 传统单体应用一个非常弊端就是技术栈升级非常麻烦,这也是为什么你经常会见到用 10 年前技术栈做项目,现在还需要继续开发维护。...服务拆分 个人觉得,这是最大挑战,我了解到一些公司做微服务,但是服务拆分乱七八糟。这样到后期越搞越乱,越搞越麻烦,你可能会觉得微服务真坑爹,后悔当初信了说微服务鬼话。

10.4K00

买域名哪里?域名供应商选择标准是什么?

对于想要在网络上建设网站用户而言,首先需要为网站购买一个合法域名,不过很多人对于购买域名并没有实际经验,因此往往不知道在哪里才能买到需要域名。那么买域名哪里?域名供应商选择标准是什么?...买域名哪里好呢 域名是外部用户访问用户网站地址,只有准确地址才能够让别人进入自己网站,并且域名和网址并不是相等关系,域名需要经过解析才能够获得网址。...域名选择标准 很多人在网络上查找后会发现,提供域名域名供应商在网络上是非常多,那么买域名哪里?域名供应商如何来选择呢?...其实有心用户会发现,网络上域名供应商虽然多,但不少域名供应商都只是代理性质,所提供域名种类相对比较少,因此在选择域名供应商时应当尽量挑选那些一级域名商,这样可以选择域名种类会更加丰富。...买域名哪里?如何挑选域名供应商?

16.3K10

清华教授刘知远:AI领域研究想法从哪里来?

什么算是想法 2015年,我在微博上写过一个调侃小段子: ML派坐落美利坚合众山中,百年来武学奇才辈出,隐然成江湖第一名门正派,门内有三套入门武功,曰:图模型加圈,神经网加层,优化目标加正则。...研究想法从哪里来 想法还是不好,并不是非黑即白二分问题,而是像光谱一样呈连续分布,因时而异,因人而宜。...那么,研究想法从哪里来呢?我总结,首先要有区分研究想法与不好能力,这需要深入全面了解所在研究方向历史与现状,具体就是对学科文献全面掌握。...随着研究经历丰富,会越来越强烈地感受到,越是跨度交叉学术报告,越让你受到更大启发,产生更多让自己兴奋研究想法。 ?...几项研究工作放在一起,到底是互相割裂说不上话,还是在为一个统一目标而努力,格外反映研究大局意识和布局能力。

6.4K11

哪里有服务应用性能监控 监控告警途径有哪些?

否则在各种同类软件不断刷新的当今,一个无法给用户提供较好体验软件自然会被淘汰。哪里有服务应用性能监控呢?...哪里有服务应用性能监控 对于哪里有服务应用性能监控这个问题,现在应用市场已经出了很多类似软件。...一些软件制造商或者云服务器商家出产应用性能监控,一般可信度和质量是比较高,它们拥有的研发平台是高科技技术团队,对系统研发和细节设置肯定是一般小厂家所不能比。...上面已经解决了哪里应用性能监控问题,性能监控在对应用进行实时分析和追踪过程当中,如果发现了问题,它报警渠道都有哪些呢?...以上就是哪里有服务应用性能监控相关内容,随便在搜索引擎上搜索一下就会有很多品牌正规监控软件出现,用户们按需选择就可以了。

8.1K30

如何培育内部开发者平台体验

如何培育内部开发者平台体验 伦敦——Syntasso 首席工程师 Abigail Bangser 在本周 State of Open Con 上说,“应用程序开发人员希望快速行动,而运维工程师希望安全行动...她说,平台工程之旅一部分是让高管们了解它价值。 然后,“根据特定社区需求调整平台本身是,但还不够,” Watt 说,因为你不能单独解决技术问题,而且只解决一次。...她对平台工程定义归结为构建、维护和提供“为所有使用它社区精心策划平台体验”,这会影响所有不断发展技术、社会和团队结构。 一个平台建立边界。...然后查看已经在运行工具——Slack、Jira、Trello——并开始跟踪临时请求。什么是最频繁、最困难、最耗时?您应用程序团队辛劳在哪里?...“你想让你团队更接近平台,与平台互动。做到这一点一个方法是提供他们需要文档和参考实施,”Watt 说。 不要忘记提供平台工程体验专业服务方面。

9310

数据处理分析工具

RapidMiner RapidMiner是世界领先数据挖掘解决方案,在一个非常程度上有着先进技术。它数据挖掘任务涉及范围广泛,包括各种数据艺术,能简化数据挖掘过程设计和评价。...Pentaho BI 平台,Pentaho Open BI 套件核心架构和基础,是以流程为中心,因为其中枢控制器是一个工作流引擎。工作流引擎使用流程定义来定义在BI 平台上执行商业智能流程。...Pentaho SDK共包含五个部分:Pentaho平台、Pentaho示例数据库、可独立运行Pentaho平台、Pentaho解决方案示例和一个预先配制 Pentaho网络服务器。...其中Pentaho平台是Pentaho平台最主要部分,囊括了Pentaho平台源代码主体;Pentaho数据库为 Pentaho平台正常运行提供数据服务,包括配置信息、Solution相关信息等等...,对于Pentaho平台来说它不是必须,通过配置是可以用其它数据库服务取代;可独立运行Pentaho平台是Pentaho平台独立运行模式示例,它演示了如何使Pentaho平台在没有应用服务器支持情况下独立运行

3K150

模型预训练中数据处理及思考

作者有以下三理由: • 网页数据量级比公开数据多,仅用专有数据模型模型训练不到最佳效果:GPT3 论文中说自己模型参数是175B,使用了大约300Btoken数量进行模型训练,但根据scaling...• 专有数据处理起来很麻烦:网页数据有固定格式,我们可以根据html上面的标签进行处理,而专有数据因为来源很杂,格式不统一等原因,甚至需要一份数据,一种处理方式很费时间。...The pile是一个高质量数据集,作者在构建RefinedWeb数据集上训练模型超过了在The pile数据集上训练效果 网页数据处理方法 CommonCrawl数据特点 • 很脏:有大量情色、...• 在高质量专有数据集上训练多个epoch,并不比在web数据上充分训练一个epoch效果。...DeepMind证明了提升模型规模和提升数据质量同样重要,仅仅是模型也做不好推理任务,但如果数据处理的话,模型推理能力能大幅提升。

69310

数据处理必备工具!

5.PentahoBusinessAnalytics 从某种意义上说,Pentaho与Jaspersoft相比起来,尽管Pentaho开始于报告生成引擎,但它目前通过简化新来源中获取信息过程来支持大数据处理...7.Cloudera Cloudera正在努力为开源Hadoop,提供支持,同时将数据处理框架延伸到一个全面的“企业数据中心”范畴,这个数据中心可以作为首选目标和管理企业所有数据中心点。...Hadoop可以作为目标数据仓库,高效数据平台,或现有数据仓库ETL来源。企业规模可以用作集成Hadoop与传统数据仓库基础。Cloudera致力于成为数据管理“重心”。...Talend是一个统一平台,它通过提供一个统一,跨企业边界生命周期管理环境,使数据管理和应用更简单便捷。...10.ApacheSpark ApacheSpark是Hadoop开源生态系统新成员。它提供了一个比Hive更快查询引擎,因为它依赖于自己数据处理框架而不是依靠HadoopHDFS服务。

2.9K70

帮不了农民疆不是无人机

面对植保无人机 以往无往不利疆也不具备绝对优势 众所周知,疆是无人机领域绝对佼佼者,只要提及无人机就绝对绕不过它,尤其是在消费级无人机领域。...从2015年开始,疆就宣布自己要做植保无人机,而此次受邀参与标准起草工作,侧面展示了其在这一市场被认可。 不过,需要注意是,相比于消费级无人机市场狂欢,疆在植保无人机市场并不是无往不利。...换一种说法,在植保无人机市场开拓上,疆并不具备绝对优势。 名气和品牌无法抵消“迟到”影响 2015年11月,疆正式发布了自己第一款植保无人机MG-1,并于2016年3月正式交付。...、一边卖服务竞争对手,“只卖硬件”疆一下子就打开了自己市场。...销售模式不具备盈利能力——前面也提到,疆在植保无人机策略是“只卖硬件”,沿用以往在消费级市场经销商模式。短时间之内,这一模式的确助力疆极快打开了市场。

25340
领券