我(作为一名博士后)正在研究一个考古发掘点云数据集，数据集超过25亿点。这些点来自一条沟渠，一个长方体10×10×3米。每一个点云是一层，两者之间的空隙是出土量。这条海沟里有444卷卷，有700个点云。
有谁能给我一些指导，让我知道任何能把这些空白处划分起来的深度学习算法吗？我已经在半自动地使用Open3D和其他python库了，但是如果我们能够训练这个程序来评估所有的点云并推断出它们的数量，这将节省我们很多时间，并希望得到更好的结果。
我们每年都会挖掘更多的战壕，所以是测试这些的最佳地点。
从这里重新发布https://stackoverflow.com/questions/58757853
浏览 0提问于2019-11-08得票数 0
近日，神州高铁与腾讯云计算有限责任公司签署了《框架合作协议书》。双方一致同意建立长期合作伙伴关系，充分发挥各自优势，共同推动互联网、大数据、云计算、物联网、人工智能等在轨道交通产业领域的应用。
浏览 1438提问于2018-07-24
我刚开始采矿业。我昨天刚开始使用一个软件: MinerGate。它显示我的电脑正在以大约100千赫/S的速度进行挖掘。与另一个人我的采矿情况听起来正常吗？相反，我可以采矿。因此，我的问题是，我的挖掘结果是否可以与下面提供与我相同的KH的云挖掘相比较。
📷
大约半天之后，它只开采了0.001以太。
这很低:它正常吗？
我看到了100 the的3.5美元的云挖掘报价，这是否意味着这种云挖掘将给我同样低的采矿回报？
浏览 0提问于2016-06-19得票数 3
2回答
有没有可能用RED的‘PaaS在云上构建一个大数据应用程序？我正在研究如何在云上构建一个使用Hadoop ( HDFS )，Spark，一个Apache Mahout的Scala应用程序，但我找不到任何关于它的东西。我已经看到了HortonWorks的一些东西，但不清楚如何在openshift环境中安装它，以及如何在云too.Is中添加HDFS节点使用OpneShift？
这在亚马逊是可能的，但我的问题是:在OpenShift中是可能的吗？
浏览 1提问于2014-09-15得票数 0
1回答
我听说Ethereum挖掘是抗ASIC的，因为它需要内存硬散列算法。然而，为什么矿工不能购买大的DRAM，并将内存专用于ASIC挖掘？是什么阻止矿工制造一个与大DRAM配套的专用集成电路？
提前谢谢。
浏览 0提问于2017-05-29得票数 21
回答已采纳
我将使用PySpark运行一些东西(回归、ML等)。在相当大的结构化数值数据集(>1TB)上。目前，谷歌云存储上的数据是CSV格式的。是否将数据转换为其他格式(Parquet等)？在csv中加速阅读火花，还是阅读速度大致相同？
浏览 2提问于2017-06-27得票数 0
回答已采纳
物联网、大数据、云计算、人工智能之间的关系如何？
大数据、云计算，人工智能的发展，对物联网会有哪些帮助？
浏览 2568提问于2018-04-12
1回答
我的web应用程序在服务器端使用PHP/MySQL来获取数据并将其存储在数据库中。数据库的大小会随着用户群的增加而增加，而且可能非常庞大。该应用程序是在传统服务器上构建和运行的，即没有编写特定于“云”的代码(我没有使用云系统的经验；在云系统上运行服务与在普通服务器上运行有什么不同？)
我的担忧是：
如果我在亚马逊弹性计算云上购买空间，我是否可以将所有代码直接移植到新服务器，或者我是否必须使用某些特定于此的API？由于它是按需付费的，所以它非常适合这样的requirement.What。托管需要大服务器空间的web服务还有其他选择吗？像Whatsapp这样的应用程序是如何做到这一点的？
谢谢。
浏览 1提问于2013-04-08得票数 2
回答已采纳
9回答
大规模城市化已经成为城市发展的必然趋势，随着移动互联网、物联网、云计算等新技术的兴起，智慧城市建设正向着更深层次的信息化发展，智慧城市已经成为现代城市发展的一个重要课题。而物联网和云计算如何让智慧城市真正智慧起来？
浏览 1437提问于2018-05-03
我有一个网站托管在EC2上，大多数css，JS和图片从Cloudfront加载。一个一致的问题是，即使是小的css和js文件也有1-2秒的时间到第一个字节，即使在Cloudfront上有缓存攻击。这是来自网站的截图：
📷
这些css文件没有一个是特别大的。我也连续两次进行这个测试，但似乎没有什么不同。
我对云锋有什么限制吗？或者由于HTTP2而产生的请求的任何形式的相互依赖？
浏览 0提问于2017-09-03得票数 4
我有一些表要从大查询加载到数据库。我需要每天都这样做，并在云sql中创建一些存储过程。每天从大型查询加载表到云sql的最佳方法是什么？传输数据和将云sql保持在24/7上的成本意味着什么？感谢你的帮助。
谢谢你，J。
浏览 4提问于2021-06-09得票数 1
回答已采纳
我在一个s3桶(tar文件)中备份了一个mongodb，并且我希望将它恢复/导入到mongodb云地图实例中，而不让数据通过我的本地机器，因为它是一个非常大的文件，这可能吗？
浏览 6提问于2022-11-12得票数 0
我想在谷歌云bigQuery中加载大容量的数据。
我手头的所有选项(使用UI和API)是什么，最快的方法是什么？
蒂娅！
浏览 0提问于2018-07-13得票数 1
回答已采纳
我们有一个相当大的表，我们正在用SSAS数据挖掘对其进行预测。
我们正在努力获得得分的测试&以有效的方式培训验证的案例。是否有一种不调用(预测联接)算法的方法()？
例如，如果输入数据集有以下列：
(顾客，国家，年龄，性别，BuyAmount)我想要.
(顾客、国家、年龄、性别、BuyAmount、BuyAmountPredicted、概率)
这必须是可能的，因为这是在模型处理期间完成的，而且ir可能用于生成验证图表，例如SystemGetClassificationMatrix。
如果我们谈论的是数十亿行，这将是一个很大的性能改进。
避免重复计算(预测联接将对每一行执行模型)
浏览 3提问于2016-05-24得票数 1
最近，我发现了一些基于Ethereum块链的通用超级计算机(分布式云计算)技术，如戈勒姆、索姆和iEx.ec。看来所有这些项目都还在进行中，因此我无法对它们进行实验来运行一些应用程序。
Golem:
Golem项目是一项正在进行的工作。当前版本是Brass Golem的阿尔法阶段，并且没有完全安全。有关更多细节，请查看此问题列表。在安装该软件之前，请确保您了解该软件的风险。存在的安全问题：https://github.com/golemfactory/golem/labels/security (1)签名应用程序macos计划的安全窗口(2)返工同步检查Ethereum安全性(3)检查是否使用
浏览 0提问于2017-09-06得票数 6
回答已采纳
1回答
最近，我尝试使用Visual Studio2010中的C++将点云数据写入.txt文件。一开始我使用ostream输出数据，但我发现写入数据时速度很慢。
我的代码：
std::ofstream outfile;
outfile.open(filename.c_str());
for(int index = 0;index < pointcloud.size();index++){
outfile<<pointcloud[index].x<<pointcloud[index].y<<pointcloud[index].z
<<poin
浏览 23提问于2017-03-08得票数 0
我切换到大查询，因为高性能。但是不知道如何将数据从上传到大型查询数据库。还有一些问题..。我可以直接访问我的数据库从谷歌云存储，同时使用大查询。我要先把它转换成某种格式吗？如何继续更新大查询数据库到我的谷歌云存储数据库。
提前谢谢。
浏览 9提问于2016-02-25得票数 1
回答已采纳
据我所知，同态加密可以用来保密数据，同时仍然允许对数据进行计算。从另一个问题中，我发现还可以通过重新计算结果来验证计算的完整性(我的意思是可以验证返回值确实是所请求的计算的结果)。
我对一个不可能重新计算的场景感兴趣。例如，原始数据可能不再可用，或者原始数据非常大，重新计算成本太高。是否有其他方法来验证结果是否与所需的计算相对应？
也就是说，假设我想在云中使用同态加密来执行r = a + b + c操作。一旦云返回结果r，如何验证r是a + b + c的结果，而不是a + b或其他计算的结果？
浏览 0提问于2018-08-06得票数 3
回答已采纳
2回答
哪个谷歌云存储最适合我的数据
、、、、
我正计划将我的整个系统迁移到google云平台。目前，我正在运行mysql、apache、nodejs和角js的组合。随着数据呈指数增长，Mysql的速度越来越慢。系统处理大数据分析。我需要具有最短查询时间的IO密集型数据库。目前，我已经构建了mysql数据库，并且根据应用程序的要求，我需要非常频繁地查询数据以获取分析数据和原始数据。Google建议我使用Cloud，但是没有任何服务方面的经验，我对此并不确定。
请为我的应用程序推荐最合适的google，包括云扳手、云sql、云数据存储、大查询和云大表。
如有任何建议，将不胜感激。
PS:我正在考虑使用google计算引擎。
浏览 4提问于2017-08-11得票数 1
回答已采纳
1回答
我试图用Python编写一个Dataflow管道，它需要一个大的numpy矩阵作为侧输入。矩阵保存在云存储中。理想情况下，每个Dataflow工作人员将直接从云存储加载矩阵。
我的理解是如果我说matrix = np.load(LOCAL_PATH_TO_MATRIX)，然后
p | "computation" >> beam.Map(computation, matrix)
矩阵从我的笔记本电脑发送给每个数据流工作者。
我如何才能指示每个工作人员直接从云存储加载矩阵呢？是否有用于“二元水滴”的光束源？
浏览 3提问于2017-05-13得票数 1
回答已采纳
需要从oracle数据库中提取数据并存储在Google云平台中。数据大小约为10 TB。有没有可能通过Spark？数据必须每月传输一次。在GCP中存储和处理的数据如下：
Oracle数据库到云存储(不必做CSV导出)，然后它将是干净的，并准备在Dataprep中，这将通过数据流进一步处理，最后它将被存储在Big Query下(从大查询数据科学家将使用数据来创建他们的模型)。
在此过程中不能使用第三方工具。任何开源工具都是允许的。
我正在考虑从spark中提取数据(通过将DataProc用于spark作业)，并将其存储在GCP (任何一个云存储或大表或大查询)中。通过云sql -这是不可能的，因
浏览 2提问于2019-11-17得票数 0
我想将数据从我们的云环境(pivotal cloud foundry)加载到SQL Server中。数据从API获取并保存在内存中，我们使用tds将数据插入到SQL Server中，但在文档中我看到的使用批量加载的唯一方法是加载文件。我不能使用pyodbc，因为我们在云环境中没有odbc连接。
如何从字典中直接进行大容量插入？
pytds不直接提供大容量加载，仅从文件提供大容量加载
浏览 0提问于2019-12-06得票数 0
我是GCP新手，需要一些帮助来解决我的问题。
我正在创建CSV文件，json文件和java脚本文件，并上传到GCP存储桶中。创建“云存储上的文本文件到大查询”数据流模板以将数据填充到bigquery中。
我需要一些帮助转换的日期格式从DD-MM-YYYY到YYYY-MM-DD在大查询中使用‘文本文件在云存储到大查询’数据流模板在GCP中。
浏览 12提问于2021-06-12得票数 0
我想编写一个运行生物信息学工具的google云运行函数。该工具将一个大的3Gb参考数据文件作为只读输入() +一个小的第二个文件，根据用户输入的不同而变化。
我应该尝试将引用数据文件构建到我的坞映像中，还是有更好的方法？
浏览 4提问于2020-06-21得票数 0
回答已采纳
1回答
我一直在读这篇关于直接读取实时数据库与调用返回数据库数据的云函数的文章。 如果我返回一个相当大的数据块，例如一个包含来自云函数的代表50个用户评论的数据的json对象，这算不算出站数据(Egress)数据？如果是这样的话，每月每gb的费用是0.12美元吗？ 注释是这样存储的，并带有一个增量键。 comments: [0 -> {text: “Adsadsads”},
1 -> {text: “dadsacxdg”},
etc.] 此外，我已经了解到，您可以使用客户端sdks调用goOffline()和goOnline()来停止并发连接。关闭和打开数据库连接是否有任何成本，或者只是
浏览 9提问于2020-10-04得票数 1
回答已采纳
请描述您的问题
标题：2017腾讯云11.11大促 给你实实在在的优惠
地址：https://cloud.tencent.com/act/double11
浏览器信息
Mozilla/5.0 (Windows NT 6.1; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 Safari/537.36
浏览 260提问于2017-11-02
3回答
我目前正在学习数据挖掘，我有以下问题。
机器学习和数据挖掘之间的关系是什么？
我发现许多数据挖掘技术都与统计相关，而“听说”数据挖掘与机器学习有很多关系。所以我的问题是:机器学习与统计学密切相关吗？
如果它们不是密切相关的，那么是否有这样的分工，将侧重于统计技术的数据挖掘与以机器学习技能为重点的数据挖掘分开？因为我发现一些研究生院的统计学系开设了数据挖掘课程。
浏览 8提问于2011-09-21得票数 1
回答已采纳
3回答
有什么方法可以在云上进行计算机视觉吗？这个想法就像人们登录一个网站，然后摄像头被激活，视频数据通过互联网发送到服务器。服务器对这些数据进行处理，并将处理后的数据实时或至少每秒10帧传回给用户。
这可行吗？在网络方面，我们需要什么样的技能？我知道视频流是其中的一个组成部分。另外，我们如何设置服务器？分布式系统是否可以在有限的时间内考虑非常大的计算？
浏览 0提问于2011-03-04得票数 4
我想从事数据仓库和数据分析师的工作。我正在阅读有关数据挖掘和仓储的书籍。但我对概率、傅里叶变换和小波函数等技术数学知识着迷了。
我不太擅长这些统计数学细节。
我想知道，如果我在DW工作行业工作，那么我是否需要学习那些东西或东西已经建立在这些东西上，而我不需要那些数学东西
浏览 3提问于2012-04-26得票数 0
请描述您的问题
标题：年底大酬宾-腾讯云
地址：https://cloud.tencent.com/act/bargin?fromSource=gwzcw.634679.634679.634679#cvm_hot
浏览器信息
Mozilla/5.0 (Windows NT 6.1) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/62.0.3202.94 Safari/537.36
浏览 204提问于2017-12-11
1回答
我正在尝试根据每一行的字符串值从数据创建集群。我用的是R语言。我称之为“集群”的是一个大主题(=系列)，它可以定义每个关键字。我想象一些基于关键字的自动生成，可能是使用柠檬化或ngram。
例如，关键字“云服务”和“云服务”都应该位于“服务”集群中。
这是我的输入向量：
keywords_df <- c("cloud storage", "cloud computing", "google cloud storage", "the cloud service",
"free cloud storag
浏览 3提问于2017-11-13得票数 3
回答已采纳
我有80,000 PDF(白皮书，电子书)将用于市场营销.我迫切需要寻找一个工具(希望是开源的)，用于文本挖掘，分类，根据它的行业，子行业对80,000个PDF进行分类。我希望文本挖掘工具能够为我提供正确的行业分类和内容内容分类，而不是每一个PDF文档。
举例说明。
FileName/AssetName Industry Content Matter
Oracle_Security_Cloud_Platform.pdf Cloud Technology Overview
Oracle_S
浏览 0提问于2020-12-26得票数 0
我有关于谷歌大查询表的查询。我们目前正在寻找根据当天上传到云存储中的文件来查询大查询表。 含义： 我必须根据每天的数据将数据加载到大型查询表中，并将其加载到云存储中。 当我查询时： select * from BQT where load_date =<TODAY's DATE> 我们可以在不将日期字段添加到文件中的情况下实现这一点吗？
浏览 17提问于2021-01-12得票数 1
回答已采纳
我目前正在使用云函数将数据从云存储中的csv文件加载到BigQuery。
然而，云函数有一个超时限制，我希望这些文件在会引起问题的地方变得足够大。
此外，插入大查询仅限于10mb/insert_rows。
我还能用什么代替云函数来实现这个功能呢？需要在文件放入云存储时触发。
浏览 2提问于2019-04-13得票数 1
回答已采纳
4回答
我有一个大学项目，在这个项目中，我应该为Azure找到并实现一个合适的开发主题。在Azure中，有Web角色和工作角色，我想找到一些东西，这对和这两个角色都带来了相当大的负担。
(web角色用于通过网页为用户服务，工作人员角色用于后台处理数据，这些数据将通过web角色显示)
其中一个目标是通过测量来显示云的巨大计算能力。我的问题是，我不知道任何复杂的算法会使CPU出汗。那么，对于实现来说不是太复杂，但足够复杂到可以计算的东西是什么呢？
任何想法都值得赞赏！
浏览 1提问于2010-02-13得票数 1
大数据是最近两年提出的，而数据挖掘上世纪就提出来了。我想知道的是，现在大数据的背景下，采用的数据挖掘算法跟之前传统的数据挖掘算法有什么本质上的不同？如果没有不同，那又是什么关系呢？
浏览 1424提问于2018-04-03
5回答
数据挖掘书籍
、、
我对数据挖掘很有热情，我读过一些像编程集体智能这样的书，我想知道更多的好书，特别是实用的，关于数据挖掘和人工智能的。任何提示都将不胜感激。谢谢。
浏览 0提问于2011-08-23得票数 5
回答已采纳
请描述您的问题
标题：2017腾讯云11.11大促 给你实实在在的优惠
地址：https://cloud.tencent.com/act/double11/expand
浏览器信息
Mozilla/5.0 (Windows NT 6.1; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/60.0.3112.113 Safari/537.36
浏览 264提问于2017-11-02
请描述您的问题
标题：2017腾讯云11.11大促 给你实实在在的优惠
地址：https://cloud.tencent.com/act/double11?fromSource=gwzcw.577304.577304.577304
浏览器信息
Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/55.0.2883.87 UBrowser/6.2.3637.802 Safari/537.36
浏览 413提问于2017-11-03
请描述您的问题
标题：年底大酬宾-腾讯云
地址：https://cloud.tencent.com/act/bargin?fromSource=gwzcw.634704.634704.634704#cvm_hot
浏览器信息
Mozilla/5.0 (Windows NT 6.3; Win64; x64; rv:57.0) Gecko/20100101 Firefox/57.0
浏览 542提问于2017-12-11
我在评估一项家庭作业。我需要做一个最终需要将数据推送到云中的应用程序。实际上，数据可能相当大。我查看了Google Android C2DM 。
但我意识到它是用来将小通知从云推送到应用程序的。它可以用来将相当大的数据从应用程序发送到云端吗？或者，是否有合适的替代方案可以使用？
因此，我的问题是，如何实现一种将大量数据从android应用程序发送到云的方法。
浏览 8提问于2013-03-13得票数 0
2回答
我正在为云(实际的云)做一个模拟，其中的云被三维点模拟，然后投射到一个2D热图中，大约640x480个单位大。点数约为50k，这是我在没有模拟中断的情况下所能做的最小的，但我似乎找不到任何方法以任何速度(通常需要3-5秒的运行时间)来执行此操作。
我想我的问题是，一台普通电脑能做到这一点是否可行？我通常低估了现在计算机的速度，但在这种情况下，我可能高估了它们。我还没有优化仿真，但如果它是不可能的，这将是最好的了解和节省麻烦现在。
如果有可能的话，是否有任何技术可以证明对使从点数据到热图的转换足够快到每秒更新60次？它实际上只是查看点数据并在转换后写入2D数组的结果，所以我认为它主要是绑定到内存
浏览 4提问于2015-06-16得票数 9
回答已采纳
我是一个全新的数据科学领域的人，我想要突破它，有那么多的工具存在。这些VM有很多软件，但我还没有找到任何并行比较。
这是从我的研究开始的，但是如果有人能告诉我，一个人在客观上更有特色，拥有更多的支持社区，然后开始工作会有很大的帮助：
datasciencetoolKIT.org -> vm是在迷航云(4GB)上运行的，并且似乎与R、iPython笔记本和其他有用的命令行工具(html->txt、json->xml等)更加“时髦”。8月份出版了一本详细的书。
datasciencetoolBOX.org -> vm是一个可从其网站下载的流浪汉盒(24 GB)。这里似乎有更
浏览 0提问于2014-06-26得票数 4
回答已采纳
在阅读了Jeff的文章"和混沌猴一起工作“并考虑了"分布式计算的谬误”的含义后，我怀疑开发人员创建基于云的应用程序的首要任务是否应该是创建一个混沌猴子。实际上，考虑到即使整个数据中心都可能在云中丢失，混沌大猩猩也可能是模拟大停电的必要工具。
Netflix显然是这么认为的，但我想知道他们的结论是否被其他人分享了。
因此，正如标题所说，当开始云计算项目时，混沌猴子应该是第一个应用程序吗？
浏览 0提问于2011-05-20得票数 1
回答已采纳
2回答
我想使用Apache来操纵Google中的大量数据。
我按照文档划分了一个包含5个节点的cluster集群。一切都完美无缺。
但是我的数据是在上，我了解到我可以使用Spark直接查询它，这是Google推荐的。
在这种情况下，是否有必要拆分整个集群？星火在谷歌云存储上的效率和HDFS一样高吗？
如果不是，那就更容易用木星和星火旋转一个大VM，并使用它来运行存储在GCS上的数据上的作业。
浏览 2提问于2018-08-13得票数 0
回答已采纳
我正在寻找一种简单的方法(当然，具有良好的性能)来向web应用程序公开我的BigQuery表中的数据。
当前正在运行的解决方案是使用一个云函数和Firestore (在本机模式下)在BigQuery中公开数据。该实现类似于-，一旦数据被写入最终的大查询表，我们就触发云函数(每次提交500条记录)来更新最后一个消防站表中的数据。-
而且，为了避免与云函数相关的超时问题，我们将整个数据集分成几个批次，每个云函数实例只处理一批记录。
但是在运行后不久，我们就遇到了写入方面的可伸缩性问题，因为我们是按顺序触发云函数实例的。
提高性能的一个简单方法可能是从云函数内部进行并行写入，但同样地，根据消防局文档
浏览 2提问于2021-03-30得票数 0
1回答
我正在做一个POC的谷歌云数据处理与HBase作为其中一个组件。 我创建了集群，并且能够让集群与HBase服务一起运行。我可以通过shell列出和创建表。 我想使用Apache Phoenix作为在HBase上查询的客户端。我通过引用此link将其安装在集群上。 安装正常，但是当我执行hbase localhost时，它应该在sqlline.py中创建元表。它实际上失败了，并在转换过程中给出了区域错误。 有没有人知道如何解决这个问题，或者是否存在Apache Phoenix不能与Dataproc一起使用的限制。
浏览 17提问于2021-04-09得票数 4
1回答
这是一个设计评审的问题，我希望是适合这个网站。
我正在设计一个系统，它使用云服务在PC和移动设备之间建立一个安全的连接。安全问题非常重要，但设置起来也很容易。当前的想法是通过创建一个长的随机访问密钥并将其缓存在PC上的加密存储中，从而完全自动地在PC上设置整个帐户，而不要求用户选择密码。然后要求用户启动移动应用程序，让PC生成QR代码，提供移动设备连接云服务并进行身份验证所需的所有信息。
身份验证机制是一个简单的用户ID +访问密钥，其中密钥使用标准的HMAC对云服务进行散列，等等。
它的独特之处在于，我希望PC生成访问密钥，并以某种方式使用QR代码将用户名和访问密钥交给移动设备，而无需用户在
浏览 0提问于2015-05-16得票数 1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
