1回答
为此，我正在考虑将Hadoop用于MapReduce和分布式计算。使用MapReduce模式，我可以创建每组100.000条记录，并将它们分布在集群上，以便进行一些分布式分析/计算。我不知道这是否是一个好的解决办法，但如果你有什么其他我必须考虑的，请告诉我。
除此之外，我还必须存储所有这些记录，并每个月使用它们来改进我每天计算的算法。哪家商店最适合这种情况？
浏览 3提问于2015-02-11得票数 0
4回答
对REST浮点比较的困惑
、、、
REST Assured 有如下示例：好的，所以他们使用Hamcrest匹配器来与int但是他们有一节说REST Assured JSON解析器默认使用float，而不是double，所以我应该将其与12.12f进行比较，而不是与12.12进行比较
get("/price").then().body("price", is(<em
浏览 0提问于2017-10-19得票数 7
我正在尝试扩展Clojure以增加refs的持久性，这种方式允许用户选择要持久化的数据存储实例。这需要分布式事务。有没有真正轻量级的进程内分布式事务管理器，支持Java的XA？如果不是，我必须自己写，有没有好的资源来解释分布式事务协调器必须支持什么？具体地说，我很难理解XID的3个部分的语义到底是什么。作为初始实现，我使用BDB JE。
浏览 2提问于2010-09-10得票数 1
回答已采纳
我正在阅读云供应商针对分布式存储系统的解决方案，如Amazon和Google。什么是不信任的文件系统，云供应商使用不同类型的DFS？谢谢
浏览 0提问于2010-04-17得票数 4
回答已采纳
Spark具有用于各种数据库和数据存储的连接器。我希望了解Hadoop连接器的语义，以便能够为我的自定义数据库创建一个连接器。
浏览 1提问于2016-02-26得票数 0
2回答
我对非常陌生，它是一个用Java语言编写的面向列的、开放源码的分布式数据存储。
我需要启动多个服务(节点)才能顺利运行Druid。有没有自动启动服务的好方法？
浏览 11提问于2018-02-21得票数 0
分布式地图的官方文档说，“急切意味着加载被阻塞，直到所有分区被关闭。”这是否意味着在加载该映射的所有分区之前，任何带有分布式映射的操作都会被阻塞？我的项目有几个相当大的存储，从DB开始的加载大约需要20分钟。在所有分区完全加载之前，几乎没有必要启动所有计划好的任务来运行。当所有分区启动并准备就绪时，是否有任何wan需要得到通知？
浏览 2提问于2017-09-09得票数 0
回答已采纳
1回答
跨多个数据库的事务(C#)
、、、、
将来，该应用程序也可能使用不支持分布式事务的数据源。+TransactionScope:无法使用MSDTC。未来的数据源可能不支持分布式事务。+手动跟踪和回滚事务:我还没有找到在Entity Framework中执行此操作的好方法。
+队列/日志失败，所以它们可以被另一个进程重新提交:不能想
浏览 2提问于2013-10-05得票数 1
我想要分布式存储解决方案的一个主要原因是，我正在以非常快的速度收集大量数据，并且试图将所有数据写入单个磁盘会使磁盘不堪重负，这将导致数据丢失。数据收集算法是100% Python。我对分布式数据存储的选择感到不知所措，而且在过去的几年里，这个空间似乎发展得很快。Databricks看起来很有趣，但我不清楚它在分布式数据存储中是否与Hadoop一样好(或者它是否是Databricks的一种功能)。
浏览 0提问于2019-05-13得票数 0
将这个定义应用到客户端请求是cpu密集型任务的分布式共享存储系统中，我们是否可以选择移动代理来选择一个节点迁移到该节点并在该节点上执行客户端请求。对于基于java的分布式应用来说，这是一个好的范例吗?
浏览 2提问于2014-09-03得票数 0
但是，假设您有大量的应用程序，其中许多是分布式的(服务器/集群)，并且它们共享配置参数。但是我想问社区是否有处理多个分布式系统的配置的标准。
谢谢。
浏览 1提问于2013-07-18得票数 1
回答已采纳
1回答
对于这种同步(智能设备，“哑巴”键值数据存储)，有没有好的算法？听起来这类同步系统类似于分布式版本控制系统。
浏览 0提问于2011-12-12得票数 1
回答已采纳
1回答
我有一个Spring应用程序(2.2.5 RELEASE)，同步(非反应性)写入AWS DocumentDB wo，声明来自应用程序的任何显式事务语义。我们使用的是MongoOperations而不声明显式的MongoTransactionManager然而，我们想要理解的是，当我们在没有从客户端启动显式事务(即spring应用程序)的情况下，在一个3.11.2集群上执行写操作(有一个副本集)时，使用相同的MongoDB驱动程序版本和MongoDB服务器版本4.2.X，数据库提交是什么时
浏览 6提问于2021-10-04得票数 0
我从github存储库克隆了tensorflow (1.2版)。我在分布式tensorflow中的grpc遇到了一些问题。基本上，我想用最新的grpc库编译tensorflow (1.2)。我如何指示bazel在构建tensorflow时使用这个已经编译好的库文件和头文件。
浏览 1提问于2017-09-22得票数 1
1回答
我的工作是分布式系统(Java/EE，netty，protobuf).Wondering如何将文档从客户端发送到服务器，并将其存储在服务器数据库中。
发送字符串似乎很简单，但是如何发送一个大文件呢？任何好的教程，关于如何处理文档。
浏览 1提问于2013-10-07得票数 2
我们需要能够为我们正在编写的代码共享一个SVN存储库。我正在试着找出做这件事的最好方法。
这种情况还能奏效吗？最好的工作流程是什么？我非常感谢任何关于如何做到这一点的最佳指导或建议。
浏览 2提问于2011-07-12得票数 1
回答已采纳
我目前在hadoop集群中有许多数据库，希望将这些数据库中的一些表索引到Solr索引中以进行搜索。有没有办法做到这一点？或者是否有某种机制可以在hadoop本身中执行这种搜索？
浏览 2提问于2012-06-20得票数 1
回答已采纳
1回答
我有一个只有100 GB的大图，所以我不能把它存储在RAM中。这个图有多个边，每个边都有标签.我想执行以下查询：
这是一个单一的高性能PC，而不是一个分布式设置。我最喜欢的编程语言是Python。
浏览 2提问于2016-07-29得票数 10
1回答
已经按照Hadoop-COS官方文档在本地配置好hadoop，本地的hadoop是伪分布式，和腾讯云对象存储COS相关的配置还有ID，Key，bucke_id等，fs.defaultFS如下，所以在下面的url使用可以省略想这些信息受用命令hadoop fs -ls /test_tmp 打印cos上存储的文件列表是正常的，
但是，使用hadoop fs -cat /test_tmp
浏览 884提问于2019-10-15
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM活动推荐
腾讯云开发者
