首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往

Akka(11): 分布式运算:集群-均衡负载

在上篇讨论里我们主要介绍了Akka-Cluster的基本原理。同时我们也确认了几个使用Akka-Cluster的重点:首先,Akka-Cluster集群构建与Actor编程没有直接的关联。...既然分布式的Actor编程无须特别针对集群环境,那么摆在我们面前的就是多个可以直接使用的运算环境(集群节点)了,现在我们的分布式编程方式应该主要聚焦在如何充分使用这些分布的运算环境,即:如何把程序合理分配到各集群节点以达到最优的运算输出效率...在编程过程中唯一需要考虑集群环境的部分就是前端节点需要知道处在所有后台节点上运算Actor的具体地址,即ActorRef。...还是用上面的例子,使用ConsistentHashing-Router模式。...Adaptive-Group-Router可以在配置文件中设置: include "application" akka.cluster.min-nr-of-members = 3 akka.cluster.role

2.3K70
  • 您找到你想要的搜索结果了吗?
    是的
    没有找到

    Akka(9): 分布式运算:Remoting-远程构建式

    由于驱动、使用远程Actor是在local进行的,所以local,remote项目还必须共享Calculator,包括Calculator的功能消息。..." port = 2552 } log-sent-messages = on log-received-messages = on } } 由于远程构建和使用是在...scala.io.StdIn.readLine() remoteSystem.terminate() } Calculator的构建是在localSystem上启动的,我们需要在配置文件中描述远程构建标的...现在我们可以在local上开始构建calculator,然后使用它来运算了: import akka.actor._ import remoteCreation.calculator.Calcultor...但是,要注意actorOf的name必须与配置文档中的设置匹配。 试运行结果与上一个例子相同。值得注意的是实际远程构建的是一个SupervisorActor。

    77890

    Akka(25): Stream:对接外部系统-Integration

    在现实应用中akka-stream往往需要集成其它的外部系统形成完整的应用。这些外部系统可能是akka系列系统或者其它类型的系统。...akka-stream提供了mapAsync+ask模式可以从一个运算中的数据流向外连接某个Actor来进行数据交换。这是一种akka-stream与Actor集成的应用。...说到与Actor集成,联想到如果能把akka-stream中复杂又消耗资源的运算任务交付给Actor,那么我们就可以充分利用actor模式的routing,cluster,supervison等等特殊功能来实现分布式高效安全的运算...注意,在preRestart里我们把造成异常的元素处理后再补发给了自己。...注意:不能使用mapTo[String],因为offer返回Future[T],T不是String,会造成类型转换错误。

    2.1K80

    Akka(4): Routers - 智能任务分配

    Router的信箱直接代表了任务分配逻辑,与标准Actor逐个运算信箱中消息相比,能大大提高任务分配效率。Akka自带许多现成的任务分配模式,以不同的算法来满足不同的任务分配要求。...这些算法的配置可以在配置文件或者代码中定义。Router又可分Pool和Group两种模式:在Router-Pool模式中Router负责构建所有的Routee。...Router-Group模式中的Routees由外界其它Actor产生,特点是能实现灵活的Routee构建和监控,可以用不同的监管策略来管理一个Router下的Routees,比如可以使用BackoffSupervisor...super.postStop() } } 因为在Actor内部不能使用Thread.sleep,所以我们用了个scheduleOnce在延迟时间后向自己发送一个唤醒消息。...在上面修改后的代码里增加了监管策略SupervisorStrategy的使用测试。Router的默认监管策略是Esculate,即把某个Routee发生的异常提交给Router的直属父级处理。

    1K50

    Akka 指南 之「监督和监控」

    使用system.actorOf()创建的 Actor 是此 Actor 的子级。这意味着当这个守护者终止时,系统中的所有正常 Actor 也将关闭。...自 Akka 2.1 开始,可以使用akka.actor.guardian-supervisor-strategy来配置它,该设置采用了一个SupervisorStrategyConfigurator的完全限定类名...) 等待在preRestart期间被请求终止(使用context.stop())的所有子级实际终止;就像所有 Actor 操作都是非阻塞的一样,最后一个被杀死的子级的终止通知将影响到下一步的进展。...注释:Akka 中的生命周期监控通常被称为DeathWatch。 与上面描述的父母和子女之间的特殊关系不同,每个 Actor 可以监视(monitor)任何其他 Actor。...生命周期监控是使用监控 Actor 要接收的Terminated消息来实现的,在该消息中,默认行为是如果不进行其他处理,则抛出一个特殊的DeathPactException。

    1.1K20

    Akka(15): 持久化模式:AtLeastOnceDelivery-消息保证送达模式

    系统对超过配置文件中重发次数设置的消息通过自发送一条UnconformedWarning信息,这个信息包嵌了当前未确认送达消息清单: /** * @see [[AtLeastOnceDeliveryLike...从这个例子比较简单的功能操作中我们可明显感觉到写入日志的流量:CalcAggregator好像就是在不断的把经历的指令写入日志然后等待回复,回复时间就是Calculator运算时间。...s"Recovery compeleted with State: $results and lastSequenceNr=$lastSequenceNr") } override def preRestart...[Any]): Unit = { log.info(s"Aggregator restarting with reason: ${reason.getMessage}") super.preRestart...deleteSnapshots(SnapshotSelectionCriteria(maxSequenceNr = m.sequenceNr - 1)) deleteMessages(m.sequenceNr) 使用了下面这段代码来测试

    1.5K50

    【DB笔试面试511】如何在Oracle中写操作系统文件,如写日志?

    题目部分 如何在Oracle中写操作系统文件,如写日志? 答案部分 可以利用UTL_FILE包,但是,在此之前,要注意设置好UTL_FILE_DIR初始化参数。...若想普通用户使用该包,则需要在SYS用户下执行“GRANT EXECUTE ON DBMS_LOCK TO USER_XXX;”命令。 Oracle使用哪个包可以生成并传递数据库告警信息?...在CLIENT_INFO列中存放程序的客户端信息;MODULE列存放主程序名,如包的名称;ACTION列存放程序包中的过程名。该包不仅提供了设置这些列值的过程,还提供了返回这些列值的过程。...如何在存储过程中暂停指定时间? DBMS_LOCK包的SLEEP过程。例如:“DBMS_LOCK.SLEEP(5);”表示暂停5秒。 DBMS_OUTPUT提示缓冲区不够,怎么增加?...如何在Oracle中写操作系统文件,如写日志? 可以利用UTL_FILE包,但是,在此之前,要注意设置好UTL_FILE_DIR初始化参数。

    28.8K30

    如何在CDH中安装和使用StreamSets

    [t1kggp7p0u.jpeg] [gthtxgcxg9.jpeg] 2.文档编写目的 ---- 本文档主要讲述如何在Cloudera Manager 管理的集群中安装StreamSets和基本使用。...Field Masker提供固定和可变长度的掩码来屏蔽字段中的所有数据。要显示数据中的指定位置,您可以使用自定义掩码。...要显示数据中的一组位置,可以使用正则表达式掩码来定义数据的结构,然后显示一个或多个组。...对于更一般的管道监控信息,您可以使用度量标准规则和警报。 Jython Evaluator中的脚本为没有信用卡号码的信用卡交易创建错误记录。...我们将使用带有record:value()函数的表达式来标识信用卡号码字段/credit_card为空的情况。该函数返回指定字段中的数据。

    36K113

    技术干货| 如何在MongoDB中轻松使用GridFS?

    什么时候使用GridFS 在MongoDB中,使用GridFS存储大于16 MB的文件。 在某些情况下,在MongoDB数据库中存储大型文件可能比在系统级文件系统上存储效率更高。...此外,如果文件均小于16 MB BSON文档大小限制,请考虑将每个文件存储在单个文档中,而不是使用GridFS。您可以使用BinData数据类型存储二进制数据。...GridFS通过使用存储桶名称为每个集合添加前缀,将集合放置在一个公共存储桶中。...如果希望将其他任意字段添加到文件集合中的文档,请将其添加到元数据字段中的对象。 GridFS索引 GridFS使用每个块和文件集合上的索引来提高效率。...该索引允许高效地检索文件,如本示例所示: db.fs.files.find( { filename: myFileName } ).sort( { uploadDate: 1 } ) 符合GridFS规范的驱动程序将在读取和写入操作之前自动确保此索引存在

    6.7K30
    领券