我有一个由40个状态组成的转换矩阵，它给出了从一个状态转移到另一个状态的转换概率。我们如何计算n个时间步后系统将处于什么状态。
浏览 7提问于2016-08-21得票数 0
我正在将标点符号预测问题建模为一个隐藏事件模型，并试图遵循Stolcke论文“”中描述的算法。在计算ngram模型之后，他描述了计算事件的最大似然序列的算法：
通过对P(W，S)的N模型进行分解，并将方程4中的韵律似然分解，使联合模型P(W，S，F)等价于隐马尔可夫模型(HMM)。HMM状态是(单词，事件)对，韵律特征构成观察
浏览 1提问于2015-08-17得票数 0
我正在尝试开发一个离散时间马尔可夫模型。目前，我有5个状态，其中第5个状态是吸收状态。我还知道每个状态所处的可变持续时间。假设状态1可能需要20年才能转换到状态2，这是正态分布的。有没有办法用这些数据来计算转移矩阵？
更新:我正在考虑蒙特卡洛马尔可夫链模拟，但我不确定如何构建MCMC模型。
浏览 1提问于2015-02-05得票数 0
2回答
隐马尔可夫模型中簇/码本的数和状态的数之间的关系是什么？
状态数对基于隐马尔可夫模型的分类器性能有何影响？
浏览 1提问于2011-12-09得票数 2
回答已采纳
2回答
马尔可夫链是如何工作的？我曾为阅读过维基百科，但我不明白的是没有记忆。“无记忆”声明：
解释一下这个属性。
浏览 12提问于2013-12-15得票数 5
回答已采纳
1回答
在原始GAN (生成对抗性网络)论文)，生成对抗性网络由I.古德费罗，J. Pouget，M.阿尔。他们指出，GAN的一个优点是“根本不需要马尔可夫链，只使用后备技术获得梯度，在学习过程中不需要推理”(论文第6节)。
我不明白为什么这是个优势？如果我们从另一个角度来看这个说法，为什么使用马尔可夫链会是一个劣势呢？
浏览 0提问于2022-10-03得票数 3
回答已采纳
1回答
我正在尝试将UNO纸牌游戏建模为部分可观察的马尔可夫决策过程(POMDP)。我做了一点研究，得出的结论是，状态将是纸牌的数量，动作将是玩或从看不见的纸牌中挑选纸牌。我正面临着制定状态转换和观察模型的困难。我认为，该观察模型将取决于过去的操作和观察(历史)，但为此，我需要放松马尔可夫假设。我想知道放松马尔可夫假设是不是更好的选择？另外，我应该如何预
浏览 36提问于2019-04-25得票数 1
回答已采纳
平稳分布作为马尔可夫链的一个性质，在page_rank等领域得到了广泛的应用。
然而，由于分布只是关于转移矩阵的属性，与马尔可夫链的初始状态无关。那么转移矩阵的条件是什么，使得初始状态与马尔可夫链无关，最终在第n次迭代后达到平稳分布。
浏览 1提问于2013-05-25得票数 0
我知道，当满足马尔可夫性质时，下一个状态只与当前状态相关。但在马尔可夫决策过程(MDP)中，我们需要选择一个动作并执行它来进行转换。这是否意味着状态转换与所选操作相关，而不仅仅与状态相关？这种情况是否违反了马尔可夫的性质？大多数强化学习都是基于马尔可夫性的，我们认为选择的动作是马尔</
浏览 23提问于2019-05-11得票数 1
1回答
我有一个问题，在给定隐马尔可夫模型和状态S的情况下，我需要找到一个算法，该算法在时间O(|S|)内返回给定序列X的通过隐马尔可夫模型的最可能路径。我正在考虑开发一个图，在这个图中，我将在X中的不同位置拥有所有不同的状态，并在这个图上运行最短路径算法。然而，我将有n|S|^2条边(其中n是X中的状态数)和
浏览 2提问于2010-10-31得票数 0
1回答
对于越来越多的状态，我使用Baum算法构造了几个隐马尔可夫模型。我注意到，在8个州之后，超过8个州的验证分数会下降。所以我想知道，由于某种过度拟合，隐马尔可夫模型的精确度是否会随着状态数的增加而降低？
提前感谢！
浏览 0提问于2015-07-07得票数 7
回答已采纳
1回答
最近我偶然发现了，我想知道从如上所述的递归神经网络得到的结果与简单的马尔可夫链之间的差异是什么。我真的不理解RNN中发生在引擎盖下的线性代数，但似乎你基本上只是设计了一种超级复杂的方法来建立一个统计模型，根据前面的字母建立下一个字母的统计模型，这是在马尔可夫链中非常简单地完成的。
浏览 15提问于2017-07-27得票数 8
回答已采纳
1回答
我试图在每个步骤中增加离散马尔可夫链中的初始状态向量，以便在未来某个时间点求解状态向量元素，这似乎很麻烦。例如，在运行前面的马尔可夫链之后，我再次运行它，并在步骤1中添加了800名新员工：
step1state <- initialstate%*%transitionmatrix + t(as.matrix- step1state%*%transitionmatrix + t
浏览 0提问于2017-09-27得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
云直播
对象存储
腾讯会议活动推荐
腾讯云开发者
