请教，Markov chain里，如果transition matrix - Mathematics版

本页内容为未名空间相应帖子的节选和存档，一周内的贴子最多显示50字，超过一周显示500字访问原贴

Mathematics版 - 请教，Markov chain里，如果transition matrix

相关主题
● 关于markov decision process求解的复杂度	● 求推荐Markov Chain，Random Walk，mixing time书
● **Help Needed, thanks**	● 问一个Markov Process的问题
● 问一个Markov chain的问题	● MDP如果不知道reward function怎么办？
● 请教：如何用matlab数值求解markov chain？谢谢！	● Re: 有没有关于范函的好教科书？
● 求问一个markov chain的问题	● how to express this probability in matri
● 请问Markov Chain Monte Carlo和 Monte Carlo根本性的区别是什么？	● Help: Semi-Markov chain
● 倾家荡产包子求解一个Markov chain 的问题 (转载)	● Question about consistent estimator
● About the irreducibility of Markov chains	● 答案来了Re: 请教一个概率题。 (转载)

相关话题的讨论汇总
话题: markov话题: transition话题: matrix

进入Mathematics版参与讨论

(共1页)

X*****r
发帖数: 2521

【以下文字转载自 EE 讨论区】
发信人: Xfilter (支持南开的兄弟们), 信区: EE
标题: 请教，Markov chain里，如果transition matrix
发信站: BBS 未名空间站 (Wed Feb 13 22:27:05 2008), 转信
是random的，怎么处理？
就是整个transition matrix是时变得，random的
怎么处理这种问题？
有没有什么相关的分析结果，以及相关的MDP solution？
多谢指点！

e********e
发帖数: 35

assume a model?

(共1页)

进入Mathematics版参与讨论

相关主题
● 答案来了Re: 请教一个概率题。 (转载)	● 求问一个markov chain的问题
● 紧急求助！Stochastic Integer Programming	● 请问Markov Chain Monte Carlo和 Monte Carlo根本性的区别是什么？
● 问个题,看不大懂题意	● 倾家荡产包子求解一个Markov chain 的问题 (转载)
● 发包子请人review我的syllabus - stochastics	● About the irreducibility of Markov chains
● 关于markov decision process求解的复杂度	● 求推荐Markov Chain，Random Walk，mixing time书
● **Help Needed, thanks**	● 问一个Markov Process的问题
● 问一个Markov chain的问题	● MDP如果不知道reward function怎么办？
● 请教：如何用matlab数值求解markov chain？谢谢！	● Re: 有没有关于范函的好教科书？

相关话题的讨论汇总
话题: markov话题: transition话题: matrix

#	版面	帖数(主题数)
-	全站	4871 (796)
1	Military	3777 (569)
2	Stock	341 (51)
3	Joke	117 (17)
4	History	116 (3)
5	Automobile	100 (9)
6	USANews	55 (9)
7	Midlife	45 (1)
8	Headline	41 (41)
9	Dreamer	33 (13)
10	FleaMarket	32 (20)
11	Living	30 (7)

boards

未名新帖统计// 7月16日

历史上的今天