我想使用这段Q-Learning（强化学习）的代码。代码看起来是正确的，但我遇到了错误，不知道为什么：

function  q=ReinforcementLearning clc;format short;format compact;int state=0;R= [-inf,-inf,-inf,-inf,   0,-inf;-inf,-inf,-inf,   0,-inf, 100;-inf,-inf,-inf,   0,-inf,-inf;-inf,   0,   0,-inf,   0,-inf;   0,-inf,-inf,   0,-inf, 100;-inf,   0,-inf,-inf,   0, 100];gamma=0.8;q=zero(size(R));q1=one(size(R))*inf;count=0;for episode = 0:20000;y=randperm(size(R,1));state=y(1);x=find(R(state,:)>=0);if size(x,1)>0,  x1=RandomPermutation(x);  x1=x1(1);endqMax=max(q,[],2);q(state,x1)=R(state,x1)+ gamma* qMax(x1);  int  state=x1;if sum(sum(abs(q1-q)))<0.0001 && sum(sum(q>0))  if count > 1000;            break  else      count=count+1;  endelse  q1=q;  count=0;endend

但我收到了以下警告和错误：

Warning: The method char/int will be removed in afuture relase. Use sym/int instead. For exampleint(sym('x^2')). > In char.int at 10  In ReinforcementLearning at 6 Error using mupadmexError in MuPAD command: Invalid integrand. [int]Error in sym/int (line 107)   rSym =   mupadmex('symobj::intindef',f.s,x.s,options);Error in char/int (line 12)y = int(sym(f),varargin{:});Error in ReinforcementLearning (line 6)int state=0;

这段代码可以在以下链接中找到：http://people.revoledu.com/kardi/tutorial/ReinforcementLearning/Q-Learning-Matlab.htm

回答：

在MATLAB中没有

int state=0;int state=x1;

这是C语言的风格。在MATLAB中，int是一个内置函数，含义不同。此外，应该是

q=zeros(size(R));q1=ones(size(R))*inf;

记得下载他的RandomPermutation函数，否则可以直接使用randperm代替。