�����ؽ� ��ϩ����

��ϩ���ꥷ�ߥ�졼�� �Ȥ���

[0] ���ߥ�졼��ɽ����

��ݤ�����������ȡ��������ɤǤ���[start]����[goal]�˹Ԥ���100���󽷤�����졢�ޤ�[start]���ᤵ�������֤��ޤ���

[1]ư��ܥ���

[Start]�ǥ��ߥ�졼�ȳ��ϡ�[Stop]�ǰ����ߡ�[Learning Reset]�dzؽ��ǡ������������֤��ᤷ�Ƥ��饷�ߥ�졼�Ȥ���ľ���ޤ���
[Learning Reset]�Ǥ�[Count][Total Reward]���ͤϽ��������ޤ���Τǡ�ɬ�פ˱���������[Count Reset][Reward Reset]�ܥ���ǽ�������Ʋ�������

[2]����������

[Count]�ϸ������ޤǤι�ư���ƥå׿���ɽ�路�ޤ������ˤ���[Count Reset]�ܥ���ǹ�ư���ƥå׿���ꥻ�åȤ�������Ǥ��ޤ���
[State]����ݤθ��߰��֡�[Action]����ݤ���ä���ư(UP, RIGHT, DOWN, LEFT)��ɽ�路�ޤ���
[Reward]�ϸ������ι�ư�ˤ������줿�󽷤�ɽ�路�ޤ��������[goal]��é���դ������Τ������ޤ���
[Total Reward]�ϸ������ޤ�����줿�󽷤ι�פ�ɽ�路�ޤ������ˤ���[Reward Reset]�ܥ���ǹ���󽷤�ꥻ�åȤ�������Ǥ��ޤ���

[3]ɽ��®������

ɽ���ֳ֤��ÿ���[1ms](0.001��)��[1s](1��)�δ֤��ڤ��ؤ����ޤ��� �ؽ�����λ����ޤ����᤯��ư�����������ʤɤ�[1ms]�����ꤹ����ɤ��Ǥ���������������®�٤��ɤ��դ��ʤ����ᾯ�����̤�����Ĥ���������ޤ����ޤ�����ư�򤸤ä���ѻ�����������[500ms]���˻��ꤹ����ɤ��Ǥ���

[4]��ϩ����

[Maze type]����ϩ�μ�����ѹ�����ޤ���Applet�������塢��ϩ�ϸ����������Ƥ��뤿��5�����٤����򤬲�ǽ�Ǥ������֤�;�ä��ݤ��ڤ��ؤ��Ƽ¸����ƤߤƲ��������ʤ�����ϩ������ڤ��ؤ������ˤ�ɬ��[Stop]�򲡤��ƥ��ߥ�졼����������ߤ��Ʋ�������
[Emergency]����ϩ�˴Ķ��Ѳ��Ȥ����ɤ��ߤ��ޤ��������Ѱդ�����ϩ����Ϥ���������̤�Υ�������ã��ˡ���Ѱդ��Ƥ���Τǡ����Τɤ��餫��ɤ���������ޤ����ʤ�������ϥ��ߥ�졼������ư�������ޤޤǤ�����ǽ�Ǥ���

[5]�ؽ��ѥ�᡼�����楹�饤��

[��]�ϳؽ�Ψ�ѥ�᡼�����ѹ����ޤ������Υѥ�᡼���ϵ�������/�����ΥХ��Ĵ���˴ط�������н���ʪ���������륳���˸�Ω�Ƥ��Ƥ��ޤ��������ơ�
[��]�ϵղ��٥ѥ�᡼�����ѹ����ޤ������Υѥ�᡼���ϾǤ�Ȥ��Ĥ����ΥХ��Ĵ���˴ط�������н���ʪ���Υ륢�ɥ�ʥ��˸�Ω�Ƥ��Ƥ��ޤ��������ơ�
[��]�ϳ��Ψ�ѥ�᡼�����ѹ����ޤ������Υѥ�᡼���Ϲ�ư�ξ�ư������ݵ�ΥХ��Ĵ���˴ط�������н���ʪ�������ȥ˥�˸�Ω�Ƥ��Ƥ��ޤ��������ơ�