現在の音声対話システムは，一人のユーザに対して一つのエージェントが対応する 1 対 1 の対話を扱っているが，本論文ではシステム側のエージェントを複数にすることで多人数対話を実現するシステムを構築する．今回は，2 つのエージェントを扱った，三者対話システムの開発を行った．本システムは，我々がこれまでに構築した 1 対 1 対話の音声対話システムを拡張しており，ユーザに対する応答のタイミングや，応答の種類 （あいづちなど） の制御を決定木を用いて行っている．また，ユーザからの非流暢な発話に対しても頑健に応答することが可能になっている．エージェントは，2D のキャラクタを，それぞれ 2 台のディスプレイに 1 つずつ表示し，出力音声も別々のスピーカから出力されるようになっている．被験者実験の結果，被験者は三者対話による内容の幅の広がりや，対話の自然性を感じていることが示された．Almost all present spoken dialog systems have treated dialog that one user talks with one agent. In this paper, to achieve the multiparty conversation (polylogue, many participates conversation), the number of system agents is increased. Three person's conversation system that treats two agents was developed. This system is extended from the spoken dialog system of two person's conversation that we have developed so far. The response timing to the user and response type are controlled by using the decision tree. The system also reacts robustly to the user's disfluencies. The agent is displayed by the 2D character on two displays respectively one by one. Their speech outputs are also output from two different loud-speakers. As a result of the experiment, the subject felt that the content by multiparty conversation become wider, and that the conversation was natural.