統計関連連合学会でのＫＹ法関連発表です：KY-methods was presented on the Japanese joint statistical meeting

　２０１４年度統計関連学会連合大会　９月１３－１６　東京 にて発表いたしました。
　私の演題は「ビッグデータ対応の二クラス分類KY(K-step Yard sampling)法の開発と展開」というもので、ＫＹ法の基本概念と、そのバリエーション（現在①２モデル判別分析ＫＹ法、②①モデル判別分析ＫＹ法、および③モデルフリー判別分析ＫＹ法）についての概要を発表しました。なお、発表要旨はこちらとなります。本講演に興味があります方はさきの要旨を参照ください。あるいは、より詳細な説明や、発表の時に用いたＰＰＴファイルをご希望されます方は、本ブログにて連絡いただくか、contact@insilicodata.comにメールいただきたく存じます。

 統計関連分野では、データ解析実施過程で新たにサンプル空間を作りかえるという発想が無いようなので、今回はＰＰＴファイルの中に、この手順を大きく明記し、発表時もきちんと説明しました。
　質問は、ＫＹ法の他の発表時にもありましたが、決定木に似ているとの質問がありました。これも、ＫＹ法を発表していると頻度高く質問される項目です。基本的にＫＹ法は多段階階層的な手法であるがため、同様な多段階階層型の決定木と混同されるようです。

１．個々の段階は、ＫＹ法は完全分類された２クラスターと分類出来ない一つのクラスターで、合計３クラスターで構成されます。
　　決定木は、エンタルピー等の指標によりサンプル群が分類されます。この時、各クラスターの分類率が高くなるように計算されますが、ＫＹ法のように、１００％分類された領域が出来る保証はありません。１００％分類が完了しないがために、さらに下位の方に新たなクラスターが形成されるようになり、ステップが進むほどクラスターの数が多くなり、全体として大きな木のような下側に向かって広がる形を取ります。ＫＹ法は最後まで常に３クラスターであり、２クラスターが完全分類されたもので、残る分類できなかったクラスターの一個だけが下の階層に持ちこされるようになります。
２．階層構造について
　ＫＹ法の階層構造は常に３クラスターで、最後の階層は完全分類が実現されるので、二つのクラスターとなる。
　バイナリーツリーは、階層が進む（下の階層に行く）程、クラスターの数が増え、全体的にはツリー構造、あるいはパラソルのような形となる。
３．分類について
　ＫＹ法は個々の階層で必ず１００％分類されたクラスターがでてくる。１００％分類出来ないサンプル群はグレーサンプルとしてそのすべてが下の階層に移る。
　決定木は各階層で１００％分類されたクラスターが出来ることは殆ど無い。個々のサンプルの分類成功不成功は、ツリー構造の最下層ステップに着くまで決定出来ない。　

統計関連学会連合大会にて最新のＫＹ法について発表いたします。

　２０１４年度統計関連連合大会が９月１３日（土）から１６日（火）の日程で、東京大学本郷キャンパスで開催されます。
http://www.jfssa.jp/taikai/2014/

　湯田はこの大会にて

「ビッグデータ対応の二クラス分類KY(K-step Yard sampling)法の開発と展開」

との演題で発表いたします。
　発表内容は、ＫＹ法の基本概念説明および、その二クラス分類手法への展開状況等を中心に発表いたします。また、ＫＹ法は従来から展開されている多変量解析/パターン認識手法を適用し、その運用方法を変えることで、従来手法では得られなかったデータ解析上での様々な特徴や利点を達成するものであることを説明いたします。
　ＫＹ法に関心のある方は、是非ともこの統計関連連合大会に参加され、ＫＹ法のより詳細な話や、最新の展開状況等に関する発表を聞いていただければと存じます。

２０１４年６月３０日
文責：湯田　浩太郎