スライド 1

Size: px

Start display at page:

Download "スライド 1"

かおりあると
5 years ago
Views:

1 落語協会の有力一門の勢力分布を D3.js で分かりやすくビジュアライズする -JSON プロシジャを用いて - 坂部裕美子 ( 公益財団法人統計情報研究開発センター ) Drawing the Dominance of the Top Teams in the Rakugo Society Clearly by D3.js -With JSON procedure- Yumiko Sakabe Statistical Information Institute for Consulting and Analysis

2 要旨 : JavaScript ライブラリの D3.js 上でのデータ表示を容易にする JSON プロシジャが SAS9.4 から使用できる Web デザインについては初心者ながらこれらを用いて落語協会の勢力分布の変遷をビジュアル化する SAS プログラムを作成したキーワード : データビジュアライゼーション,D3.js,JSON プロシジャ, 落語 2

3 本日の報告内容表示対象テーマの集計内容についてこれまでの研究成果の表示例 D3.jsについて / Circle Packingについて SASによるJSON 形式ファイルの書き出し Circle Packingによる表示 3

4 表示対象テーマの集計内容寄席定席興行における出番の多寡は総じてその落語家の勢いの強さと相関があると考えられる落語協会の寄席定席興行における年度別の各演者のプログラム登場回数データから落語家の属する一門ごとの特徴を把握する出演回数データの詳細な計算方法は SAS を用いた寄席定席興行の現状分析 SAS ユーザー会発表論文集 (2005 年 )p.273~ を参照集計プログラムの改良に際し森岡裕氏に多大なご協力を頂きました厚く御礼申し上げます 4

5 従来の結果表示寄席の出演者は小さん一門か志ん生一門で占められている小さん志ん生彦六圓生金馬三平圓歌文楽圓蔵その他しかし! 一門別の人数 (2005 年までの累計 )

6 従来の結果表示 2 一門別平均登場回数どの一門にも一定数の回数少者がいる平均値では突出して多い人の分がそれらで均されてしまう? 各年次によってそれぞれの一門の出演者の人数顔ぶれが変わる単純に平均を比較することで足りるのか? 文楽一門圓歌一門三平一門圓生一門圓蔵一門彦六一門志ん生一門金馬一門小さん一門数値やグラフでは一門の構成やその変化の態様は様々ということがうまく表せない

D3.js とは Data-Driven Documents 略してD3 データを印象的に可視化できるJavaScript 無料でコードを使用改造修正できる http://d3js.

7 D3.js とは Data-Driven Documents 略してD3 データを印象的に可視化できるJavaScript 無料でコードを使用改造修正できるにて多数の事例紹介報告者は Web デザインに関しては全くの初心者なのだが何とか Web サイト内の記載内容を判読してデータ表示構造を理解し自分の作ったデータを表示させられるようにしたい 7

Circle Packing(http://bl.ocks.org/mbostock/4063530) index.html で D3.js を含めた表示に関する指示を書き flare.

8 Circle Packing( index.html で D3.js を含めた表示に関する指示を書き flare.json に格納されたデータ内容を表示させるらしいこの図を使うとグループ内の階層構造とグループ全体の大きさを明瞭に表示できる図からは最上位がどの円かという明確な順位は判別できない一門別プログラム登場回数の表示に適している!! 8

9 JSON 形式ファイルとは JavaScript Object Notation の略で囲まれた対応のある項目の内容を : および, を使用して記述しさらにその項目同士の上位対応関係を {} や [] を用いて示している ( 以上はファイル使用に際してのミニマムな理解 ) SAS9.4 から JSON 形式での書き出しができるようになった Web 検索で SAS9.4 JSON Procedure Tip Sheet を発見 JSON プロシジャの基本構文や使用できるオプションとそのデフォルト設定などが説明されている 9

10 書き出し例 1 JSON Procedure についての SAS 内のヘルプ Example 1: Exporting a JSON File Using Default Options を改変 proc json out="c: Users ysakabe Desktop Output.json"; export dat01; run; 10

11 書き出し例 2 Example 4: Controlling JSON Containers and Writing Values 冒頭のメタデータを削除 [ を展開任意のテキストを挿入インデントを挿入 SASDS を書き出す { を展開データセットオプションが使える展開済のカギかっこをクローズ write close; の数は展開済のカギかっこの数に合わせなければならないがカンマは必要に応じて適宜挿入される 11

12 Circle Packing 用の表示構文冒頭の決まり文句 ( 最上位の円の宣言 ) 第 2 位の円の宣言円のクローズ第 3 位の円の宣言最下位の円の宣言 ( 大きさのデータを併記 ) 同同 ( 単一データ ) graph analytics 円のクローズ次の第 2 位の円の宣言 optimization cluster 文末には最上位の円のクローズ 12

13 今回表示させたい内容各一門の勢力 (= 円の大きさ ) や内部構造を明示した図全員について図示すると紛雑になるので有力な一門 ( ここでは当人と直弟子孫弟子の総称とする ) の中から ( 五代 ) 柳家小さん一門 ( 登場回数絶対的多数を誇る一門 ) 三遊亭圓生一門 ( 昭和後期 ~ 平成期で回数を減らしている ) 林家彦六一門 ( 昭和後期 ~ 平成期で回数を増やしている ) の落語家についてのみ取り上げる表示させるのは ( 当面は ) 特定の 1 年度分のみ 13

14 作業工程全体で共通 (1) 全データから図の表示に必要な落語家のデータを抽出する (2) 円を入れ子表示にする必要がある師匠である落語家とその相互関係を示したファイルを作成する年次別処理 (3) 表示したい年のデータを抽出し師匠別の一門メンバーの回数 DS を作成する (4)(3) を (2) の内容に即して JSON ファイルに書き出す (5)(4) の Circle Packing による表示 14

15 (1) および (2) の処理 (1)3 一門の落語家についての回数データ data_all (2) 一門の師匠とその階層構造を記した lists ( data_all から作成) 以上を永久 SASライブラリMYLIBに保存 15

16 (3) 師匠別の一門データの抽出 %let year=( 任意の年次の下 2 ケタ ); data dt&year; set mylib.data_all; where total&year^=. ; keep shi_01 shi_02 shi_03 name total&year; run; %macro minids(shisho,aname,i); data d_&aname; set dt&year; where shi_0&i="&shisho"; if shi_0%eval(&i+1)^= then delete; size=round(total&year); keep name size; run; %mend; data _null_; set mylib.lists; call execute ( %minids( shisho, aname, i ) ); run; shi_0* が抽出したい師匠名と一致しそれより右に shi_0* データの記載がない落語家のデータのみを抽出するというマクロ 16

17 (3) もう一つの書き方 %macro minids(shisho,aname,i); data d_&aname (REPLACE=YES REPEMPTY=NO); set dt&year; ( 中略 ) run; %mend; data _null_; set mylib.lists; call execute('%minids(' shisho ',' aname ',1)'); call execute('%minids(' shisho ',' aname ',2)'); call execute( %minids( shisho, aname,3) ); run; 変数 i を含まないデータを含む新しいデータセットで既存のデータセットを置き換え誤って作成された新しい空のデータセットで既存のデータセットが上書きされないようにするには REPLACE=YES および REPEMPTY=NO を設定します (SAS オンラインヘルプより ) 17

18 オプションなしオプションあり DS に変数追加指定した値でしか処理しない正しい DS をエラー DS が上書きしてしまうエラー DS の上書きを止めている 18

19 (4) ファイル書き出し -1 %macro export(shisho,aname); write open object; write values "name" "&shisho. 一門 "; write values "children"; write open array; export d_&aname; %mend; マクロに入れるのは繰り返しになる部分のうち write close; の直前までにするこれは 2 つの理由による 19

20 (4) ファイル書き出し -2 proc json out="c: Users ysakabe Desktop d3 data.txt" nosastags; write values "name" "flare"; write values "children"; write open array; %export( 小さん 5,kosan5) 階層化指示がプログラムでは処理できない %export( 小三治,kosanji) %export( 喜多八,kitahachi) write close; write close; write close; write close; %export( 扇橋,senkyo) write close; write close; %export( 小せん,kosen) write close; write close; write close; write close; %export( 彦六,hikoroku) ( 中略 ) write close; write close; %export( 圓生,ensho) ( 中略 ) write close; write close; write close; /* 全体のクローズ */ run; 第 2 位に位置する一門のデータ内容が 0 の場合は図が崩れてしまうので年次によって一門ごとの対処が必要 20

21 (5)Circle Packing 表示 (1)index.html 内の読み込み先のファイルを作成した data.txt に書き換える (2)Firefox にて index.html を表示以下で表示する図は 3 一門の登場回数合計を同じ大きさの円に描画しているため正確には年次によって登場回数 1 回当たりの円の半径は若干変わっているが大まかな横断比較は可能である例えば 1970 年の燕路 6 や文蔵の回数 ( 実数 ) は 2014 年の扇遊や三三の約 2 倍である 21

22 1970 年円の数が少なく総じて大きい 3 一門の大きさの差は小さい小さん一門彦六一門圓生一門 22

23 1990 年小さん一門が肥大化した圓生一門では圓窓一門が彦六一門では柳朝一門が勢力を伸ばしている小さん一門圓生一門彦六一門 23

24 2014 年小さな丸だらけになった = 落語家が増え過ぎている圓生一門では圓丈一門が最大勢力になったが円全体は明らかに彦六一門より小さくなった小さん一門圓生一門彦六一門 24

25 (5)Circle Packing 表示小さん志ん生彦六圓生金馬三平圓歌文楽圓蔵その他総計一門計のグラフで見るより情報が豊富 ~5 回 ~10 回 ~15 回 ~20 回 ~25 回 ~30 回 ~35 回 ~40 回 ~45 回 ~50 回 ~55 回 ~60 回それ以上

26 参考 : 表示される ERROR メッセージ (1)ERROR: JSON テキストがこの時点では完了しもう項目を挿入できない可能性があります途中のどこかで write close; が抜けている (2)ERROR: JSON テキストは完了していませんトップレベルの JSON 構造が閉じられていません最後の write close; だけが抜けている (3)ERROR: JSON ライタはこの時点でエラー状態にありもう項目を挿入できない可能性があります何らかの記載間違いがある ( 例 : テキストの打ち間違い write close; が多すぎる ) ただエラーを自動補完したかのようなメッセージが出ることがある記載間違いでも (2) が出るケースがあるなどエラー内容と表示の正確な関連は現在も引き続き確認中 26

27 今後の課題 (1) 同じ一門のデータを同じ場所に表示させるプログラムの開発 Circle Packing は自動的に大きなものから順に時計回りで表わ示するという調整機能を持っているようで見栄えはするが時系列わ表示にはいささか不都合 (2)(1) を連続表示できるプログラムの開発 (3)Web デザインおよび D3.js の操作のさらなる習熟参考文献インタラクティブデータビジュアライゼーション D3.js によるデータの可視化 Scott Murray ( 著 ), 長尾高弘 ( 翻訳 ) オライリージャパン,2014 年 27

Microsoft Word - sample_adv-programming.docx

Microsoft Word - sample_adv-programming.docx サンプル問題以下のサンプル問題は包括的ではなく必ずしも試験を構成するすべての種類の問題を表すとは限りません問題は個人が認定試験を受ける準備ができているかどうかを評価するためのものではありません SAS Advanced Programming for SAS 9 問題 1 次の SAS データセット ONE と TWO があります proc sql; select one.*, sales