Oracle Direct Seminar <Insert Picture Here> 全ての挙動は記録される! 高信頼性 JVM JRockit 日本オラクル株式会社
以下の事項は 弊社の一般的な製品の方向性に関する概要を説明するものです また 情報提供を唯一の目的とするものであり いかなる契約にも組み込むことはできません 以下の事項は マテリアルやコード 機能を提供することをコミットメント ( 確約 ) するものではないため 購買決定を行う際の判断材料になさらないで下さい オラクル製品に関して記載されている機能の開発 リリースおよび時期については 弊社の裁量により決定されます Oracle は 米国オラクル コーポレーション及びその子会社 関連会社の米国及びその他の国における登録商標または商標です その他の名称はそれぞれの会社の商標の可能性があります 1
アジェンダ サーバーサイド用途に最適化された高性能 JVM Oracle JRockit の内部動作を含む詳細と 障害をさかのぼって原因究明できるようにする JRockit R28 の新機能 Flight Recorder について デモを交えて解説します 1. JRockit Flight Recorder 概要 2. JRockit Flight Recorder デモ 3. JRockit Flight Recorder 詳細 2
アジェンダ 1. JRockit Flight Recorder 概要 2. JRockit Flight Recorder デモ 3. JRockit Flight Recorder 詳細 3
障害パターンと調査方法 ( 一般 ) 現象システム的原因調査手段問題点 システム停止 スローダウン マシンクラッシュ OS クラッシュ JVM クラッシュ Out of Memory GC 頻発 コアダンプ サーバログ GC ログ 落ちた瞬間の情報のみ ログに有益な情報が出ているとは限らない メモリの利用状況と GC 発生状況が分かるのみ 確固たる情報が得られず デバッグログを仕掛けたり 推測によるアプリ修正をして再現待ち 迷宮入り スタックスレッド スレッドダンプ 障害直前のダンプは大抵取れてない アプリ不具合 ソースコード 運用担当者が見ても分からない 4
障害パターンと調査手段 (JFR 利用時 ) 現象システム的原因調査手段 循環バッファ システム停止 スローダウン マシンクラッシュ OS クラッシュ JVM クラッシュ Out of Memory GC 頻発 スタックスレッド コアダンプ サーバログ GC ログ スレッドダンプ + JRockit Flight Recorder 調査に必要な情報が Flight Recorder で既に取得できているため 速やかに問題を特定し修正 アプリ不具合 ソースコード 5
JRockit Flight Recorder 障害対応を強力に支援する Oracle JRockit の新機能 [ これまでの障害対応の課題 ] ログでは足りない情報不足 ダウンや再起動による情報消失 [JRockit Flight Recorder による解決 ] 詳細情報を常時記録 自動ファイル出力機能 JRockit Flight Recorder Java EE/ISV アプリ 特徴 2 情報消失の防止 自動ファイル出力 メモリ利用率の増加傾向 記録されるデータ ( 例 ) メモリ内データの内訳と増加率 Oracle WebLogic Server GUI ツール DB 関連処理内訳と SQL 毎の負荷リスト Java スレッドの処理状況 Oracle JRockit 自動記録 常時記録 " 録りっぱなし " 特徴 3 アプリ修正不要 特徴 1 画期的な低負荷技術 その他多数
これまでの障害対応ソリューションとの違い 1." 録りっぱなし ": 独自の低負荷技術により本番環境での常時記録を実現 ログ並みの低負荷で Java プロファイラ並みの情報量 JRockit の内部機構 ( 自己診断機能 ) を利用した低負荷記録 2. 情報消失を防ぐファイル出力機能 エラーや性能劣化などをトリガーに記録情報を自動ファイル出力 ( リモートコマンドやツールから手動でファイル出力することも可能 ) 3. 適用が容易 別モジュールのインストール等不要 アプリケーション改変不要 性能劣化 : 小 JRockit Flight Recorder ログ ダンプ等 情報量 : 多 情報量 : 尐 Java プロファイラ 性能劣化 : 大
JRockit Flight Recorderが提供する価値エンドユーザーにとっての価値 1. 機会損失の最小化 問題の迅速 確実な解決と再発防止 2. 社会的信用 ブランド価値の維持 説明責任と再発防止 システムインテグレーターにとっての価値 1. 障害リスクと対応コストの最小化 本番環境のデータを常時記録し迅速な対応を実現 2. 顧客からの信頼度向上 説明責任を果たすための 事実に基づく原因分析
システム ライフサイクル管理における JRockit Flight Recorder JRockit Flight Recorder 問題解析 対処 迅速かつ正確な障害対応 再発防止と説明責任 安定 耐障害 Application Testing Suite 品質管理 Grid Control 運用管理 監視
JRockit Flight Recorder の活用例 1. 障害解析のために利用 障害発生時にダンプされた情報をもとに原因を調査 2. 性能劣化など SLA 違反への対応 性能劣化などのSLA 違反をトリガーにダンプを出力 間欠的に発生する事象の把握に有効 レスポンスタイム SLA 境界 ダンプを解析 時間 SLA 違反をトリガーにファイル出力
アジェンダ 1. JRockit Flight Recorder 概要 2. JRockit Flight Recorder デモ 3. JRockit Flight Recorder 詳細 11
ライブセット増加により OutOfMemoryError 発生
レコーディング期間中のヒープ内のオブジェクト占有率と増加率
当該オブジェクトをヒープに割り当てた箇所を特定
レコーディング期間中のスレッド一覧 灰色の箇所は Thread Parked( 待機中 )
WebLogic タブを選択すると Servlet JDBC などの処理状況が併せて表示される Servlet JavaVM JDBC
Thread Parked を発生させているのはどこかトレースすることも可能
ある時点及びその前後の GC 発生傾向
JTA JMS 及び関連処理の前後関係と所要時間 Servlet Java JTA JDBC JAXWS EJB
JTA JMS 及び関連処理の前後関係と所要時間スレッドグラフ ( 拡大 ) 1 2 3 4 5 6 7 8 1Servlet: 実行 2JTA: トランザクション開始 3JDBC: コネクション取得 4JDBC: コネクション準備 (Prepare) 5JDBC: SQL 実行 6JDBC: コネクションClose 7JTA: トランザクションCommit 8JDBC: トランザクションCommit 実行した SQL も併せてレコーディング
アジェンダ 1. JRockit Flight Recorder 概要 2. JRockit Flight Recorder デモ 3. JRockit Flight Recorder 詳細 21
JRockit Flight Recorder のアーキテクチャ循環バッファー Event 新しいデータ Thread local Buffer Global Buffer Disk File 循環バッファー イン メモリ あふれたら移動 あふれたら移動 古いデータ 循環バッファー Flight Recorder が記録される領域 インメモリもしくは インメモリ + ディスクの組み合わせの両方の構成が可能 Thread Local Buffer 各スレッドが持つローカルバッファ領域 新規イベントはここに格納される デフォルトは 5KB/Thread 変更可能 Global Buffer Thread Local Buffer があふれた場合に イベントが格納される領域 デフォルトは 452KB 22 個 =10MB 変更可能 Disk File Global Buffer からあふれた際に記録される Disk ファイル Chunk 単位に分割されて格納される ( デフォルトの Max Chunk sise=12mb) デフォルトはオフ Disk 上のデータの生存期間は Max Size もしくは Max Age により決まる 22
JRockit Flight Recorder のアーキテクチャ記録の開始とダンプ WebLogic Server Family JRockit JVM JRockit Flight Recorder Runtime 循環バッファー WLDF WLST JRockit Family 起動引数 診断ボリュームの設定による Flight 記録の開始ルールベースのダンプ 記録の開始記録中情報の確認ダンプ 記録の開始経過時間後のダンプ予期せぬ例外契機のダンプ ダンプ *.jfr 解析 jrcmd JRockit Mission Control 記録の開始記録中情報の確認ダンプ 記録の開始記録中情報の確認ダンプダンプファイルの解析 jfs の作成ウィザード 23
Flight 記録操作方法 JRockit 起動オプションによる記録の開始 jrmcd による記録の操作 JRockit Mission Control による記録の操作 WLDF 診断ボリュームによる Flight 記録の開始 24
JRockit 起動オプションによる記録の開始 JRockit 起動オプションでの指定 有効化オプション -XX:[+ -]FlightRecorder + で有効化 / -で無効化( デフォルトは無効 ) JFR 設定 ( 循環バッファーの設定 デフォルト記録などの設定 ) -XX:FlightRecorderOptions=param1=value1[,param2=value2] デフォルト記録の開始 -XX:FlightRecorderOptions=defaultrecording=true デフォルト記録はデフォルトでoff カスタム記録の開始 -XX:StartFlightRecording=parameter1=value1[,parameter2=value2] 25
( ご参考 ) -XX:FlightRecorderOptions パラメータ説明デフォルト defaultrecording=true false デフォルト記録を有効にするかどうか FALSE disk=true false デフォルト記録をディスクに書き込むかどうか FALSE globalbuffersize=size グローバルバッファーサイズの指定 452 KB numglobalbuffers=num グローバルバッファーサイズの数の指定 22 個 maxage=time デフォルト記録のディスクデータの最大存続期間 Disk=trueの場合のみ有効 15 分 maxchunksize=size Flight 記録の最大チャンクサイズ ディスクファイル 1MB はこの容量で分割すべてのFlight 記録で有効 maxsize=size デフォルト記録で書き込まれるディスクファイルの Unbound 最大容量 Disk=trueの場合のみ有効 repository=file location ディスクファイルの出力先ディレクトリ java.io.tmpdir ディレクトリ yyyy_mm_dd_hh_mm_ss_pid フォーマットでディレクトリが作られその配下にファイル作成 settings=file location イベント設定ファイルの指定 (.jfs) jre/lib/jfr/default.jfs threadbuffersize=size スレッドごとのローカルバッファーサイズの指定 5 KB 設定例 ) java -XX:+FlightRecorder -XX:FlightRecorderOptions=disk=true,maxchunksize=10M MyApp 26
( ご参考 ) -XX:StartFlightRecording パラメータ説明デフォルト compress=true false Flight 記録ファイル (.jfr) をgzip 圧縮するかどうか filenameの設定をしている場合のみ有効 FALSE defaultrecording=true デフォルト記録を有効にするかどうか FALSE false name/duration/filename/compressと併用はでき ない delay=time ランタイムがFlight 記録を開始するまでの待機時 0 間 duration=time Flight 記録を記録し続ける時間 制限なし filename=name Flight 記録ファイル (.jfs) のファイル名 指定しない場合 jfsファイルは作られない name=identifier Flight 記録を識別するための名前 Recording X ( 例 :Recording 1) filenameに指定がある場合は その名称 maxage=time ディスクファイル ( ) にイベントが保存されている 制限なし 最大時間 maxsize=size ディスクファイル ( ) の最大容量 制限なし settings=eventfile イベント設定ファイルの指定 XX:FlightRecorderOptionsの settingパラメータの設定 ) XX:StartFlightRecording を指定する場合は ディスクファイルは必ず作成されます 設定例 ) -XX:StartFlightRecording=delay=120s,duration=60s,name=MyRecording,filename=C: tmp myrecording.jfr,settings=profile 27
jrcmd による記録の操作 1 Flight 記録の開始 jrcmd <pid> start_flightrecording param1=value1 [param2=value2] <pid>: JRockit プロセスID <param>: -XX:StartFlightRecording と同様のパラメータ ただしパラメータ区切りは半角スペース例 ) jrcmd <pid> start_flightrecording delay=120s duration=60s name=myrecording Flight 記録の停止 jrcmd <pid> stop_flightrecording param1=value1 [param2=value2] <pid>: JRockit プロセスID <param>: 次ページ参照例 ) jrcmd <pid> stop_flightrecording recording=2 copy_to_file=test.jfr 28
jrcmd による記録の操作 2 Flight 記録の情報参照 jrcmd <pid> check_flightrecording param1=value1 [param2=value2] <pid>: JRockit プロセスID <param>: 次ページ参照 例 ) jrcmd <pid> check_flightrecording recording=2 verbose=true Flight 記録のダンプ jrcmd <pid> dump_flightrecording param1=value1 [param2=value2] <pid>: JRockit プロセスID <param>: 次ページ参照 例 ) jrcmd <pid> check_flightrecording recording=2 verbose=true 29
( ご参考 ) jrcmd パラメータ 1 stop_flightrecording パラメータ パラメータ説明デフォルト name=<string> Flight 記録の名称 recording=<id> Flight 記録 ID discard=<true false> trueの設定した場合 Flight 記録データを false 破棄する copy_to_file=<string> Flight 記録をダンプして 指定したファイル (.jfr) に出力 ディレクトリパスを含めたファイル名を指定 compress_copy=<true false>.jfrファイルをgzip 圧縮するかどうか false 30
( ご参考 ) jrcmd パラメータ 2 check_flightrecording パラメータ パラメータ 説明 デフォルト name=<string> Flight 記録の名称 recording=<id> Flight 記録 ID verbose=<true false> Verbose 出力の有効化 false dump_flightrecording パラメータ パラメータ説明デフォルト name=<string> Flight 記録の名称 recording=<id> Flight 記録 ID copy_to_file=<string> Flight 記録をダンプして 指定したファイル (.jfr) に出力 ディレクトリパスを含めたファ イル名を指定 compress_copy=<true false>.jfrファイルをgzip 圧縮するかどうか false 31
JRockit Mission Control による記録の操作 1 対象 JRockit プロセスを右クリック テンプレート : 取得するイベントに応じて 4 種類用意 ( 後述参照 ) フライト記録の開始 32
JRockit Mission Control による記録の操作 2 対象 JRockit プロセスを右クリック 記録の表示 対象記録を右クリック 編集 / ダンプ / 停止操作が可能 33
WLDF 診断ボリュームによる Flight 記録の開始 WebLogic Server が実行時に JRockit Flight Recorder 用に生成するイベントの量を制御可能 明示的に構成された WLDF の診断モジュールには影響しない ドメイン > 環境 > サーバ > 構成 > 全般 > 診断ボリューム オフ 低 中 高のいずれかを指定 ( デフォルトはオフ )
Flight Recorder で記録するイベント量の設定 JRockit Mission Control 提供のテンプレートでの指定 (4 段階 ) リアル タイム ( 組込み ) デフォルトのレコーディング 通常のプロファイリング リアルタイム ( 組込み ) + メモリアロケーション ロックを含むプロファイリング 通常のプロファイリング + ロック 例外を含むプロファイリング 通常のプロファイリング + 例外 WebLogic の WLDF 診断ボリューム での指定 (4 段階 ) Off 取得しない ( デフォルト ) Low JRockit リアル タイム ( 組込み ) +WebLogic イベント (Low) Medium Low +WebLogic イベント (Medium) High Medium +WebLogic イベント (High) 35
( ご参考 ) Flight Recorder で記録できる情報 分類 OS Java VM Java App WebLogic JRockit JRMCでの指定 WLSでの指定 取得項目デフォリアルロック例外通常ルトタイム含む含む Off Low Middle High コンテキスト スイッチ CPUビジー 物理メモリ使用状況 環境変数の情報 自 JVM 以外のプロセスの情報 オブジェクト アロケーション ガーベッジ コレクション 空きメモリー Nativeコード最適化 自 JVMのCPUビジー システム プロパティ クラス ロード JITコンパイル クラス別ヒープ利用状況 ファイル / ソケットの読み書き ロック獲得 / 待機 イベント待機 例外 Connector Servlet + EJB + JDBC + Web Service JTA
( ご参考 ) JFR のオーバヘッド WLDF 診断ボリューム 診断ボリューム : 高でも オフと比べて数パーセントのオーバヘッドのみ この結果は弊社環境での測定値です Intel(R) Core(TM)2 CPU 2.13GHz Linux 2.6.9-67.0.0.0.1.ELsmp WebLogic10.3.3 にバンドルされている JRockit 診断ボリューム : 高 -Xmx1024m( その他 JVM 設定はデフォルト設定 ) アプリケーションは WebLogic のサンプルに付属している medrec アプリケーション一般的な検索 一覧 詳細の画面遷移シナリオ負荷の与え方 :OracleATS でシンクタイム 0 で同時ユーザ数 30 で繰り返し処理 37
( ご参考 ) サイジング サイジング観点では Flight 記録を Disk に書き込む際のディスク容量のサイジングは必要 運用上 どれくらいの期間の記録を保持すべきか およびイベントの発生量 (= システムの負荷 ) で ディスク容量は決まる 参考値 ) イベントあたり 50Byte~150Byte( イベントの種類や スタックトレース有無 対象のクラス名の長さなどにより変動 ) 約 120 ページ数 / 秒のトランザクションで負荷を与え 3 分間フライトレコーダーを記録しつづけてダンプをとった場合の.jfr のサイズが約 4MBytes ( ) 上記負荷で一日記録をし続けた場合に必要となるディスク領域は 4* (60/3) *24= 約 1.92GBytes この結果は弊社環境での測定値です診断ボリューム : 高 -Xmx1024m( その他 JVM 設定はデフォルト設定 ) 診断ボリューム : 高アプリケーションは WebLogic のサンプルに付属している medrec アプリケーション一般的な検索 一覧 詳細の画面遷移シナリオ負荷の与え方 :OracleATS でシンクタイム 0 で同時ユーザ数 30 で繰り返し処理 38
Flight 記録画面の特徴範囲選択 範囲選択により注目したい時間帯に絞り込んだ参照が可能すべての画面で利用可能 ズームイン / ズームアウト 範囲のスライド 39
Flight 記録画面の特徴操作セット 1 時系列上 操作セットのみ色が変更して表示 注目したいイベントを操作セットに追加 40
Flight 記録画面の特徴操作セット 2 特定イベントの ECID に一致する操作設置を追加すると 関連するイベントのみが抽出される あるサーブレットの処理に関連する ECID を操作セットに追加すると関連する EJB 処理なども操作セットに追加される 41
Flight 記録画面の特徴イベント - 概要 各プロデューサーが記録したイベントのサマリー イベント毎のサマリー イベント タイプ画面で表示したいイベントを選択 42
Flight 記録画面の特徴イベント - ログ 時系列に沿った個々のイベント表示 選択したイベントノ詳細 43
Flight 記録画面の特徴イベント - グラフ スレッドごとのイベントグラフ表示 ズーム可能 44
是非 Flight Recorder を使ってみてください!! JFR 評価版ダウンロード JRockit R28.0(Flight Recorder を搭載した JRockit) http://www.oracle.com/technology/global/jp/software/products/jrockit/index.html WebLogic Server 10.3.3(JRockit R28.0 を同梱した WebLogic Server) http://www.oracle.com/technology/global/jp/software/products/ias/htdocs/wls_main.ht ml Flight Recorder 関連マニュアル Oracle JRockit Flight Recorder Runtime Guide http://download.oracle.com/docs/cd/e15289_01/doc.40/e15070/toc.htm Using WLDF with Oracle JRockit Flight Recorder http://download.oracle.com/docs/cd/e14571_01/web.1111/e13714/using_flightrecord er.htm JRockit -XX Command-Line Option http://download.oracle.com/docs/cd/e15289_01/doc.40/e15062/optionxx.htm JRMC Eclipse Update Site http://www.oracle.com/technology/software/products/jrockit/missioncontrol/updates/base /4.0.1/eclipse/ 45
イベントのお知らせ 2010 年 8 月 19 日 ( 木 ) 13:30~18:30 @ 目黒雅变園 Java と Solarisの最新情報をお知らせします 詳しくは http://www.oracle.co.jp/events/jpm100819/ もしくは http://bit.ly/orasun0819 まで
OTN ダイセミでスキルアップ!! 一般的な技術問題解決方法などを知りたい! セミナ資料など技術コンテンツがほしい! Oracle Technology Network(OTN) を御活用下さい http://otn.oracle.co.jp/forum/category.jspa?categoryid=4 一般的技術問題解決には OTN 掲示版の ミドルウェア をご活用ください OTN 掲示版は 基本的に Oracle ユーザー有志からの回答となるため 100% 回答があるとは限りません ただ 過去の履歴を見ると 質問の大多数に関してなんらかの回答が書き込まれております http://www.oracle.com/technology/global/jp/ondemand/otn-seminar/index.html 過去のセミナ資料 動画コンテンツは OTN の OTN セミナーオンデマンドコンテンツ へ ダイセミ事務局にダイセミ資料を請求頂いても お受けできない可能性がございますので予めご了承ください ダイセミ資料は OTN コンテンツオンデマンドか セミナ実施時間内にダウンロード頂くようお願い致します
OTN セミナーオンデマンドコンテンツ ダイセミで実施された技術コンテンツを動画で配信中!! ダイセミのライブ感はそのままに お好きな時間で受講頂けます OTN オンデマンド 掲載のコンテンツ内容は予告なく変更になる可能性があります 期間限定での配信コンテンツも含まれております お早めにダウンロード頂くことをお勧めいたします
オラクルクルクルキャンペーン あの Oracle Database Enterprise Edition が超おトク!! Oracle Database のライセンス価格を大幅に抑えて ご導入いただけます 多くのお客様でサーバー使用期間とされる 5 年間にライセンス期間を限定 期間途中で永久ライセンスへ差額移行 5 年後に新規ライセンスを購入し継続利用 5 年後に新システムへデータを移行 Enterprise Editionはここが違う!! 圧倒的なパフォーマンス! データベース管理がカンタン! データベースを止めなくていい! もちろん障害対策も万全! 詳しくはコチラ http://www.oracle.co.jp/campaign/kurukuru/index.html お問い合わせフォーム http://www.oracle.co.jp/inq_pl/inquiry/quest?rid=28
あなたにいちばん近いオラクル Oracle Direct まずはお問合せください Oracle Direct 検索 システムの検討 構築から運用まで ITプロジェクト全般の相談窓口としてご支援いたします システム構成やライセンス / 購入方法などお気軽にお問い合わせ下さい Web 問い合わせフォームフリーダイヤル 専用お問い合わせフォームにてご相談内容を承ります http://www.oracle.co.jp/inq_pl/inquiry/quest?rid=28 フォームの入力には Oracle Direct Seminar 申込時と同じログインが必要となります こちらから詳細確認のお電話を差し上げる場合がありますので ご登録さ れている連絡先が最新のものになっているか ご確認下さい 0120-155-096 月曜 ~ 金曜 9:00~12:00 13:00~18:00 ( 祝日および年末年始除く )
以上の事項は 弊社の一般的な製品の方向性に関する概要を説明するものです また 情報提供を唯一の目的とするものであり いかなる契約にも組み込むことはできません 以下の事項は マテリアルやコード 機能を提供することをコミットメント ( 確約 ) するものではないため 購買決定を行う際の判断材料になさらないで下さい オラクル製品に関して記載されている機能の開発 リリースおよび時期については 弊社の裁量により決定されます Oracle と Java は Oracle Corporation 及びその子会社 関連会社の米国及びその他の国における登録商標です 文中の社名 商品名等は各社の商標または登録商標である場合があります