ひまわり 8 号 リアルタイムデータ 公 開 データダウンロード 手 順 について NICT サイエンスクラウド 運 営 事 務 局 2015.03.20
目 次 1 ひまわり 8 号 データについて... 1 1.1 データダウンロードについて... 1 1.2 データ 公 開 形 式 について... 2 1.3 データの 展 開 について... 3 2 データダウンロード 手 順 について... 4 2.1 ブラウザ 経 由 のアクセス... 4 2.2 コマンドラインベースのアクセス... 5 2.3 FTP クライアントアプリケーション(WinSCP)によるアクセス... 7 3 お 問 い 合 わせ... 14
1 ひまわり 8 号 データについて 1.1 データダウンロードについて NICT サイエンスクラウドでは ひまわり 8 号 のリアルタイムデータを 以 下 の FTP サ ーバ 上 で 公 開 しています FTP サーバへのアクセスには NICT サイエンスクラウドのア カウント 申 請 後 に 発 行 されるアカウントとパスワードが 必 要 となります サーバ 名 :sc-trans.nict.go.jp プロトコル:FTP 上 記 FTP サーバには 以 下 の 形 式 でアクセスすることができます 詳 細 な 手 順 は 2 データダウンロード 手 順 について をご 覧 ください ブラウザ 経 由 のアクセス Windows, Mac, Linux Web ブラウザから FTP サーバへアクセスします 1 ファイルのみをダウンロード する 場 合 や 後 述 するコマンドライベースのアクセス 時 のパスの 確 認 などにご 利 用 ください コマンドラインベースのアクセス Windows(Cygwin), Mac, Linux コマンドラインから wget コマンドを 用 いてアクセスします 複 数 のデータを 一 括 でダウンロードしたい 場 合 にご 利 用 ください FTP クライアントアプリケーション(WinSCP)によるアクセス Windows, Mac, Linux FTP クライアントアプリケーションを 用 いてアクセスします GUI 上 でデータを ダウンロードしたい 複 数 のデータを 一 括 でダウンロードしたい 場 合 にご 利 用 ください 本 マニュアルでは Windows で WinSCP を 用 いたダウンロード 手 順 を ご 紹 介 します なお WinSCP 以 外 の FTP クライアントアプリケーションからも アクセスすることができます 1
1.2 データ 公 開 形 式 について FTP サーバでは 以 下 のディレクトリ 構 成 でデータを 公 開 しています ここで 各 インデックスが 示 すデータ 種 別 は 以 下 の 通 りです [HISD]:ひまわり 標 準 データ [Hsfd]:フルディスク [Hsjp]: 日 本 域 観 測 [Hsr3]: 機 動 観 測 域 [HINC]:NetCDF データ (フルディスクはなし) [Ncjp]: 日 本 域 観 測 [Ncr3]: 機 動 観 測 域 [HIPI]:カラー 画 像 データ [Pifd]:フルディスク [Pijp]: 日 本 域 観 測 [Pir3]: 機 動 観 測 域 それぞれのディレクトリ 内 では [yyyy]は 西 暦 ( 半 角 英 数 字 4 桁 ) [MM]は 月 ( 半 角 英 数 字 2 桁 ) [dd]は 日 ( 半 角 英 数 字 2 桁 ) [HH]は 時 ( 半 角 英 数 字 2 桁 ) [mm]は 分 ( 半 角 英 数 字 2 桁 ) [B01...B16]は 観 測 バンドを 示 しています 観 測 バンドの 詳 細 は 気 象 衛 星 セ ンターが 公 開 している ひまわり 標 準 データ 利 用 の 手 引 き をご 参 照 ください [\himawari_real\himawari-8\] [HISD] [Hsfd] [yyyymm] [dd] [yyyymmddhh00] [00] [B01] HS_H08_yyyyMMdd_HHmm_B01_FLDK_R10_S0101.DAT.bz2 HS_H08_yyyyMMdd_HHmm_B01_FLDK_R20_S0101.DAT.bz2 [B02] ( 中 略 ) 2
[B15] [B16] [10] [20] [30] [40] [50] [Hsjp] ( 中 略 )( 例 )HS_H08_yyyyMMdd_HHmm_B01_JP03_R10_S0101.DAT.bz2 [Hsr3] ( 中 略 )( 例 )HS_H08_yyyyMMdd_HHmm_B01_R303_R10_S0101.DAT.bz2 [HINC] [Ncjp] ( 中 略 )( 例 )NC_H08_yyyyMMdd_HHmm_B01_JP03_R10.nc.bz2 [Ncr3] ( 中 略 )( 例 )NC_H08_yyyyMMdd_HHmm_B01_R303_R10.nc.bz2 [HIPI] [Pifd] ( 中 略 )( 例 )PI_H08_yyyyMMdd_HHmm_TRC_FLDK_R10_PGPFD.png [Pijp] ( 中 略 )( 例 )PI_H08_yyyyMMdd_HHmm_TRC_JP04_R10_PLLJP.png [Pir3] ( 中 略 )( 例 )PI_H08_yyyyMMdd_HHmm_TRC_R303_R10_PLLTG.png 1.3 データの 展 開 について ひまわり 標 準 データと NetCDF データファイルは bzip2 形 式 で 圧 縮 されています bunzip2 コマンド(bunzip2 d {ファイル 名 })もしくは 圧 縮 解 凍 ソフト(Lhaplus な ど)を 用 いて 展 開 してください 展 開 すると ファイルサイズが 2~4 倍 程 度 ( 圧 縮 率 はファイルごとに 異 なります)になりますので ディスクの 空 き 容 量 にご 注 意 ください 3
2 データダウンロード 手 順 について 2.1 ブラウザ 経 由 のアクセス Web ブラウザから FTP サーバにアクセスし データのダウンロードやパスの 確 認 など を 行 います Web ブラウザを 起 動 し URL に ftp://sc-trans.nict.go.jp/himawari_real/himawari-8/ を 入 力 してください 上 記 URL にアクセスすると アカウント 名 とパスワードを 尋 ねるポップアップが 表 示 さ れますので 発 行 されたアカウント 名 とパスワードを 入 力 してください Web ブラウザには Firefox のご 利 用 を 推 奨 します Google Chrome や Internet Explorer Safari では 認 証 エラーが 発 生 することがあります 4
2.2 コマンドラインベースのアクセス 指 定 した 条 件 に 合 致 するデータをコマンドラインベースで 一 括 ダウンロードする 場 合 に 使 用 します Linux/Mac/Windows(Cygwin)のターミナルでダウンロードするディレクトリに 移 動 後 wget コマンドを 使 用 します 以 下 が wget の 主 要 なオプションです -r:ディレクトリを 再 帰 的 に 取 得 します -N: 取 得 済 みのファイルはスキップします -nh:ローカルに 保 存 する 際 に host 名 部 分 を 除 いてディレクトリを 作 成 します -l 数 字 : 指 定 したパスからたどる 階 層 数 を 指 定 します デフォルトは 5 HISD で パス 指 定 する 場 合 は -l 8 が 必 要 です -A ファイル 名 :パターンマッチ(ワイルドカード)でファイル 名 を 指 定 します 以 下 にご 利 用 のケースに 応 じた wget コマンドの 使 用 例 を 示 します {user} {password}は 利 用 申 請 後 に 発 行 されたアカウント 名 パスワードを 示 します 以 下 は 全 てひまわり 標 準 データの 場 合 です NetCDF データ カラー 画 像 データを 取 得 する 場 合 は それぞれパスを 読 み 替 えてください フルディスクのデータを 全 てダウンロードする 場 合 $ wget -r -N nh l 7 ftp://{user}:{password}@sc-trans.nict.go.jp/ himawari_real/himawari-8/hisd/hsfd/ 日 本 域 のデータを 全 てダウンロードする 場 合 $ wget -r -N nh l 7 ftp://{user}:{password}@sc-trans.nict.go.jp/ himawari_real/himawari-8/hisd/hsjp/ 指 定 した 日 にちのデータをダウンロードする 場 合 $ wget -r -N -nh -l 8 -A HS_*20150103*.bz2 ftp://{user}:{password}@sc- trans.nict.go.jp/himawari_real/himawari-8/hisd/ 5
12 時 00 分 のデータのみダウンロードする 場 合 $ wget -r -N -nh -l 8 -A HS_*2015*_1200_*.bz2 ftp://{user}:{password}@sc- trans.nict.go.jp/himawari_real/himawari-8/hisd/ 指 定 したバンド 番 号 ( 例 B01)のデータをダウンロードする 場 合 $ wget -r -N -nh -l 8 -A HS_*2015*B01*.bz2 ftp://{user}:{password}@sc- trans.nict.go.jp/himawari_real/himawari-8/hisd/ フルディスクの 指 定 した 日 にち バンド 番 号 のデータをダウンロードする 場 合 $ wget -r -N -nh -l 7 -A HS_*20150103*B01*.bz2 ftp://{user}:{password}@sc- trans.nict.go.jp/himawari_real/himawari-8/hisd/hsfd/ wget コマンドでは 空 のディレクトリも 取 得 してしまうため 空 ディレクトリが 不 要 な 場 合 は 以 下 のコマンドを 実 行 して 下 さい {dir}はダウンロードしたディレ クトリパスを 表 します $ cd {dir} $ find./ -type d -empty -delete 6
2.3 FTP クライアントアプリケーション(WinSCP)による アクセス FTP クライアントアプリケーションを 用 いてアクセスを 行 います ここでは WinSCP を 用 いた 場 合 の 利 用 手 順 をご 紹 介 します WinSCP は 以 下 よりダウンロード インストー ルしてください http://winscp.net/eng/index.php 以 下 の 手 順 にてダウンロードを 行 います 以 下 は 全 てひまわり 標 準 データの 場 合 です NetCDF データ カラー 画 像 データを 取 得 する 場 合 は それぞれパスを 読 み 替 えてください 1. WinSCP のログイン 設 定 を 行 う ( 初 回 のみ) WinSCP から FTP サーバへログインするための 設 定 を 行 います WinSCP 起 動 後 以 下 の 手 順 で 設 定 を 実 施 してください 一 度 設 定 を 保 存 すると 次 回 のログインでも 同 じ 設 定 が 利 用 可 能 です 7
8
2. WinSCP から FTP サーバにログインする WinSCP から FTP サーバ(sc-trans.nict.go.jp)にログインします 9
3. 任 意 のファイルをダウンロードする WinSCP では 下 記 のようにドラッグ&ドロップでデータをダウンロードすることが 可 能 です 10
4. 条 件 を 指 定 してデータを 一 括 ダウンロードする WinSCP では 下 記 の 手 順 で 条 件 を 指 定 してのデータダウンロードが 可 能 です 11
以 下 に WinSCP を 用 いた 利 用 ケースごとの 条 件 指 定 例 を 示 します フルディスクのデータを 全 てダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/hsfd/ File mask: 指 定 なし 日 本 域 のデータを 全 てダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/hsjp/ File mask: 指 定 なし 指 定 した 日 にちのデータをダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/ File mask:hs_*20150103*.bz2 12 時 00 分 のデータのみダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/ File mask:hs_*2015*_1200_*.bz2 指 定 したバンド 番 号 ( 例 B01)のデータをダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/ File mask:hs_*2015*b01*.bz2 12
フルディスクの 指 定 した 日 にち バンド 番 号 のデータをダウンロードする 場 合 Remote directory:/himawari_real/himawari-8/hisd/hsfd/ File mask:hs_*20150103*b01*.bz2 WinSCP では 空 のディレクトリも 取 得 してしまうため 空 ディレクトリが 不 要 な 場 合 はコマンドプロンプトから 以 下 のコマンドを 実 行 してください {dir}はダウン ロードしたディレクトリパスを 表 します cd {dir} for /f %d in ('dir. /ad /b /s') do rd /q %d 2 13
3 お 問 い 合 わせ ご 質 問 ご 不 明 な 点 がございましたら NICT サイエンスクラウド 運 営 事 務 局 までお 問 い 合 わせください メールアドレス:osn-system@ml.nict.go.jp URL:http://sc-web.nict.go.jp/sc_staff.html 以 上 14