Hundreds of Thousands of Customers in 190 Countries

Size: px

Start display at page:

Download "Hundreds of Thousands of Customers in 190 Countries"

れんまとこたに
5 years ago
Views:

1 ハイブリッド構成を支える AWS テクノロジー荒木靖宏プリンシパルソリューションアーキテクト玉川憲技術統括本部本部長

2 Wifi は全セッション会場展示会場にてご利用いただけます SSID: awssummit #awssummit

3 自己紹介名前荒木靖宏所属アマゾンデータサービスジャパン株式会社プリンシパルソリューションアーキテクト ID Twitter: ar1 好きな AWS サービス Amazon Virtual Private Cloud AWS Direct Connect

4 なぜハイブリッド環境なのか? 既存のアセットを最大限に活かす AWS のメリットを享受する

5 ハイブリッド構成

6 開発での利用パターンバーチャルマシン環境の持ち運び本番再現性開発ステージング

7 DR での利用パターン Internet 誘導切替データ同期本番データベース同期 DR

8 複数のシステムがハイブリッドでやりとり移行 : システム移行データ移行切替業務 A VPN システム間連携業務 B 監視制御

9 1 つのシステムがハイブリッドレイテンシバースト対応帯域バッチ

10 ハイブリッド構成例 Internet 拠点間広域接続網 Internet データセンター本番 VM VM Storage Gateway データ AZ:A 本番 Private Segment AZ:B Public Segment VMware 社内 LAN ステージング Private Segment Public Segment AD DNS Router 運用 LAN 開発 Private Segment Public Segment アクセスチェック Hybrid 監視 Manage ment Console 運用機能の一元化 Operation Terminal 監視 VM 移行ボリュームコピー

11 ハイブリッドシステムへの移行に考えることインフラデータ : 移行とバックアップ運用リージョン設計対象アプリ決定 VPC 設計インターネット VPN 専用線ブロックデバイスファイル VM DB ユーザ管理機器変更管理監視ログステージング環境テストユーザ誘導

12 VPC 内のシステム構築のためにネットワーク分割のベストプラクティスログインする必要のない ELB,RDS, Elasticache 用のサブネット目的別には分けずに /22 や /24 などわかりやすく大きめのネットワークを指定するログインする必要のある EC2 は目的別に AWS の API 使用にはインターネット接続が必要 EIP を使用 NAT インスタンスを使用オンプレ側インターネット線の使用 AWS のリソースは原則ホスト名を使ってアクセス

13 AWS Direct Connect AWS とデータセンターオフィスコロケーション環境間を専用線で接続特徴ネットワークのコスト削減スループット向上インターネットベースの接続より帯域が安定専用線サービス AWS Cloud EC2, S3 などの Public サービスお客様 Amazon VPC コロケへの専用線引き込みと違ってサーバ設置場所を限定しない相互接続ポイントはサーバの置かれた建屋とは独立した場所

14 CloudHub の Hub としての VPC 本社 Virtual Gateway AWS Direct Connect VPN Connection Router Virtual Private Cloud

15 ファイルコピー S3へファイル転送高速化のためにバケットのリージョンを確認数十 MBを超えるならばマルチパート化並列転送数十 TPSを超えるならばキー名を分散化無駄なオペレーションは使わないインスタンスへ任意のプロトコル任意のアプリケーションを利用可転送高速化プログラムも Tsunami-UDP Aspera Skeed

16 ブロックデバイスコピー S3 へ AWS Storage Gateway インスタンスへ DRBD 分割構成が必要な場合キャッシュ型 :32TB/ ボリューム保管型 :1TB/ ボリューム DRBD Proxy 高遅延低速度の場合

17 Storage Gateway を使ったボリュームコピー VM i-scsi Storage Gateway VM Attach& Mount VMware SAN 接続差分 snapshot EBS 作成 ( 全分 ) Upload Buffer 差分抽出 Volume Storage 差分 snapshot Storage Gateway Internet Management Console /API 端末 vcenter&os Operation Terminal

18 VM Import/Export を使ったシステムコピー VM Attach& Mount VMware SAN 接続 VMDK Volume Storage Launch VM Import API 実行 VMDK Vcenter から export/import Internet Management Console /API 端末 vcenter&os Operation Terminal

19 データベースの同期ファイルブロックバーチャルマシンのコピーでは対応できないアプリケーションレイテンシやセキュリティが問題になることも MySQL Slave MySQL Master Internet

20 転送最適化サービスを使った例西海岸東海岸データ圧縮重複排除 TCP 最適化伝送路暗号化 OFAではCloudOptを利用 Market Place でAMIも CloudOpt ( 時間課金有り ) Silver Peak (BYOL)

21 CloudOpt の動作イメージ (MySQL のサンプル ) MySQL Slave MySQL Master Region AWS Cloud Internet Region

22 AWS の提供する運用支援サービスマネージメント監視と通知ログ AWS Identity and Access Magement AWS OpsWorks AWS Trusted Advisor AWS Management Console 各種言語用 SDK Amazon Cloudwatch Amazon SNS AWS Data Pipeline

23 IAM によるユーザ権限管理 API やマネジメントコンソールからのアクセスに対して権限をチェック全操作可能 S3 はすべて操作可能 S3 参照だけ

24 IAM security token service (STS) 一時期的 (60 分 ) なユーザ権限を与える AD や LDAP 情報と連携

25 サードパーティー (APN ISV) の提供する運用支援サービスマネージメント監視ログ Puppet Labs (puppet) Opscode (chef) AppDynamics new relic AppNeta splunk sumologic loggly treasure data

26 VPC によるステージング環境テスト EIP 以外の設定は本番と同様にできる IP アドレスインスタンスタイプ CloudFormation AWS::CloudFormation::Stack をつかった分割も有効 Outputs にテスト目的情報を出力

27 Route53 の重み付け切り替え新システム重み付け配分現行システム

ハイブリッド構成例 Internet 拠点間広域接続網 Internet AZ:A AZ:B 本番 Public Segment Private Segment Private ステージング AS Public Segment Private Segment データ Storage Gateway データセンター本番 VM

28 ハイブリッド構成例 Internet 拠点間広域接続網 Internet AZ:A AZ:B 本番 Public Segment Private Segment Private ステージング AS Public Segment Private Segment データ Storage Gateway データセンター本番 VM VMware VM 社内 LAN 開発 Public Segment Private Segment 差分バックアップ VM 移行 Back Bone Router 運用 LAN AD DNS 監視アクセスチェック Hybrid 監視 Manage ment Console 運用機能の一元化 Operation Terminal

29 AWS クラウドはハイブリッド構成への近道地理的に分散したインフラストラクチャ複数 DC で冗長化されたストレージと DB のサービス分散システムを支えるビルディングブロック疎結合なサービスとプロセス間連携機能の提供 AWS Regions S3 EC2 SWF DynamoDB SNS Availability Zones RDS ロードバランサー SQS

30 AWS における可用性向上の考え方ネットワークレイヤーフルマネージド Interne t Storage レイヤー Front End レイヤーマネージド LB ELB (Act) ELB (Act) インスタンス間の Disk の付け替え冗長化即座なリソースの切替え Back End レイヤー即座なリソース切換え SW と組み合わせた HA 化 AP (Act) DB (Act) EBS Availability Zone Backup AP (Act) Availability Zone Backup レイヤーマネージドサービスとしての提供データセンターデータセンタレベルでの可用性 Amazon S3 Region

31 SDKによるサービスカスタマイズと省力化各種言語用のSDKありサードパーティを含めれば主要言語はほぼ網羅

32 既存環境から AWS とのハイブリッド新規システム既存システム VPN AWS Direct Connect Connection データ転送ネットワーク移行方法利用ツール移行コストスケジュール運用コストシステム連携移行コストスケジュール運用コスト切替方法 AWS CloudFormation Amazon Redshift Amazon EMR Route 53 Amazon RDS Amazon S3 Amazon Glacier IAM AWS Data Pipeline

33 ハイブリッド構成はすでに現実 AWS を使えばハイブリッド構成の構築をあらゆるユーザがもっと簡単にもっと安全に AWS をつかったハイブリッド構成ならば今あるシステムに加えて使用現実的な時間現実的なコスト

34 Thank You ハイブリッド構成を支えるAWSテクノロジー荒木靖宏プリンシパルソリューションアーキテクト玉川憲技術統括本部本部長

AWS およびパートナーサービスを使った、データの集約および活用設計パターン

AWS およびパートナーサービスを使った、データの集約および活用設計パターン AWS およびパートナーサービスを使ったデータの集約および活用設計パターン荒木靖宏アマゾンデータサービスジャパン株式会社プリンシパルソリューションアーキテクト自己紹介! 名前荒木靖宏! 所属アマゾンデータサービスジャパン株式会社プリンシパルソリューションアーキテクト! 好きな AWS サービス Amazon Virtual Private Cloud AWS Direct Connect