Azure_Data_Lake
「AzureDataLake」
Azure Data Lake は、スケーラブルなデータストレージおよび分析サービスです。このサービスは、MicrosoftのパブリッククラウドであるAzureでホストされています。
Azure Data Lake
開発者
マイクロソフト
初回リリース
2016年11月16日; 4年前 （2016-11-16） タイプ
データストレージおよび分析サービス
Webサイト
azure .microsoft .com / en-us / Solutions / data-lake /
コンテンツ
1 歴史
2 Azureデータレイクストア
3 Azure Data Lake Analytics
4 U-SQL
5 も参照してください
6 参考文献
7 外部リンク
歴史
Azureのデータ湖サービスは、それが基づいている11月16日、2016年にリリースされたコスモス、などのAzureなどのアプリケーションのための店およびプロセスデータに使用されているのAdCenter、ビング、MSN、スカイプやWindows Liveの。COSMOSは、U-SQLが構築されたSCOPEと呼ばれるSQLのようなクエリエンジンを備えています。
Azureデータレイクストア
ユーザーは、ソーシャルネットワーク、リレーショナルデータ、センサー、ビデオ、Webアプリ、モバイルデバイスまたはデスクトップデバイスなどのアプリケーションから生成された構造化データ、半構造化データ、または非構造化データを保存できます。1つのAzureData Lake Storeアカウントには、1つのファイルのサイズがペタバイトを超える可能性がある数兆のファイルを保存できます。
Azure Data Lake Analytics
Azure Data Lake Analyticsは、並列のオンデマンドジョブサービスです。並列処理システムは、MicrosoftDryadに基づいています。 Dryadは、計算の任意の有向非巡回グラフ（DAG）を表すことができます。Data Lake Analyticsは、リソースを動的に割り当てたり、割り当てを解除したりできる分散インフラストラクチャを提供するため、顧客は使用したサービスに対してのみ料金を支払うことができます。
Azureのデータ湖解析は、Apache YARN、一部の使用のApache Hadoopのクラスタ間でのリソース管理を支配します。Microsoft Azure Data Lake Storeは、Hadoop分散ファイルシステム（HDFS）インターフェイスを使用するすべてのアプリケーションをサポートします。
U-SQL
Data Lake Analyticsを使用すると、ユーザーは、SQLとC＃を組み合わせたクエリ言語であるU-SQLで、並列データ変換および処理プログラムを開発および実行できます。U-SQLは、C＃で記述されたユーザーコードを介したネイティブの拡張性を備えた宣言型SQL言語の進化形として設計されました。U-SQLは、C＃データ型とC＃式言語を使用します。
も参照してください
データレイク
参考文献
^ 「データレイク」。MicrosoftAzure 。
^ ハリス、デリック（2015-02-05）。「なぜCosmosビッグデータシステムを開放することがMicrosoftにとって正しい動きになるのか」。gigaom.com 。
^ 「データレイク| MicrosoftAzure」。azure.microsoft.com 。2021-09-15を取得しました。
^ ハリス、エド。「コスモス」（PDF）。
外部リンク
MicrosoftAzure上のデータレイク