Databricks Community Edition で Notebook を立ち上げる
2020年3月9日
はじめに Databricks Community Edition の登録から Notebook を立ち上げるまでの手順を示します。 概要 Databricks は、特に海外で破竹の勢いを見せるデータ分析基盤です。 データ分析のための統合プラットフォーム 2000…
Data Lake Storage Gen 2 ファイルシステム情報確認方法 【Azure Databricks 接続用】
2020年2月20日
はじめに Data Lake Storage Gen 2 で作成したファイルシステムを Azure Databricks に接続する際には、以下の情報が必要になります。 アプリケーションID ディレクトリID クライアントシークレット ストレージアカウント名 ファイルシステム名…
Azure SQL Database 単一データベースの作成方法
2020年1月14日
こんにちは、kc-Dreamです。 今回は、SQL Databaseの単一（シングル）データベースをAzure Portalから構築する方法についてご紹介します。 Azure SQL Databaseについて Azure SQL…
Azure LogAnalytics 番外編
2020年1月9日
こんにちは、kc-dreamです。 今回はAzure LogAnalyticsの番外編ということで、Kustoクエリについてご紹介します。 Kusto概要 Kusto は、ビッグ データに対する対話型分析を格納して実行するためのサービスです。 これはリレーショナル…
Azureでファイルサーバを検討する(VM for Windows)
2020年1月8日
こんにちは、kc-dreamです。 今回はAzureでファイルサーバを構築する際に考えられる構成をご紹介していきます。 その中でも、Azure 仮想マシン(Windows)を利用した場合についてまとめます。 Azureでファイルサーバを構築する際の構成 ①Azure…
Azure Backup 番外編
2020年1月8日
こんにちは、kc-dreamです。 今回は、Azure Backup 番外編ということで、スナップショット取得時の挙動について簡単ではありますが、まとめたいと思います。 スナップショット/復元ポイントの動作について Azure Backup…
Azure Backupの復元方法について
2020年1月8日
こんにちは、kc-dreamです。 今回はAzure Backupの復元方法についてご紹介したいと思います。 Azure Backupとは Azure Backup サービスでは、Microsoft Azure クラウドにデータをバックアップします。 オンプレミスのマシンとワークロード、および…
Excel / Azure Notebooks / Databricks で同じことをやってみる #4 【Databricks編】
2019年9月19日
はじめに Excel / Azure Notebook / Databricks で同じことをやってみる #1 【はじめに】 Excel / Azure Notebook / Databricks で同じことをやってみる #2 【Excel編】 Excel / Azure Notebooks /…
Excel / Azure Notebooks / Databricks で同じことをやってみる #3 【Azure Notebook編】
2019年9月19日
はじめに 前回行ったExcelでの簡易集計と可視化を、Azure Notebooksでやってみます。 Azure Notebooksとは？ 概要 データ分析プラットフォームのデファクトスタンダード、Jupyter Notebookをクラウド環境で起動できるAzureサービスです。他にはGoogle…
Excel / Azure Notebook / Databricks で同じことをやってみる #2 【Excel編】
2019年9月12日
はじめに 前回紹介した内容に沿った簡易集計と可視化を、Excelで行います。 流れ 3つのCSVデータを組み合わせて、中間テーブルを作成します。 青色は、 各々のレコードに対して feight / (price +…
Databricks Community Edition で Notebook を立ち上げる
2020年3月9日
はじめに Databricks Community Edition の登録から Notebook を立ち上げるまでの手順を示します。 概要 Databricks は、特に海外で破竹の勢いを見せるデータ分析基盤です。 データ分析のための統合プラットフォーム 2000…
Data Lake Storage Gen 2 ファイルシステム情報確認方法 【Azure Databricks 接続用】
2020年2月20日
はじめに Data Lake Storage Gen 2 で作成したファイルシステムを Azure Databricks に接続する際には、以下の情報が必要になります。 アプリケーションID ディレクトリID クライアントシークレット ストレージアカウント名 ファイルシステム名…
Azure SQL Database 単一データベースの作成方法
2020年1月14日
こんにちは、kc-Dreamです。 今回は、SQL Databaseの単一（シングル）データベースをAzure Portalから構築する方法についてご紹介します。 Azure SQL Databaseについて Azure SQL…
Azure LogAnalytics 番外編
2020年1月9日
こんにちは、kc-dreamです。 今回はAzure LogAnalyticsの番外編ということで、Kustoクエリについてご紹介します。 Kusto概要 Kusto は、ビッグ データに対する対話型分析を格納して実行するためのサービスです。 これはリレーショナル…
Azureでファイルサーバを検討する(VM for Windows)
2020年1月8日
こんにちは、kc-dreamです。 今回はAzureでファイルサーバを構築する際に考えられる構成をご紹介していきます。 その中でも、Azure 仮想マシン(Windows)を利用した場合についてまとめます。 Azureでファイルサーバを構築する際の構成 ①Azure…
Azure Backup 番外編
2020年1月8日
こんにちは、kc-dreamです。 今回は、Azure Backup 番外編ということで、スナップショット取得時の挙動について簡単ではありますが、まとめたいと思います。 スナップショット/復元ポイントの動作について Azure Backup…
Azure Backupの復元方法について
2020年1月8日
こんにちは、kc-dreamです。 今回はAzure Backupの復元方法についてご紹介したいと思います。 Azure Backupとは Azure Backup サービスでは、Microsoft Azure クラウドにデータをバックアップします。 オンプレミスのマシンとワークロード、および…
Excel / Azure Notebooks / Databricks で同じことをやってみる #4 【Databricks編】
2019年9月19日
はじめに Excel / Azure Notebook / Databricks で同じことをやってみる #1 【はじめに】 Excel / Azure Notebook / Databricks で同じことをやってみる #2 【Excel編】 Excel / Azure Notebooks /…
Excel / Azure Notebooks / Databricks で同じことをやってみる #3 【Azure Notebook編】
2019年9月19日
はじめに 前回行ったExcelでの簡易集計と可視化を、Azure Notebooksでやってみます。 Azure Notebooksとは？ 概要 データ分析プラットフォームのデファクトスタンダード、Jupyter Notebookをクラウド環境で起動できるAzureサービスです。他にはGoogle…
Excel / Azure Notebook / Databricks で同じことをやってみる #2 【Excel編】
2019年9月12日
はじめに 前回紹介した内容に沿った簡易集計と可視化を、Excelで行います。 流れ 3つのCSVデータを組み合わせて、中間テーブルを作成します。 青色は、 各々のレコードに対して feight / (price +…