やってみた

【Dockerコンテナ超入門】作ったイメージをAzureコンテナーインスタンスで起動する方法

こんにちは!やましー@データ活用クラウドエンジニア(@yamashi18041)です! 今日は前回に引き続きDocker超入門記事になります。 Dockerに代表されるコンテナ技術。 まさに時代のトレンドであり、これから先、ますます重要性が高まっていく技術であることは間違いありません。 とはいうものの私自身、Dockerなどのコンテナ技術を使ったことがありませんでした。 これを知らずしてエンジニア […]

【超簡単しかも無料】AzureでJupyter Notebookがサクッと使えた

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日はAzureでJupyter Notebookがかなり簡単に、しかも無料で扱えることが分かったのでその方法を記事にしました。 題材としてTwitterで使われた単語を↓の図のように視覚化してみます。 通常はJupyter Notebookを使うにはマシンにインストールが必要になると思います。 試 […]

Azure Databricksでデータを整形&統合&可視化する方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日は前回書いた「Microsoft Azure Databricksを使ってデータレイクのデータを表示する方法」で使用した教材、Microsoft Learnの続きです。 全3回のうちの3回目記事になります。 今回はData FactoryのパイプラインからDatabricksを呼び出し、Databrick […]

Microsoft Azure Databricksを使ってデータレイクのデータを表示する方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日は前回書いた「Microsoft Azure Data Factoryを使ってデータ基盤にデータを取り込む方法」で使用した教材、Microsoft Learnの続きです。 前回はデータレイクを作り、Azure Data Factory を使ってデータの取り込みまでを実施しました。 今日はAzur […]

Microsoft Azure Data Factoryを使ってデータ基盤にデータを取り込む方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日はデータ基盤にデータを取り込む方法について解説したいと思います。 以前、データ基盤の構成要素であるデータレイクついての記事を書きました。その中でデータレイクとは すべての生データを置いておく場所 と説明しました。 ではどのようにしてデータをデータレイクに置くのでしょうか。 概念だけの理解するのと […]

Azure MonitorのLog Analyticsを使ってWindowsイベントログを監視してみた

こんにちは。 やましー@データ活用クラウドエンジニア(@yamashi18041) です。 システムを安定稼働させ、重大な問題を未然に防ぐためにも監視は非常に重要です。 最近はPaaSを活用することによるサーバーレスが人気を集めています。 しかし、日本では依然として自由度の高いIaaSである仮想マシン上で自作のバッチ処理などを走らせて運用しなければならないこともあると思います。 ということで今日は […]