2020年1月

やましーのプロフィール

やましーの顔写真

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041)です。 私は現在クラウド技術を使ってお客様企業のデータ活用基盤を構築しています。SEですね。それまでは組み込みソフトエンジニア、ネットワークエンジニアとして様々なプロジェクトを携わってきました。 このページは少し長いですが、私の生い立ちを書いた記事になります。 まずはざっくり概要から 概要プロフィール 名前:やました […]

Azure Databricksでデータを整形&統合&可視化する方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日は前回書いた「Microsoft Azure Databricksを使ってデータレイクのデータを表示する方法」で使用した教材、Microsoft Learnの続きです。 全3回のうちの3回目記事になります。 今回はData FactoryのパイプラインからDatabricksを呼び出し、Databrick […]

Microsoft Azure Databricksを使ってデータレイクのデータを表示する方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日は前回書いた「Microsoft Azure Data Factoryを使ってデータ基盤にデータを取り込む方法」で使用した教材、Microsoft Learnの続きです。 前回はデータレイクを作り、Azure Data Factory を使ってデータの取り込みまでを実施しました。 今日はAzur […]

Microsoft Azure Data Factoryを使ってデータ基盤にデータを取り込む方法

こんにちは。やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今日はデータ基盤にデータを取り込む方法について解説したいと思います。 以前、データ基盤の構成要素であるデータレイクついての記事を書きました。その中でデータレイクとは すべての生データを置いておく場所 と説明しました。 ではどのようにしてデータをデータレイクに置くのでしょうか。 概念だけの理解するのと […]