AzureAzure Synapse Analytics(ワークスペース)に以前のSQL Data Warehouseを移行する方法 こんにちは! やましー@データ活用クラウドエンジニア(@yamashi18041) です。 2020年12月4日についにAzure Synapse Analytics(ワークスペース)がGA(generally availa... 2020.12.13AzureMicrosoftSparkSynapse Analyticsやってみたクラウドデータウェアハウスデータ基盤ビッグデータ
Azure【初心者入門】Microsoft Azureを始める その2 仮想マシン作成3 ディスク編 こんにちは! やましー@データ活用クラウドエンジニア(@yamashi18041) です。 仮想マシン作成時の設定項目は大きく6項目あります。 「基本」の項目「ディスク」の項目「ネットワーク」の項目「管理」の項... 2020.11.26Azureクラウドディスク仮想マシン初心者入門学習
Azure【初心者入門】Microsoft Azureを始める その2 仮想マシン作成2 こんにちは! やましー@データ活用クラウドエンジニア(@yamashi18041) です。 私がAzureを扱い始めて1年と半年が立ちますが、初めて扱った当時、設定項目が何を意味しているのか分かりませんでした。 またド... 2020.11.10AzureMicrosoftクラウド仮想マシン初心者入門学習
Azure【初心者入門】Microsoft Azureを始める その2 仮想マシン作成1 仮想マシンとはクラウド上に仮想的なサーバーを作成することで、非力な手元のパソコンからアクセスしてCPUやメモリがたくさん載った強力なマシンを扱うことができるサービスです。実際にはMicrosoftのデータセンターにある物理的なサーバーを間借りして自分専用の仮想マシンをつくることが裏で行われています。 2020.10.31AzureLinuxMicrosoftクラウド初心者入門学習
Azure【初心者入門】Microsoft Azureを始める その1 Azureアカウント作成 こんにちは。 やましー@データ活用クラウドエンジニア(@yamashi18041) です。 今回からクラウドやAzureの初心者の方に向けてAzureの始め方書いていこうと思います。Azureのサービスをわかりやすくスクショ... 2020.10.27AzureMicrosoftクラウド初心者入門
CentOSTwitter Streaming APIでMongoDBに溜めたツイートをJupyter NotebookからApache Sparkで読み込んでみた 今後の仕事で活かせるよう、今日はOSSを使って簡単なデータ基盤の構築してみたいと思います。使う技術は データソース:Twitter Streaming API、分散ストレージ:MongoDB、分散データ処理:Apache Spark、データ整形:pandas、対話的コンソール:Jupyter Notebook 2020.07.13CentOSDatabricksJupyterJupyter NotebookLinuxMongoDBPythonSparkやってみたデータ基盤ビッグデータ
データウェアハウス【書評】ビッグデータを支える技術 -刻々とデータが脈打つ自動化の世界 こんにちは!やましー@データ活用クラウドエンジニア(@yamashi18041)です! 私はビッグデータを扱うためのデータ基盤を作る仕事をしています。 しかしまだ経験が浅く、ビッグデータを扱う基盤を構成するための技術要素を多く... 2020.06.13データウェアハウスデータマートデータレイクデータ基盤ビッグデータ書評
Azure【Dockerコンテナ超入門】作ったイメージをAzureコンテナーインスタンスで起動する方法 こんにちは!やましー@データ活用クラウドエンジニア(@yamashi18041)です! 今日は前回に引き続きDocker超入門記事になります。 Dockerに代表されるコンテナ技術。 まさに時代のトレンドであり、... 2020.06.03AzureCentOSDockerLinuxやってみたコンテナーインスタンスコンテナーレジストリ
CentOS【Dockerコンテナ超入門】Dockerとは?丁寧に解説したよ こんにちは!やましー@データ活用クラウドエンジニア(@yamashi18041)です! IT業界にいれば一度は耳にしたことがあるDockerなどのコンテナ技術についての記事になります。 コンテナ仮想化技術導入のトレンド... 2020.05.23CentOSDockerLinux
MicrosoftPowerShell エラーハンドリングの方法について その2 Trap編 こんにちは!やましー@データ活用クラウドエンジニア(@yamashi18041)です! 今日は前回に引き続き続き PowerShellのエラーハンドリング第2弾です。 前回はPowerShellのエラーハンドリングの基... 2020.05.09MicrosoftPowerShellWindowsプログラミング