基本情報技術者試験 MIPS とは
"Million Instructions Per Second" の略。コンピューターの処理速度を表す単位の一つで、毎秒何百万回の命令を実行できるかを表す値CPUの性能の指標として扱われる事がある。但し、どんな処理を行うかで値が変わってく...
基本情報技術者試験 
NAS NASとは何なのか
簡単に説明ネットワークに接続して使用できるストレージの事です。下記のようなオンラインストレージを自宅や自社で用意し、自分達だけで使うイメージです。・iCloud・Google Drive・OneDrive図で説明するなら↓みたいな感じですね...
Databricks 【Databricks】合格体験記-Databricks Certified Data Engineer Associate
この度「Databricks Certified Data Engineer Associate」に合格する事ができました！！！私がどのように合格したか、勉強方法等を公開いたします。長々と書きますので目的の物だけ見たい方は目次から遷移してく...
Databricks 【Databricks】Delta Lake
Delta Lake は、Databricks のレイクハウスのテーブルの基盤を提供する最適化されたストレージ レイヤーです。Time TravelDelta Lake には 「タイムトラベル (Time Travel)」 機能があり、以前...
Databricks 【Databricks】Managed TableとExternal Tableについて
Databricks では、テーブルのデータ管理方法によって Managed Table（管理対象テーブル） と External Table（外部テーブル） の2種類のテーブルがあります。Managed Table（管理対象テーブル）テー...
Databricks 【Databricks】データベースを作成する際の格納場所
デフォルトの格納場所dbfs:/user/hive/warehouse例-- customer360を「dbfs:/user/hive/warehouse」に作成CREATE DATABASE IF NOT EXISTS customer3...
Wordpress 【WordPress】テーマ「Cocoon」 投稿一覧の背景色を変更する
下の図を見て頂くとわかるように、記事と記事の切れ目がわかりにくいので、記事一覧が表示される箇所の背景色を変更します。↓↓↓こんな感じにします↓↓↓今回はCSS（スタイルシート）に直接変更を加えていきます。というより、Wordpress管理画...
Databricks 【Databricks】ジョブに使用されるクラスターの起動時間を短縮する方法（クラスタープール、ジョブクラスター）
結論クラスター プールからのクラスターを使用するジョブクラスターを使用するクラスタープールを使う事でクラスターの起動時間を短縮できます。また、ジョブクラスターはジョブ専用の一時クラスターで、起動時間を最適化できます。"プール"については下記...
Databricks 【Databricks】クラスターの開始がうまく行かない時に見るべきログ
結論クラスターイベントログを確認DatabricksのUI載せていいのか分からないので載せませんが、クラスターの設定画面？で対象のクラスターに移動すると"クラスターイベントログ"があります。上記の他にも"クラスタードライバーのログ"というの...
Databricks 【Databricks】PySparkでDeltaテーブルにアクセス
テーブル名やパスを指定するまず一番簡単なのは下記コマンドかなと思います。# salesテーブルをDataFrameとして取得df = spark.table("sales")物理パスがわかっている場合、下記の様にDelta テーブルを読み込...