Databricks 【Databricks】SQLエンドポイント（SQLウェアハウス）使用時のSQLクエリ実行速度の改善
資格取得の為、Udemyの問題を解いていて"SQLエンドポイント"というのが出てきたんで、備忘録として残しておきます。できればDatabricksの公式ドキュメントから答えを探し出したかったんですが、見つからなかったので、ChatGPTを使...
Databricks Databricks 【Databricks】構造化ストリーミング（Structured Streaming）
Databricksの資格勉強中にやたら出てくるキーワードなので備忘録として残しておきます。簡単に説明下記の特徴を持っています。バッチ処理と同じ感覚でストリーミング処理ができるフォールトトレランス（障害耐性）が強いさまざまなデータソースに対...
Databricks 【Databricks】レイクハウスのデータオブジェクト
資格勉強の備忘録です。データオブジェクトテーブル：オブジェクトストレージのデータファイルとして格納される行と列のコレクションビュー：1つ以上のテーブル、データソースに対するクエリーカタログ：データベースのグルーピングデータベース/スキーマ：...
Databricks 【Databricks】Auto Loaderとは
クラウドストレージに追加されたデータファイルを効率的に自動で処理するコンポーネントです。できる事クラウドストレージに追加されたデータファイルを検出し自動でロードできます。例）AWS S3 → Databricks Delta Lake特に大...
AI 【ざっくり解説】Databricksのコンポーネント
まずDatabricks ってなんやねんって方はこちらをご覧くださいDatabricksについて学習する必要があるので備忘録としても記事にしていこうと思います。この記事では本当に簡単に解説していきます。詳細に関してはそれぞれ別の記事にできた...
AI 【ざっくり解説】Databricksってなに？
簡単解説とても簡単かつ簡潔に説明するとグローバルで唯一のデータ＆AI企業"Databricks"が提供しているサービスで、膨大なデータを効率的に処理したり、分析したりするための「作業場」のようなものを提供しています。です！Databrick...
Python 【ざっくり解説】Pythonって何？凄いの？
Python アイコン by Icons8簡単解説プログラミング言語の１つであり、比較的簡単かつできる事は多めです。上記の理由により、初心者に好まれるプログラミング言語です。しかし、様々な理由により嫌っている人も少なからず存在し、特にインタ...
データベース 【ざっくり解説】データベースとは何なのか
データベースについて簡単に説明
Python Python3 エンジニア認定基礎試験 勉強法や注意点
9割合格したので色々語っていきます。結論プライム・スタディWeb模擬試験の問題と解答を理解できればOK1~2年のPython経験者なら勉強不要でも合格できる可能性あり標準ライブラリやメソッドの暗記はある程度必要初心者から上級者までPytho...
Python 【レビュー】徹底攻略Python 3 エンジニア認定［基礎試験］問題集
通称「黒本」を購入してすべて解いたのでレビューします！！！実際にPython認定実践試験まで取得しましたので参考にしてください別途試験の概要から勉強方法まで紹介していますのでよければそちらもご覧ください（コチラ）Amazon Kindleで...