大阪のビッグデータトレーニング

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級レベルのデータサイエンティストやエンジニアを対象としており、Google ColabとApache Sparkを使用してビッグデータの処理と分析を行いたい方々向けです。

このトレーニング終了時には、参加者は以下ができることを目指します：

• Google ColabとSparkを使用してビッグデータ環境をセットアップする。
• Apache Sparkを使用して大量のデータセットを効率的に処理および分析する。
• 協調的な環境でビッグデータを可視化する。
• Apache Sparkとクラウドベースのツールを統合する。

Stratioは、ビッグデータ、AI、ガバナンスを統合したデータ中心のプラットフォームです。そのRocketとIntelligenceモジュールにより、エンタープライズ環境での迅速なデータ探索、変換、高度な分析が可能になります。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級レベルのデータ専門家を対象とし、PySparkを使用してStratioのRocketとIntelligenceモジュールを効果的に活用することに焦点を当てます。ループ構造、ユーザー定義関数、および高度なデータロジックが重点となります。

このトレーニングの終了時には、参加者は以下が Able to できます：

• RocketとIntelligenceモジュールを使用してStratioプラットフォームをナビゲートし、操作する。
• データの取り込み、変換、分析の文脈でPySparkを適用する。
• ループと条件ロジックを使用してデータワークフローと特徴エンジニアリングタスクを制御する。
• 再利用可能なデータ操作のため、PySparkでユーザー定義関数（UDFs）を作成および管理する。

コース形式

• インタラクティブな講義とディスカッション。
• 多数の演習と実践。
• ライブラボ環境での手動実装。

コースカスタマイズオプション

• このコースのカスタマイズトレーニングを依頼するには、お問い合わせください。

データウェアハウスは、分析、レポート作成、意思決定を支援する集中型のデータリポジトリを設計、構築、運用する実践です。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級レベルのデータ専門家向けに、次元モデルの作成、堅牢なETLパイプラインの構築、および分析ワークロードの最適化を学ぶことを目指しています。

このトレーニング終了時には、受講者は以下のことが Able to できます：

• データウェアハウスの核心的な概念とアーキテクチャを説明する。
• 次元モデルを設計し、スター スキーマとスノーフレーク スキーマを選択する。
• ETL および ELT パイプラインを確実に構築し、オーケストレーションを行う。
• OLTP と OLAP のワークロードの違いを理解し、分析に最適化する。

コースの形式

• インタラクティブな講義とディスカッション。
• 多数の演習と練習。
• ライブ実装環境での手を動かす実践。

コースのカスタマイズ オプション

• このコースのカスタマイズ版をご希望の場合は、お問い合わせください。

大阪でこのインストラクター主導のライブトレーニングを修了した参加者は、ビッグデータおよび関連技術、手法、ツールについて実践的な理解を得ることができます。

参加者は手動演習を通じてこの知識を実践する機会があります。グループでの相互作用とインストラクターからのフィードバックがクラスの重要な構成要素となっています。

コースはビッグデータの基本概念の紹介から始まり、次にデータ分析を行うためのプログラミング言語と手法について進みます。最後に、ビッグデータのストレージ、分散処理、スケーラビリティを可能にするツールやインフラストラクチャについて議論します。

Greenplum は、大規模な分析およびデータ環境向けに設計されたオープンソースのマスivement並列処理（MPP）データプラットフォームです。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級者から上級者の技術ユーザーを対象としており、Greenplum の内部アーキテクチャを理解し、最適化されたデータモデルを構築し、分散環境での高パフォーマンス SQL を適用する方法を学びます。

このトレーニングの終了時には、参加者は以下のことが Able to できるようになります：

• Greenplum の無共有アーキテクチャと並列処理モデルを理解する。
• クエリパフォーマンスに最適化された分散テーブル構造とパーティションを設計する。
• インデックシング戦略、ストレージ形式、物理設計手法を使用する。
• EXPLAIN プランを解釈し、ベストプラクティスを使用してクエリを最適化する。

コースの形式

• 交互的な講義とディスカッション。
• 多数の演習と実践。
• ライブラボ環境での手動実装。

コースのカスタマイズオプション

• このコースのカスタマイズされたトレーニングをご希望の場合は、お問い合わせください。

Greenplum は PostgreSQL をベースとするオープンソースの大量並列データプラットフォームで、高度な分析と大規模なデータウェアハウス向けに設計されています。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級レベルの管理者を対象としており、Greenplum 環境を効果的にインストール、構成、管理する方法やシステムアップデートとライブラリの管理方法について学びます。

このトレーニング終了時には、参加者は以下のことができます：

• 生産環境向けの Greenplum クラスタをインストールおよび構成します。
• システムアップデートを安全に管理し、パッチを適用します。
• アナリティクスと拡張機能のための Greenplum ライブラリを管理します。
• Greenplum システムのトラブルシューティングと監視を行います。

コースの形式

• 交互的な講義とディスカッション。
• コントロールされたラボ環境での Greenplum の実践的な使用。
• クラスタのセットアップ、アップグレードのワークフロー、システム拡張に焦点を当てたガイダンス付き演習。

コースカスタマイゼーションオプション

• 環境やデータプラットフォームに応じて、このコースのカスタマイズされたトレーニングを希望する場合は、お問い合わせください。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、高度なレベルのデータ専門家向けで、データ処理ワークフローの最適化、データの一貫性の確保、現代的なビッグデータアプリケーションに耐えられる堅牢なデータレイクハウスソリューションの実装を目指しています。

このトレーニングを終了した参加者は、以下のことができます：

• Iceberg のアーキテクチャ（メタデータ管理とファイルレイアウトなど）について詳細な理解を得る。
• さまざまな環境での最適パフォーマンスのための Iceberg 設定を学び、複数のデータ処理エンジンとの統合を行う。
• 大規模な Iceberg テーブルの管理、複雑なスキーマ変更、パーティション進化の取り扱いを学ぶ。
• 大容量データセットのクエリパフォーマンスとデータスキャン効率を最適化する技術を習得する。
• データの一貫性を確保し、トランザクショナル保証を管理し、分散環境での障害を処理するメカニズムの実装を学ぶ。

この講師主導のライブトレーニング（オンラインまたはオンサイト）は、初心者レベルのデータプロフェッショナル向けで、Apache Iceberg を使用して大規模データセットを効果的に管理し、データ整合性を確保し、データ処理ワークフローを最適化するための知識とスキルを習得することを目指しています。

本トレーニング終了時には、参加者は次のことが able to:

• Apache Iceberg のアーキテクチャ、特徴、および利点を十分に理解します。
• テーブル形式、パーティショニング、スキーマ進化、時間移行機能について学びます。
• 異なる環境で Apache Iceberg をインストールおよび設定します。
• Iceberg テーブルの作成、管理、操作を行います。
• 他のテーブル形式から Iceberg へのデータ移行プロセスを理解します。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、中級レベルのIT専門家向けで、データアーキテクチャ、ガバナンス、クラウドコンピューティング、およびビッグデータ技術のスキルを向上させ、組織内の大量データセットの移行と管理に効果的に対応したい方を対象としています。

このトレーニング終了時には、参加者は以下のことが可能です：

• さまざまなデータアーキテクチャの基本概念と構成要素を理解する。
• データガバナンスの原則とその規制環境における重要性について包括的に理解する。
• Dama、Togafなどのデータガバナンスフレームワークを実装および管理する。
• クラウドプラットフォームを利用して効率的なデータストレージ、処理、管理を行う。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、効果的なデータ解析ソリューションを使用するためにAzure Data Lake Storage Gen2を学びたい中級レベルのデータエンジニア向けです。

本トレーニング終了時には、参加者は以下のことができます：

• Azure Data Lake Storage Gen2のアーキテクチャと主要機能を理解します。
• コストとパフォーマンスのためにデータストレージとアクセスを最適化します。
• Azure Data Lake Storage Gen2を他のAzureサービスと統合して、分析とデータ処理を行います。
• Azure Data Lake Storage Gen2 APIを使用してソリューションを開発します。
• 一般的な問題をトラブルシューティングし、ストレージ戦略を最適化します。

この講師主導の実践トレーニング（オンラインまたはオンサイト）は、Spark、Hadoop、およびPythonを使用して大規模で複雑なデータセットを処理、分析、変換することを目指す開発者向けです。

このトレーニングの終了時には、参加者は以下のことができるようになります：

• Spark、Hadoop、およびPythonを使用してビッグデータの処理を開始するために必要な環境をセットアップする。
• SparkとHadoopの特徴、主要なコンポーネント、アーキテクチャを理解する。
• Spark、Hadoop、およびPythonを統合してビッグデータの処理を行う方法を学ぶ。
• Sparkエコシステム内のツール（Spark MlLib、Spark Streaming、Kafka、Sqoop、Flume）を探索する。
• Netflix、YouTube、Amazon、Spotify、Googleなどに類似した協調フィルタリング推薦システムを構築する。
• Apache Mahoutを使用して機械学習アルゴリズムをスケーリングする。

Big Dataと高度な分析は、大量で複雑なデータセットから具体的な洞察や戦略的な意思決定を得るために洗練された手法やツールを適用することです。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、予測分析、処方分析、リアルタイム分析のために最先端の分析方法とビッグデータ技術を活用したい高度なレベルのデータ専門家向けです。

このトレーニングが完了すると、参加者は以下のことができます：

• 構造化されたデータと非構造化されたデータのための大規模データ処理パイプラインを設計および実装します。
• 大量のデータセットに対して高度な機械学習や深層学習技術を適用します。
• リアルタイム分析とデータストリーミングのために分散コンピューティングフレームワークを活用します。
• ビッグデータ分析をビジネスインテリジェンスや意思決定システムに統合します。

コースの形式

• 対話型講義とディスカッション。
• 多くの演習と実践。
• ライブラボ環境での手動実装。

コースのカスタマイズオプション

• このコースのカスタマイズトレーニングを希望する場合は、お問い合わせください。

このインストラクター主導のライブトレーニング（オンラインまたは対面）は、中級レベルのITプロフェッショナル向けです。このトレーニングでは、IBM DataStageを管理および利用するための包括的な理解を得ることができます。これにより、彼らはそれぞれの職場でこのツールを効果的に使用することができます。

このトレーニング終了時には、参加者は以下のことができるようになります：

• DataStageの基本概念を理解する。
• DataStage環境を効果的にインストール、設定、管理する方法を学ぶ。
• データベース、テキストファイル、外部ソースからデータを効率的に抽出する。
• 効果的なデータロード手法を実装する。

この講師主導のライブトレーニング（オンラインまたは対面）は、初級から中級レベルのシステム管理者を対象としており、Spark クラスタの展開、維持、最適化を目指しています。

このトレーニングの終了時には、参加者は以下のことができるようになります：

• 様々な環境での Apache Spark のインストールと設定を行うことができます。
• クラスタ リソースを管理し、Spark アプリケーションを監視することができます。
• Spark クラスタのパフォーマンスを最適化することができます。
• セキュリティ対策を実施し、高可用性を確保することができます。
• 一般的な Spark の問題のデバッグとトラブルシューティングを行うことができます。

大阪で行われるこのインストラクター主導のライブトレーニングを修了した受講者は、ビッグデータとその関連技術、手法、ツールについて実践的かつ現実的な理解を得ることができます。

受講者は手を動かす演習を通じて、この知識を実際に活用する機会があります。グループでの交流とインストラクターからのフィードバックはクラスの重要な部分を占めています。

本コースはビッグデータの基本概念から始まり、次にデータ分析を行うためのプログラミング言語と手法について進みます。最後に、ビッグデータの保存、分散処理、スケーラビリティを可能にするツールとインフラストラクチャについて議論します。

このインストラクター主導のライブトレーニングでは、参加者は手順演習を通じてPythonとSparkを組み合わせてビッグデータを分析する方法を学びます。

このトレーニング終了時には、参加者は以下のことをできるようになります：

• Pythonを使用してSparkでビッグデータを分析する方法を学ぶ。
• 現実の事例を模した演習を行う。
• PySparkを使用したビッグデータ分析のさまざまなツールと技術を利用する。

対象者:

このコースは、分散システム環境で大量のデータを保存および処理するソリューションを探している IT 専門家向けです。

目標:

Hadoop クラスター管理に関する深い知識を得ること。

技術の進歩と情報量の増加により、多くの業界、特に政府において、ビジネスの遂行方法が変革されています。スマートフォンやアプリケーション、センサーやデバイス、クラウドコンピューティングソリューション、市民向けポータルの急速な普及に伴い、政府データの生成とデジタルアーカイブのレートは上昇しています。デジタル情報が拡大し複雑化するにつれ、その管理、処理、保存、セキュリティ、および廃棄もより複雑になります。新たな収集、検索、発見、分析ツールにより、組織は非構造化データから洞察を得ることが可能になっています。政府市場は転換点に達しており、情報が戦略的な資産であることを認識し、政府は構造化されたおよび非構造化された情報を保護し、活用し、分析することでより良いサービスを提供し、ミッション要件を満たすことができるようになっています。政府の指導者がデータ駆動型組織への進化を目指して成功するためには、イベント、人々、プロセス、情報間の依存関係を相関させる基盤を整える必要があります。

価値ある政府ソリューションは、最も破壊的な技術を組み合わせて作成されます：

• モバイルデバイスとアプリケーション
• クラウドサービス
• ソーシャルビジネステクノロジーとネットワーキング
• ビッグデータと分析

大規模データは、知能化された業界ソリューションの1つであり、大量のデータを分析することで得られるパターンに基づいて政府がより良い決定を下すことを可能にします。

しかし、これらの成果を達成するには単に大量のデータを蓄積するだけでなく、さらに多くのことがあります。ホワイトハウス科学技術政策局（OSTP）のトム・カリルとフェン・ジャオは、OSTPブログの投稿で次のように述べています。「ビッグデータの大規模な量から意味を導き出すには、多様な情報ストリームから有用な知識を抽出し分析できる最先端のツールやテクノロジーが必要です。」

ホワイトハウスは2012年に、ビッグデータ研究開発イニシアチブを設立することで、機関がこれらの技術を見つける手助けをしました。このイニシアチブには2億ドル以上が投じられ、ビッグデータの爆発とその分析に必要なツールの活用を促進するためのものです。

ビッグデータがもたらす課題は、その約束が希望的であるように、困難です。効率的にデータを保存することがこれらの課題の1つです。予算は常に限られているため、機関は1メガバイトあたりの保存コストを最小限に抑え、ユーザーが必要とするときに必要な方法で簡単にアクセスできるようデータを保持する必要があります。大量のデータをバックアップすることはこの課題を高めます。

データを効果的に分析することも大きな課題です。多くの機関は、商業的なツールを使用して大量のデータを解析し、より効率的に運用できるようになるためのトレンドを見つけることができます。（MeriTalkによる最近の調査では、連邦IT幹部がビッグデータによって5000億ドル以上の節約が可能になると考えていることが示されています。）

カスタム開発された大規模データツールも、機関がデータを分析する必要性に対処するために使用されています。例えば、オークリッジ国立研究所の計算データ解析グループは、Piranhaデータ解析システムを他の機関に提供しています。このシステムは医療研究者に大動脈瘤の予兆を早期発見できるリンクを見つけ出すのに役立ちました。また、履歴書から求職者と採用担当者を結びつけるようなより一般的なタスクにも使用されています。

ビッグデータ分析は、大量の多様なデータセットを検証し、相関関係、隠れたパターン、その他の有用な洞察を見出すプロセスです。

医療業界には、非常に複雑で異種の医療および臨床データが膨大に存在します。ヘルスケアデータに対するビッグデータ分析の適用は、医療提供の改善につながる洞察を得る上で大きなポテンシャルを持っています。しかし、これらのデータセットの巨大さは、解析や臨床環境への実用的な応用において大きな課題をもたらしています。

このインストラクター主導のライブトレーニング（リモート）では、参加者は一連の手動実習を通じてヘルスケアにおけるビッグデータ分析を学びます。

このトレーニング終了時には、参加者は以下のことができます：

• Hadoop MapReduce や Spark などのビッグデータ分析ツールのインストールと設定
• 医療データの特性を理解する
• 医療データに対処するためのビッグデータ技術の適用
• ヘルスケア応用におけるビッグデータシステムとアルゴリズムの研究

対象者

• 開発者
• データサイエンティスト

コース形式

• 講義、ディスカッション、演習、そして多くの手動実践が含まれています。

注意事項

• このコースのカスタマイズされたトレーニングを希望される場合は、お問い合わせください。

大阪でのこのインストラクターリードの実践的なトレーニングでは、参加者はビッグデータ技術へのアプローチ方法、既存のプロセスやポリシーへの影響を評価し、これらの技術を犯罪活動の特定と防止に活用する方法を学びます。世界中の法執行機関が採用した事例研究を通じて、そのアプローチ、課題、結果についての洞察を得ます。

このトレーニング終了時には、参加者は以下のことが Able to となります:

• 捜査中に物語をつなぎ合わせるために、ビッグデータ技術と従来の情報収集プロセスを組み合わせる。
• データ分析のために産業用の大規模データ保存および処理ソリューションを実装する。
• 犯罪捜査にデータ駆動型アプローチを導入するための最適なツールとプロセスの提案書を作成する。

ビッグデータとは、大量のデータセットの保存と処理のために設計されたソリューションのことを指します。Googleが最初に開発したこれらのビッグデータソリューションは進化し、多くの類似プロジェクトをインスパイアしました。その多くはオープンソースで利用可能です。Rは金融業界で人気のあるプログラミング言語です。

従来のストレージ技術では必要なデータ量を処理できない場合、数百の代替手段があります。このコースは、参加者に Big Data の保存と分析のための代替手段についてガイドし、それぞれの長所と短点を説明します。

このコースは主にソリューションの議論とプレゼンテーションに焦点を当てていますが、必要に応じてハンズオン演習も用意されています。

このインストラクターによるライブトレーニングを 大阪（オンラインまたはオンサイト）で実施します。本トレーニングは、ビッグデータおよびデータベースの概念を活用して現代のデータプラットフォームを理解し、より優れた技術的・ビジネス上の意思決定を行いたい、初心者から中級者までのプロフェッショナルを対象としています。

本トレーニング終了時には、参加者は以下のことができるようになります：データベースおよびビッグデータの中核概念を説明する、主要なデータプラットフォームオプションを比較する、データの格納および処理方法を記述する、実用的なユースケースとガバナンス要件を特定する。

この教室でのトレーニングセッションでは、ビッグデータについて学びます。参加者はコンピューターを使用した例題とケーススタディの演習を実施し、関連するビッグデータツールを使います。

対象者

あなたがアクセス可能なデータを理解しようとしたり、ネット上（Twitter, LinkedIn など）で利用可能な非構造化データを分析したい場合、このコースはあなたに適しています。

主に意思決定者やどのデータの収集と分析が価値があるかを選択する必要のある人々向けです。

ソリューションの設定を行う人たちは対象ではありませんが、全体像を理解することで利益を得ることができます。

提供方法

コース中、主にオープンソース技術を使用した実際の例が参加者に提示されます。

短い講義の後は、プレゼンテーションと参加者による簡単な演習が続きます。

内容と使用ソフトウェア

コースを実施するたびに使用されるすべてのソフトウェアは更新され、最新バージョンを使用します。

データの取得、フォーマット化、処理、分析から、機械学習を使用した意思決定プロセスの自動化まで、一連の流れが説明されます。

ビッグデータとは、その量と複雑さが伝統的なデータ処理アプリケーションソフトウェアでは十分に扱えないデータセットのことを指します。ビッグデータの課題には、データの収集、保存、分析、検索、共有、転送、可視化、クエリ、更新、情報プライバシーなどがあります。

Apache Hadoopは、サーバークラスター上でビッグデータを処理する最も人気のあるフレームワークです。この3日間（またはオプションで4日間）のコースでは、参加者はHadoopとそのエコシステムのビジネス上の利点やユースケースについて学びます。また、クラスタの展開計画と拡大方法、インストール、メンテナンス、監視、トラブルシューティング、最適化方法を学びます。さらに、大量データのロード、さまざまなHadoopディストリビューションへの慣れ、Hadoopエコシステムツールのインストールと管理について実践します。コースはクラスタのKerberosによるセキュリティ設定に関する議論で締めくくります。

「...教材が非常によく準備され、徹底的にカバーされていました。ラボは非常に役立ち、整理が整っていました」
— Andrew Nguyen, Principal Integration DW Engineer, Microsoft Online Advertising

対象者

Hadoop管理者

形式

講義と実践的なラボ、大体60%が講義、40%がラボです。

Apache Hadoopは、サーバークラスター上でビッグデータを処理する最も人気のあるフレームワークです。このコースでは、開発者がHadoopエコシステムのさまざまなコンポーネント（HDFS、MapReduce、Pig、Hive、HBase）に触れる機会を提供します。

Apache Hadoop は、サーバーのクラスタ上でビッグデータを処理する最も人気のあるフレームワークの一つです。このコースでは、HDFS 上でのデータ管理、高度な Pig、Hive、および HBase の使用方法に焦点を当てます。これらの高度なプログラミング技術は、経験豊富な Hadoop 開発者にとって有益です。

対象者: 開発者

期間: 3日間

形式: 講義 (50%) と実習 (50%)。

対象者:

このコースは、ビッグデータ/Hadoop 技術をわかりやすく解説し、理解する難しさを取り除くことを目的としています。

この講師主導型のライブトレーニング（オンラインまたはオンサイト）は、組織内でHadoopクラスターを設定、展開、管理したいシステム管理者を対象としています。

このトレーニング終了後、参加者は以下のことができるようになります：

• Apache Hadoopのインストールと構成を行う。
• Hadoopエコシステムの4つの主要なコンポーネント（HDFS、MapReduce、YARN、およびHadoop Common）を理解する。
• Hadoop Distributed File System (HDFS)を使用して、クラスターを数百または数千のノードにスケーリングする。
• HDFSをオンプレミスのSpark展開のストレージエンジンとして設定する。
• Amazon S3やRedis、Elasticsearch、Couchbase、AerospikeなどのNoSQLデータベースシステムへのアクセスを設定する。
• Apache Hadoopクラスターのプロビジョニング、管理、監視、セキュリティ対策など、管理者としてのタスクを行う。

このコースでは、Hadoop 上に構築された NoSQL ストアである HBase を紹介します。本コースは、HBase を使用してアプリケーションを開発する開発者と、HBase クラスターを管理する管理者向けです。

私たちは開発者が HBase のアーキテクチャやデータモデリング、HBase 上でのアプリケーション開発を理解できるようにガイドします。また、MapReduce との連携やパフォーマンス最適化に関連する管理トピックについても説明します。本コースは非常に実践的で、多くのラボ演習が含まれています。

期間: 3 日間

対象者: 開発者 & 管理者

このインストラクター主導のライブトレーニング（大阪、オンサイトまたはリモート）では、参加者は既存の大規模データストレージシステムや関連するソフトウェアアプリケーションおよびマイクロサービスと異なるストリーム処理フレームワークを設定し統合する方法を学びます。

このトレーニングの終了時には、参加者は以下のことができるようになります：

• Spark Streaming と Kafka Streaming のような異なるストリーム処理フレームワークをインストールおよび設定する。
• タスクに最も適したフレームワークを選択し理解する。
• データを連続的、並行的に、レコードごとに処理する。
• ストリーム処理ソリューションを既存のデータベース、データウェアハウス、データレイクなどと統合する。
• 企業アプリケーションおよびマイクロサービスに最も適したストリーム処理ライブラリを統合する。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、技術者が機械学習戦略を実装し、ビッグデータを最大限に活用する方法を学ぶことを目的としています。

このトレーニングが終了すると、参加者は次のことができます：

• 機械学習の進化とトレンドを理解します。
• 異なる業界での機械学習の使用方法を知ります。
• 組織内で機械学習を実装するために利用できるツール、スキル、サービスに精通します。
• データマイニングと分析を向上させるために機械学習を使用する方法を理解します。
• ビジネスでどのようにデータミドルバックエンドが使用されているかを学びます。
• ビッグデータとインテリジェントアプリケーションが異なる業界で果たしている役割を理解します。

Apache NiFiは、オープンソースのフローベースのデータ統合とイベント処理プラットフォームです。異なるシステム間での自動化されたリアルタイムのデータルーティング、変換、およびシステム間の中継を可能にします。WebベースのUIと細かい制御が特徴です。

このインストラクター主導のライブトレーニング（オンサイトまたはリモート）は、中級レベルの管理者やエンジニア向けで、NiFiデータフローを実稼働環境で展開、管理、保護、最適化する方法を学びます。

このトレーニング終了時には、参加者は以下のことができるようになります：

• Apache NiFiクラスタのインストール、設定、および維持管理を行う。
• 様々なソースとシンクからのデータフローを設計し管理する。
• フローオートメーション、ルーティング、および変換ロジックを実装する。
• 性能を最適化し、運用状況を監視し、問題をトラブルシューティングする。

コースの形式

• 実践的な講義と実際のアーキテクチャについての議論。
• フローの構築、展開、管理に関するハンズオンラボ。
• 実践的なシナリオに基づく演習。

コースのカスタマイゼーションオプション

• このコースのカスタマイズされたトレーニングを依頼する場合は、お問い合わせください。

この講師主導のライブトレーニングでは、参加者はフローに基づくプログラミングの基礎を学びながら、Apache NiFi を使用してデモ用の拡張機能、コンポーネント、プロセッサを開発します。

このトレーニング終了時には、参加者は以下のことができます：

• NiFi のアーキテクチャとデータフローの概念を理解する。
• NiFi とサードパーティ API を使用して拡張機能を開発する。
• 独自の Apache NiFi プロセッサをカスタム開発する。
• 異なるフォーマットやデータソースからリアルタイムでデータを取り込み、処理する。

このトレーニングは、PySpark を使用したスケーラブルなデータ処理および機械学習ワークフローの構築に関する実践的な入門を提供します。参加者は、Apache Spark が現代のビッグデータエコシステム内でどのように動作するか、分散コンピューティングの原則を用いて大規模データセットを効率的に処理する方法を学びます。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、ビッグデータソリューションのためのデータ処理プラットフォームを構築したいデータサイエンティストを対象としています。

このトレーニングが終了したとき、参加者は以下のことをできるようになります：

• ビッグデータの処理に使用されるデータパイプラインアーキテクチャを実装します。
• Apache MesosとDockerを使用してクラスタインフラストラクチャを開発します。
• SparkとScalaを使用してデータを分析します。
• Apache Cassandraを使用して非構造化データを管理します。

この講師主導のライブトレーニング（オンラインまたはオンサイト）は、大量のデータを処理するために Apache Spark システムを設定し展開したいエンジニア向けです。

本トレーニング終了後、参加者は以下のことが行えるようになります：

• Apache Spark をインストールおよび設定する。
• 大量のデータセットを迅速に処理し分析する。
• Apache Spark と Hadoop MapReduce の違いを理解し、どちらを使用すべきか判断できる。
• 他の機械学習ツールと Apache Spark を統合する。

Apache Spark の学習曲線は最初緩やかに上昇しますが、初めて成果を得るためには多くの努力が必要です。このコースは、最初の難しい部分を飛ばすことを目指しています。このコースを修了した参加者は、Apache Spark の基本を理解し、RDD と DataFrame を明確に区別し、Python と Scala API を学び、実行者とタスクを理解するなど、多くのスキルを身につけることができます。また、ベストプラクティスに基づいて、このコースはクラウド展開、Databricks および AWS に強い焦点を当てています。学生たちは、AWS EMR と AWS Glue の違いも理解し、AWS の最新の Spark サービスの一つである AWS Glue についても学びます。

対象者:

Data Engineer, DevOps, Data Scientist

目的:

このコースでは、Apache Spark の概要を紹介します。受講者は Big Data エコシステムにおける Spark の位置づけと、データ分析に Spark を使用する方法を学びます。Spark shell での対話型データ分析、Spark の内部構造、API、SQL、ストリーミング、機械学習、GraphX について説明します。

対象者:

開発者 / データアナリスト

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、Apache Spark 上で構築された Spark NLP を使用して自然言語テキスト処理モデルとパイプラインを開発、実装、スケーリングしたいデータサイエンティストや開発者を対象としています。

このトレーニングの終了時には、参加者は以下のことをできるようになります：

• Spark NLP で NLP パイプラインの構築に必要な開発環境をセットアップします。
• Spark NLP の機能、アーキテクチャ、および使用上の利点を理解します。
• Spark NLP で利用可能な事前学習済みモデルを使用してテキスト処理を実装します。
• Spark NLP モデルの構築、訓練、スケーリング方法を学びます。
• 分類、推論、感情分析を実際のユースケース（臨床データ、顧客行動の洞察など）に適用します。

Spark SQLは、構造化データと非構造化データを処理するためのApache Sparkのモジュールです。Spark SQLは、データの構造や実行される計算に関する情報を提供します。この情報は最適化に使用されます。Spark SQLの一般的な用途には以下があります：
- SQLクエリの実行。
- 既存のHiveインストールからデータを読み取ります。

この講師主導のライブトレーニング（オンサイトまたはリモート）では、参加者はSpark SQLを使用してさまざまなタイプのデータセットを分析する方法を学びます。

このトレーニング終了時には、参加者は以下のことが Able to できます：

• Spark SQLをインストールおよび構成します。
• Spark SQLを使用してデータ分析を行います。
• 異なる形式のデータセットをクエリします。
• データとクエリ結果を可視化します。

コースの形式

• 対話型の講義とディスカッション。
• 多くの演習と実践。
• ライブラボ環境での手動実装。

コースのカスタマイズオプション

• このコースのカスタマイズ化されたトレーニングを希望する場合は、お問い合わせください。

このインストラクター主導のライブトレーニング（オンラインまたはオンサイト）は、Big Data の読み込みや処理を簡素化するために Talend Open Studio for Big Data を展開したい技術者向けです。

本トレーニング終了後、参加者は以下のことが able to:

• Talend Open Studio for Big Data のインストールと設定を行います。
• Cloudera、HortonWorks、MapR、Amazon EMR および Apache などの Big Data システムに接続します。
• Open Studio の大規模データコンポーネントとコネクタの理解と設定を行います。
• MapReduce コードを自動生成するためのパラメータを設定します。
• Open Studio のドラッグアンドドロップインターフェースを使用して Hadoop ジョブを実行します。
• 大規模データパイプラインのプロトタイプを作成します。
• 大規模データ統合プロジェクトを自動化します。