Course Code: custmmai
Duration: 21 hours
Prerequisites:
  • Dobre zrozumienie koncepcji uczenia maszynowego i głębokiego uczenia
  • Doświadczenie z frameworkami AI, takimi jak PyTorch lub TensorFlow.
  • Znajomość przetwarzania danych tekstowych, graficznych i dźwiękowych

Publiczność

  • Programiści AI
  • Inżynierowie uczenia maszynowego
  • Badacze
Overview:

Multimodal AI integruje wiele typów danych, takich jak tekst, obrazy i dźwięk, w celu ulepszenia modeli i aplikacji uczenia maszynowego.

To prowadzone przez instruktora szkolenie na żywo (na miejscu lub zdalnie) jest przeznaczone dla zaawansowanych programistów AI, inżynierów uczenia maszynowego i badaczy, którzy chcą budować niestandardowe multimodalne modele AI przy użyciu frameworków typu open source.

Pod koniec tego szkolenia uczestnicy będą mogli

  • Zrozumieć podstawy multimodalnego uczenia się i fuzji danych.
  • Wdrożyć modele multimodalne przy użyciu DeepSeek, OpenAI, Hugging Face i Py Torch.
  • Optymalizacja i dostrajanie modeli pod kątem integracji tekstu, obrazu i dźwięku.
  • Wdrażaj multimodalne modele sztucznej inteligencji w rzeczywistych aplikacjach.

Format kursu

  • Interaktywny wykład i dyskusja.
  • Wiele ćwiczeń i praktyki.
  • Praktyczne wdrożenie w środowisku laboratoryjnym na żywo.

Opcje dostosowywania kursu

  • Aby poprosić o spersonalizowane szkolenie dla tego kursu, skontaktuj się z nami.
Course Outline:

Wprowadzenie do Multimodal AI

  • Przegląd multimodalnej sztucznej inteligencji i rzeczywistych zastosowań
  • Wyzwania związane z integracją danych tekstowych, graficznych i dźwiękowych
  • Najnowocześniejsze badania i postępy

Przetwarzanie danych i inżynieria cech

  • Obsługa zbiorów danych tekstowych, graficznych i dźwiękowych
  • Techniki przetwarzania wstępnego dla uczenia multimodalnego
  • Strategie ekstrakcji cech i fuzji danych

Tworzenie modeli multimodalnych za pomocą PyTorch i Hugging Face

  • Wprowadzenie do PyTorch dla uczenia multimodalnego
  • Używanie transformatorów Hugging Face do zadań NLP i wizyjnych
  • Łączenie różnych modalności w ujednoliconym modelu AI

Wdrażanie fuzji mowy, wizji i tekstu

  • Integracja OpenAI Whisper do rozpoznawania mowy
  • Zastosowanie DeepSeek-Vision do przetwarzania obrazu
  • Techniki fuzji dla uczenia się międzymodalnego

Trening i optymalizacja modeli Multimodal AI

  • Strategie szkolenia modeli dla multimodalnej sztucznej inteligencji
  • Techniki optymalizacji i strojenie hiperparametrów
  • Adresowanie stronniczości i poprawa uogólnienia modelu

Wdrażanie Multimodal AI w rzeczywistych aplikacjach

  • Eksportowanie modeli do użytku produkcyjnego
  • Wdrażanie modeli AI na platformach chmurowych
  • Monitorowanie wydajności i konserwacja modeli

Zaawansowane tematy i przyszłe trendy

  • Zero-shot i few-shot learning w multimodalnej sztucznej inteligencji
  • Kwestie etyczne i odpowiedzialny rozwój sztucznej inteligencji
  • Nowe trendy w badaniach nad multimodalną sztuczną inteligencją

Podsumowanie i kolejne kroki

Sites Published:

United Arab Emirates - Building Custom Multimodal AI Models with Open-Source Frameworks

Qatar - Building Custom Multimodal AI Models with Open-Source Frameworks

Egypt - Building Custom Multimodal AI Models with Open-Source Frameworks

Saudi Arabia - Building Custom Multimodal AI Models with Open-Source Frameworks

South Africa - Building Custom Multimodal AI Models with Open-Source Frameworks

Brasil - Building Custom Multimodal AI Models with Open-Source Frameworks

Canada - Building Custom Multimodal AI Models with Open-Source Frameworks

中国 - Building Custom Multimodal AI Models with Open-Source Frameworks

香港 - Building Custom Multimodal AI Models with Open-Source Frameworks

澳門 - Building Custom Multimodal AI Models with Open-Source Frameworks

台灣 - Building Custom Multimodal AI Models with Open-Source Frameworks

USA - Building Custom Multimodal AI Models with Open-Source Frameworks

Österreich - Building Custom Multimodal AI Models with Open-Source Frameworks

Schweiz - Building Custom Multimodal AI Models with Open-Source Frameworks

Deutschland - Building Custom Multimodal AI Models with Open-Source Frameworks

Czech Republic - Building Custom Multimodal AI Models with Open-Source Frameworks

Denmark - Building Custom Multimodal AI Models with Open-Source Frameworks

Estonia - Building Custom Multimodal AI Models with Open-Source Frameworks

Finland - Building Custom Multimodal AI Models with Open-Source Frameworks

Greece - Building Custom Multimodal AI Models with Open-Source Frameworks

Magyarország - Building Custom Multimodal AI Models with Open-Source Frameworks

Ireland - Building Custom Multimodal AI Models with Open-Source Frameworks

Luxembourg - Building Custom Multimodal AI Models with Open-Source Frameworks

Latvia - Building Custom Multimodal AI Models with Open-Source Frameworks

España - Building Custom Multimodal AI Models with Open-Source Frameworks

Italia - Building Custom Multimodal AI Models with Open-Source Frameworks

Lithuania - Building Custom Multimodal AI Models with Open-Source Frameworks

Nederland - Building Custom Multimodal AI Models with Open-Source Frameworks

Norway - Building Custom Multimodal AI Models with Open-Source Frameworks

Portugal - Building Custom Multimodal AI Models with Open-Source Frameworks

România - Building Custom Multimodal AI Models with Open-Source Frameworks

Sverige - Building Custom Multimodal AI Models with Open-Source Frameworks

Türkiye - Açık Kaynaklı Kütüphanelerle Özel Multimodal AI Modeller Oluşturma

Malta - Building Custom Multimodal AI Models with Open-Source Frameworks

Belgique - Building Custom Multimodal AI Models with Open-Source Frameworks

France - Building Custom Multimodal AI Models with Open-Source Frameworks

日本 - Building Custom Multimodal AI Models with Open-Source Frameworks

Australia - Building Custom Multimodal AI Models with Open-Source Frameworks

Malaysia - Building Custom Multimodal AI Models with Open-Source Frameworks

New Zealand - Building Custom Multimodal AI Models with Open-Source Frameworks

Philippines - Building Custom Multimodal AI Models with Open-Source Frameworks

Singapore - Building Custom Multimodal AI Models with Open-Source Frameworks

Thailand - Building Custom Multimodal AI Models with Open-Source Frameworks

Vietnam - Building Custom Multimodal AI Models with Open-Source Frameworks

India - Building Custom Multimodal AI Models with Open-Source Frameworks

Argentina - Building Custom Multimodal AI Models with Open-Source Frameworks

Chile - Building Custom Multimodal AI Models with Open-Source Frameworks

Costa Rica - Building Custom Multimodal AI Models with Open-Source Frameworks

Ecuador - Building Custom Multimodal AI Models with Open-Source Frameworks

Guatemala - Building Custom Multimodal AI Models with Open-Source Frameworks

Colombia - Building Custom Multimodal AI Models with Open-Source Frameworks

México - Building Custom Multimodal AI Models with Open-Source Frameworks

Panama - Building Custom Multimodal AI Models with Open-Source Frameworks

Peru - Building Custom Multimodal AI Models with Open-Source Frameworks

Uruguay - Building Custom Multimodal AI Models with Open-Source Frameworks

Venezuela - Building Custom Multimodal AI Models with Open-Source Frameworks

Polska - Building Custom Multimodal AI Models with Open-Source Frameworks

United Kingdom - Building Custom Multimodal AI Models with Open-Source Frameworks

South Korea - Building Custom Multimodal AI Models with Open-Source Frameworks

Pakistan - Building Custom Multimodal AI Models with Open-Source Frameworks

Sri Lanka - Building Custom Multimodal AI Models with Open-Source Frameworks

Bulgaria - Building Custom Multimodal AI Models with Open-Source Frameworks

Bolivia - Building Custom Multimodal AI Models with Open-Source Frameworks

Indonesia - Building Custom Multimodal AI Models with Open-Source Frameworks

Kazakhstan - Building Custom Multimodal AI Models with Open-Source Frameworks

Moldova - Building Custom Multimodal AI Models with Open-Source Frameworks

Morocco - Building Custom Multimodal AI Models with Open-Source Frameworks

Tunisia - Building Custom Multimodal AI Models with Open-Source Frameworks

Kuwait - Building Custom Multimodal AI Models with Open-Source Frameworks

Oman - Building Custom Multimodal AI Models with Open-Source Frameworks

Slovakia - Building Custom Multimodal AI Models with Open-Source Frameworks

Kenya - Building Custom Multimodal AI Models with Open-Source Frameworks

Nigeria - Building Custom Multimodal AI Models with Open-Source Frameworks

Botswana - Building Custom Multimodal AI Models with Open-Source Frameworks

Slovenia - Building Custom Multimodal AI Models with Open-Source Frameworks

Croatia - Building Custom Multimodal AI Models with Open-Source Frameworks

Serbia - Building Custom Multimodal AI Models with Open-Source Frameworks

Bhutan - Building Custom Multimodal AI Models with Open-Source Frameworks

Nepal - Building Custom Multimodal AI Models with Open-Source Frameworks

Uzbekistan - Building Custom Multimodal AI Models with Open-Source Frameworks