AI・機械学習・データサイエンス– category –
-
AI・機械学習・データサイエンス
LlamaIndex — LLMへ自社データを流し込むためのRAGフレームワーク
LlamaIndexは元Robloxの機械学習エンジニアであるジェリー・リュー(Jerry Liu)が2022年11月にOSSとして公開した、LLM向けのデータ取り込み(インジェスト)とインデックス構築に特化したフレームワークです。公開当初はGPT Indexという名前で、自前ドキ... -
AI・機械学習・データサイエンス
LangChain — LLMアプリ開発を一気に普及させたフレームワーク
LangChainは元Robust Intelligence社のハリソン・チェイス(Harrison Chase)が2022年10月にOSSとして公開した、大規模言語モデル(LLM)を中心に据えたアプリケーション開発フレームワークです。プロンプト、チェーン、エージェント、ツール、メモリ、ベ... -
AI・機械学習・データサイエンス
GPT-4 — OpenAIが業界標準に押し上げたTransformer型LLM
GPT-4はOpenAIが2023年3月14日に公開したGPTシリーズ第4世代の大規模言語モデルで、Transformerデコーダ構造をベースに、テキストと画像の両方を入力として扱えるマルチモーダル能力を初めて広く実用化しました。2018年のGPT-1、2019年のGPT-2、2020年のGP... -
AI・機械学習・データサイエンス
Mistral — フランス発の軽量・高効率LLMでGAFA独占に挑む
MistralはパリのスタートアップMistral AIが2023年に登場させたLLMファミリーで、Meta FAIR出身のティモテ・ラクロワ、ギヨーム・ランプル、Google DeepMind出身のアルチュール・メンシュらが同年5月に共同創業しました。オープンウェイトのMistral 7BとMi... -
AI・機械学習・データサイエンス
Llama — Metaが公開してオープンLLM潮流を作った基盤モデル
LlamaはMeta Platforms(旧Facebook)のAI研究組織FAIRが開発した大規模言語モデル群で、2023年2月に研究者向けに重みが配布された初代Llamaを皮切りに、Llama 2、Code Llama、Llama 3、Llama 3.1 405Bと世代を重ねています。ヤン・ルカン率いるFAIRが「研... -
AI・機械学習・データサイエンス
Gemini — Google DeepMindが束ねるマルチモーダル基盤モデル
GeminiはGoogle DeepMindが開発し、2023年12月に発表されたGoogle純正の大規模言語モデルファミリーです。従来Googleが軸にしてきたPaLM/PaLM 2系の後継として位置付けられ、テキスト・画像・音声・動画・コードを最初から同じモデルで扱うネイティブ・マ... -
AI・機械学習・データサイエンス
Claude — Anthropicが憲法AIで磨く対話型大規模言語モデル
ClaudeはAI安全性研究を旗印に掲げる米Anthropic社が2023年3月に一般公開した、対話型の大規模言語モデル(LLM)です。OpenAI出身の元研究担当副社長ダリオ・アモデイと、その妹で元政策担当のダニエラ・アモデイらが2021年にサンフランシスコで創業した同... -
AI・機械学習・データサイエンス
Weights & Biases — 研究者愛用のML実験管理SaaSの代表格
Weights & Biases(通称wandb)は、機械学習の学習ログ・ハイパーパラメータ・モデル成果物・データセットバージョンをクラウドダッシュボードに自動で記録し、研究者・データサイエンティスト・MLエンジニアがチームで実験を共有・比較できるSaaSプラット... -
AI・機械学習・データサイエンス
Kubeflow — Google発、Kubernetes上のフルスタックMLOps
KubeflowはKubernetes上でJupyter Notebook環境、データ前処理、分散学習、ハイパーパラメータチューニング、モデルサービング、そしてパイプライン自動化までを統合的に提供する、フルスタックのMLOpsプラットフォームです。2017年12月にGoogleのDavid Ar... -
AI・機械学習・データサイエンス
MLflow — Databricks発、機械学習実験の記録を標準化
MLflowは機械学習の実験パラメータ・メトリクス・成果物(モデル)・ソースコードバージョンを統一フォーマットで記録し、後から比較・再現・本番デプロイまで一気通貫で扱えるオープンソースのMLOps基盤です。2018年6月にApache Spark生みの親Matei Zahar...
