zenml — ZenML 🙏: One AI Platform from Pipelines to Agents. https://zenml.io.
aimは、利用しやすく強力なオープンソースのエクスペリメントトラッカーです。
AIプラットフォーム
MLINFO COLLECTION
自然言語処理
記事一覧
2 / 44nltk — NLTK Source
このリポジトリは、Natural Language Toolkit（NLT）のソースコードを収録しています。
Natural Language Toolkit（NLT）ソース
qdrant — Qdrant - High-performance, massive-scale Vector Database and Vector Search Engine for the next generation of AI. Also available in the cloud https://cloud.qdrant.io/
このリポジトリでは、データとAIアルゴリズムを製品化するためのプラットフォームであるTaipyを提供しています。
AIアプリケーションを製品化するためのプラットフォーム
compromise — modest natural-language processing
この研究では、自然言語処理の負担を減らすモジュラリティを目指しています。モジュラリティとは、システムを小さくて独立した部分に分割して、それぞれを簡素化することです。この研究では、文脈に応じてモジュラリティを変更できるメカニズムを開発しているようです。
自然言語処理の簡素化
trafilatura — Python & Command-line tool to gather text and metadata on the Web: Crawling, scraping, extraction, output as CSV, JSON, HTML, MD, TXT, XML
trafilaturaはPythonとコマンドラインツールで、Webからテキストとメタデータを取得して、CSV、JSON、HTML、MD、TXT、XML形式で出力を提供します。
Web上から情報を取得してテキスト抽出する
reef — Infrastructure for continually self‑improving agents
Infrastructure for continually self‑improving agents
nlp
verl-omni — Multimodal RL training framework for diffusion & omni models
CVV または CWE への分類を実現し、バグ修正のために重要な手順となるCVEへの CWE 分類を自動化する。
CVVの分類と CWE 分類
MOVA — A foundation model that generates synchronized video and audio in a single model
統計チャートの生成は、タブラーのデータから生成することが難しい。新しい作成フローでは、データのスクリーン、プロット提案、コード生成、レンダリング、検証による改良が含まれる。
可視化された統計チャートの生成
TextBlob — Simple, Pythonic, text processing--Sentiment analysis, part-of-speech tagging, noun phrase extraction, translation, and more.
テキスト分析、センチメント分析や単語分割などを行えるライブラリ。
テキスト分析
great_expectations — Always know what to expect from your data.
データの期待値を把握するためのフレームワークです。
データの期待値を把握する
langextract — A Python library for extracting structured information from unstructured text using LLMs with precise source grounding and interactive visualization.
LLMを使用して、自然言語処理における情報抽出を行うためのPythonライブラリです。
自然言語処理情報抽出
Awesome-large-language-model-for-Prognostics-and-health-management — 用于预测性维护与健康管理的大型语言模型（故障诊断；寿命预测）
この論文では、予測性維护と健康管理のための大型言語モデルが使用されます。この modelは、故障診断や寿命予測などの問題を解決するように設計されています。
故障診断と寿命予測の問題を解決
atomic-agents — Building AI agents, atomically
AIエージェントを組み立てるためのライブラリ。
AIエージェント建設
PyTorch-Tutorial-2nd — 《Pytorch实用教程》（第二版）无论是零基础入门，还是CV、NLP、LLM项目应用，或是进阶工程化部署落地，在这里都有。相信在本书的帮助下，读者将能够轻松掌握 PyTorch 的使用，成为一名优秀的深度学习工程师。
Pytorchの教科書としては非常に詳細で、実践的な方法を提示しています。
ゼロから入門する人や深度学習の工程をプロデュースして欲しい人
open_clip — An open source implementation of CLIP.
CLIPという画像認識モデルをオープンソースとして実装したライブラリ。
画像認識
nestia — NestJS Helper + AI Chatbot Development
NestJSベースのAIチャットボット開発ツールです。
AIチャットボット作成
metaflow — Build, Manage and Deploy AI/ML Systems
TensorZeroは、LLMゲートウェイ、オブザーバビリティ、評価、最適化、実験を統一したオープンソースのLLMOpsプラットフォームです。
AI/MLシステムの構築、管理、展開ツール
clearml — ClearML - Auto-Magical CI/CD to streamline your AI workload. Experiment Management, Data Management, Pipeline, Orchestration, Scheduling & Serving in one MLOps/LLMOps solution
このリポジトリでは、高スループットと低メモリ消費のLLMインフェレンザエンジンであるVLLMを提供しています。
高スループットと低メモリ消費のLLMインフェレンザ
BentoML — The easiest way to serve AI apps and models - Build Model Inference APIs, Job queues, LLM apps, Multi-model pipelines, and more!
モデルをサービングするためのライブラリを紹介している。
モデルのサービング
runanywhere-sdks — Production ready toolkit to run AI locally
このリポジトリでは、AIモデルの互換性を確保するためのオープンスタンダードであるONNXを提供しています。
AIモデルの互換性を確保するためのオープンスタンダード
Elucidating the Design Space of LM Data Attribution
Data attribution methods for Language Models (LMs) are typically evaluated using downstream tasks like fact retrieval. However, existing evaluations vary multiple dataset properties simultaneously,…
nlp
Luggage re-identification: A study of strategies towards a real-world application
Luggage re-identification (ReID) is a critical task in video surveillance for forensics, security or border management (suspicious or abandoned luggage recognition), as well as luggage management…
nlp
SonoWorld4D: From One Video to a 4D Audio-Visual Scene via Diffusion Synchronization
Recent progress in visual scene generation has extended beyond static 3D scenes toward the more challenging problem of generating dynamic 4D scenes from minimal input. However, sound, despite being…
nlp
ShallowDefend: Harnessing Shallow Safety Alignment for Multi-Turn Defender
Safety alignment has enabled large language models to reliably refuse harmful requests directly, yet the same request distributed across a multi-turn conversation still succeeds far too often. This…
nlp