多模态 AI
处理多种数据模态的模型与工具
共 26 个项目
apache / superset
Apache Superset 是一个开源的数据可视化和探索平台。
huggingface / diffusers
Hugging Face 推出的 PyTorch 扩散模型库，提供 SOTA 模型，轻松实现图像、视频、音频的生成与转换。
ggml-org / whisper.cpp
将 OpenAI Whisper 模型移植至 C/C++，实现无依赖、跨平台的高效本地语音转文字。
huggingface / transformers
统一框架，轻松加载、微调和部署文本、视觉、音频等多模态SOTA预训练模型。
ultralytics / yolov5
YOLOv5 是一个基于 PyTorch 的快速、准确的目标检测模型，支持导出至多种移动端和嵌入式格式。
cvat-ai / cvat
CVAT 是一款开源的计算机视觉数据标注平台，支持图像、视频、音频和3D数据，并提供AI辅助标注与团队协作功能。
modelscope / FunASR
工业级语音识别工具包，支持超实时识别、50多种语言、说话人分离、情绪检测及流式服务。
lance-format / lance
面向多模态AI的开放湖仓格式，性能提升百倍，兼容主流数据工具。
perspective-dev / perspective
基于 Rust + WebAssembly 的高性能数据可视化分析组件，专为海量实时数据流设计，支持 Python/JavaScript 多语言绑定。
bokeh / bokeh
Interactive Data Visualization in the browser, from Python
n8n-io / n8n
公平代码的工作流自动化平台，图形化构建AI工作流，支持自托管与400+集成。
invoke-ai / InvokeAI
InvokeAI是面向专业创作者的稳定扩散模型引擎，提供领先WebUI，支持图像生成与编辑。
autogluon / autogluon
AutoGluon 是一个自动化机器学习库，只需三行代码即可快速构建高精度模型，涵盖表格、文本、图像和时间序列数据。
openai / whisper
一个基于大规模弱监督训练的强大开源语音识别模型。
BuilderIO / builder
支持 React、Vue 等主流框架的可视化无头 CMS，通过拖拽构建页面并输出原生代码。
AykutSarac / jsoncrack.com
将 JSON、YAML、XML 和 CSV 等数据格式转化为交互式图表的开源可视化工具。
apache / seatunnel
SeaTunnel is a multimodal, high-performance, distributed, massive data integration tool.
speechbrain / speechbrain
A PyTorch-based Speech Toolkit
khoj-ai / khoj
自托管的AI第二大脑，集成搜索、问答与自动化，支持多种LLM。
civitai / civitai
Stable Diffusion 模型与资源的社交分享平台
voxel51 / fiftyone
一个用于可视化、分析和优化计算机视觉数据集的开源工具。
chidiwilliams / buzz
Buzz：基于Whisper的离线音频转录与翻译桌面工具
mlfoundations / open_clip
OpenAI CLIP 的开源复现与扩展，支持大规模多模态对比学习与零样本分类。
SharpAI / DeepCamera
Open-Source AI Camera Skills Platform, AI NVR & CCTV Surveillance. Local VLM video analysis with Qwen, DeepSeek, SmolVLM, LLaVA, YOLO26. LLM-powered agentic security camera agent — watches, understands, remembers & guards your home via Telegram, Discord or Slack. Pluggable AI skills. OpenAI, Google, Anthropic or local AI. Runs on Mac Mini & AI PC.
tinacms / tinacms
TinaCMS is the leading open-source headless CMS that supports Markdown and Visual Editing. Your content is stored in your own GitHub repo 🦙 ❤️
komodorio / helm-dashboard
为 Helm 提供缺失的可视化 UI，直观展示和管理 Kubernetes 上的 Helm 发布。