logo
0
0
WeChat Login

AI 模型推理与训练平台

统一集成 LLM 推理、模型微调、图像标注三大能力。

模块功能目录
Llama 推理llama.cpp 高性能推理,支持 Qwen3.5/
LLaMA Factory100+ 大模型零代码微调平台/llamaFactor
SAM3 AN智能图像标注工具/sam3-an

🚀 Llama 推理

./start-llama.sh

访问 http://localhost:11434

模型显存
qwen3.5:27b~20GB
qwen3.5:35b~25GB
curl http://localhost:11434/health # 健康检查 pkill -f llama-server # 停止

🎨 LLaMA Factory 微调

cd llamaFactor pip install -e . llamafactory-cli webui

访问 http://localhost:7860

支持 LLaMA、Qwen、Mistral、DeepSeek 等全参数/LoRA 微调。


🖼️ SAM3 AN 标注

cd sam3-an pip install -r requirements.txt python app.py

访问 http://localhost:5000

支持文本/点击/框选分割,导出 YOLO/COCO 格式。


About

使用llama运行qwen3.5

Language
Python94.7%
JavaScript2.1%
HTML1.2%
CSS1.1%
Others0.9%