Quixotic AI:面向 JVM 的本地 AI 开源全栈
qxoticai/qxotic · AI sovereignty for the world's most trusted runtime.
Quixotic AI 为 JVM 提供一套完整的本地 AI 开源技术栈,覆盖分词、模型格式读写、量化矩阵乘法、张量引擎与多模态推理引擎。其推理引擎 jinfer 支持对话、视觉、音频、嵌入、重排序与文本转语音;配套 toknroll(纯 Java 分词器)、jam(面向多 CPU 指令集的量化 matmul)、jota(跨 Java/C/CUDA/HIP/Metal/OpenCL/Mojo 的张量引擎)、gguf 与 safetensors(纯 Java 的模型格式读写)。项目强调无需 Python、无需 ONNX、无需外部服务,AI 可在 JVM 内端到端运行,并支持 GraalVM Native Image。
评论 · 分享第一个看法