提示词
请用恰好 5 条 bullet 总结 llama.cpp 本地推理相比云端 API 的优势。硬性要求:每条必须以动词开头、每条不超过 20 个字、且 5 条合计提到的优势不超过 3 个不同方面。
思考模式: False
{"completion_tokens": 18, "prompt_tokens": 64, "total_tokens": 82, "prompt_tokens_details": {"cached_tokens": 0}}{"prompt_ms": 174.589, "predicted_ms": 366.662, "prompt_per_second": 366.57521378781024, "predicted_per_second": 46.36422645379124}