Commit Graph

101 Commits (f42967ed86c1dadcd22c7c8bc3eb1f9ebefed265)

Author SHA1 Message Date
mudler dcf35dd25f Fixup custom role encoding 1 year ago
mudler e70322676c Allow to customize no action behavior 1 year ago
mudler b3f43ab938 Add a way to disable default action 1 year ago
mudler bbc4468908 Make functions more compatible with OpenAI specs 1 year ago
mudler 55befe396a Add grammar_json to the request parameters to facilitate JSON generation 1 year ago
mudler 483fddccf9 minor fixups 1 year ago
mudler 05aed255db Customize function call in templates 1 year ago
mudler 0f1326b2bd fixups 1 year ago
mudler b722e7eb7e feat: cleanups, small enhancements 1 year ago
mudler f09ddd2983 feat: add grammar and functions call support 1 year ago
Luis López a6839fd238
feat: [whisper] Partial support for verbose_json format in transcribe endpoint (#721) 1 year ago
Ettore Di Giacinto 3593cb0c87
feat: update llama, enable NUMA (#684) 1 year ago
Ettore Di Giacinto 02136531a3
fix: return index and delta in stream token (#680) 1 year ago
Ettore Di Giacinto d3a486a4f8
feat: Add '/version' endpoint and display it in the CLI (#679) 1 year ago
Ettore Di Giacinto 2b957df56c
fix: rename /models/list to /models/available (#678) 1 year ago
Ettore Di Giacinto 78f3c3da48
refactor: consolidate usage of GetURI (#674) 1 year ago
Ettore Di Giacinto 60db5957d3
Gallery repository (#663) 1 year ago
Ettore Di Giacinto a7bb029d23
feat: add tts with go-piper (#649) 1 year ago
Ettore Di Giacinto 2f5feb4841
Add LowVRAM option parameter (#642) 1 year ago
Ettore Di Giacinto 295f3030a9
feat: add typical_p to model parameters (#598) 1 year ago
Ettore Di Giacinto 10ddd72b58
fix: set default batch size (#597) 1 year ago
Ettore Di Giacinto e37361985c
deps: update gpt4all bindings, fix search path on new versions (#592) 1 year ago
Ettore Di Giacinto 84946e9275
feat: display download progress when installing models (#543) 1 year ago
Ettore Di Giacinto c9bbba4872
tests: add llama tests with openllama (#538) 1 year ago
Ettore Di Giacinto 5abbb134d9
feat: extend model configuration for llama.cpp (#536) 1 year ago
Ettore Di Giacinto d62aef2016
feat: add experimental support for falcon-7b (#516) 1 year ago
Ettore Di Giacinto b503725dc7
fix: downgrade gpt4all (#503) 1 year ago
Samuel Maynard 96794851b3
feat: add support for `Stream: true` to completionEndpoint (#465) 1 year ago
Ettore Di Giacinto 78ad4813df
feat: Update gpt4all, support multiple implementations in runtime (#472) 1 year ago
Aisuko c8a4a4f4e9
feat: Add new test cases for LoadConfigs (#447) 1 year ago
Pavel Zloi 3ba07a5928
feat: add LangChainGo Huggingface backend (#446) 1 year ago
Aisuko 49ce24984c
feat: Add more test-cases and remove dev container (#433) 1 year ago
Ettore Di Giacinto f401181cb5
fix: switch back to upstream for rwkv bindings (#432) 1 year ago
Ettore Di Giacinto aacb96df7a
fix: correctly handle errors from App constructor (#430) 1 year ago
Ettore Di Giacinto 217dbb448e
feat: allow to set a prompt cache path and enable saving state (#395) 1 year ago
Ettore Di Giacinto 76c881043e
feat: allow to preload models before startup via env var or configs (#391) 1 year ago
Ettore Di Giacinto bf54b78270
feat: add /healthz and /readyz endpoints for kubernetes (#374) 1 year ago
Ettore Di Giacinto 9decd0813c
feat: update go-gpt2 (#359) 1 year ago
Robert Hambrock 4aa78843c0
fix: spec compliant instantiation and termination of streams (#341) 1 year ago
Ettore Di Giacinto 6f54cab3f0
feat: allow to set cors (#339) 1 year ago
Ettore Di Giacinto 05a3d569b0
feat: allow to override model config (#323) 1 year ago
Ettore Di Giacinto 4e381cbe92
feat: support shorter urls for github repositories (#314) 1 year ago
Ettore Di Giacinto 1fade53a61
feat: minor enhancements to /models/apply (#297) 1 year ago
Ettore Di Giacinto cc9aa9eb3f
feat: add /models/apply endpoint to prepare models (#286) 1 year ago
Ettore Di Giacinto 3f739575d8
Minor fixes (#285) 1 year ago
Ettore Di Giacinto 9d051c5d4f
feat: add image generation with ncnn-stablediffusion (#272) 1 year ago
Ettore Di Giacinto acd03d15f2
feat: add support for cublas/openblas in the llama.cpp backend (#258) 1 year ago
Ettore Di Giacinto a035de2fdd
tests: add rwkv (#261) 1 year ago
Ettore Di Giacinto 2488c445b6
feat: bert.cpp token embeddings (#241) 1 year ago
Ettore Di Giacinto b4241d0a0d
tests: enable whisper (#239) 1 year ago