ocr能力很差,但是官方的demo是没问题
#2
by
pypry
- opened
你们自己通过llama.cpp测过吗
我用的精度是f16的,llama sever的参数和系统提示词都是参考model card的设定
还有个问题是不管我上传的图片多大,llama sever 都会对图片进行缩放,这样对于大图的识别肯定会有问题。作为对比,我使用minicpm 4.5模型,llama sever会对大图进行分片
我的测试方式是使用llama server跑模型,通过open ai api去访问