怎样收集用于训练的数据集(购物小票图片)?

10 小时 43 分钟前
 Henryable
我想微调大模型用于从购物小票图片中提取购物信息,大概需要 2000-5000 张真实的购物小票,从网上爬取的样本比较少,想请教一下各位有没有成本较低、切实可行的方式收集数据集
1187 次点击
所在节点    问与答
18 条回复
cooldong287671
8 小时 31 分钟前
超市门口蹲着 或者 小票抽奖
reoah2
8 小时 25 分钟前
为啥不用 ocr ? paddleocr 现在很牛逼了啊
Henryable
8 小时 20 分钟前
@cooldong287671 要收集的数量太多
@reoah2 paddleocr 只能提取文字,我希望得到结构化的数据,需要借助大模型的分析能力
HENQIGUAI
8 小时 3 分钟前
到小红书或者抖音买,不过获取方式确实不太方便
HeyWeGo
7 小时 58 分钟前
意思是要不同格式的小票吧
Muniesa
7 小时 19 分钟前
弄个问卷,审核通过发钱
monkey110
7 小时 11 分钟前
直接去超市买。有些人直接不要小票就走了,打印出来小票都直接留超市了。
gy0624ww
7 小时 8 分钟前
这种不用训练,我之前试过,OCR 出文本加大模型自己整理已经足够好了。
而且我用的 deepseek,小票本来就是格式化的数据
Henryable
6 小时 59 分钟前
@gy0624ww 直接将图片上传给现有的 deepseek 或者豆包等大模型是可以的,准确率和速度都可以,但我希望用自己电脑上的小型模型来做,我试过千问和 deepseek7B 左右的模型,速度很慢,准确率也低
lefthand2006
6 小时 54 分钟前
8 楼说的对,直接找便利店店员,让他给你收集小票,100 元酬劳应该就搞定,不要一次给
gy0624ww
6 小时 13 分钟前
@Henryable #9 都不用上传图片,多模态还贵,就用手机自带的 OCR 功能,解析出文本后给大模型,都能给你整理的好好的。 我调的 deepseek API 接口的。
moudy
6 小时 0 分钟前
直接找小票打印程序,然后自己生成小票呢?
since2021
5 小时 59 分钟前
写个小程序,小票票夹自动统计,数据就来了
zhangli2946
4 小时 0 分钟前
巧用幸存者偏差。
BeautifulSoap
3 小时 55 分钟前
说起来楼上有人说 ocr 效果好,但为什么我试过很多 ocr 效果都很差,而哪怕是 gpt mini 这些模型效果都很好😭
尤其 paddleocr 、deepseek ocr 这些,提取的数据几乎不可用,还有提取测试用的体检报告,体检报告中漏字少字、数字识别问题非常严重
难道是我嫌麻烦直接用的 huggingface 上的 oneline demo 导致的?
Hconk
3 小时 49 分钟前
小红书上搜小票,图片也不少,挨个爬一边,再掺点生成数据
ion1ze
3 小时 45 分钟前
找个做任务的平台,发布任务
weixind
3 小时 41 分钟前
闲鱼:小票打印机。

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/1230938

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX