感谢论坛里大佬们的支持,目前汇总了些业务需求

2023-04-03 10:01:20 +08:00
 829939

本人疫情期间在校做的一个小项目,是关于音频特征提取和分析的,可以针对音频领域的各种业务做原型开发。

上周发帖后得到论坛里很多朋友的支持,非常感谢,这给予我很大的动力和信心继续完善audioFlux这个小项目,汇总了一些业务需求和研发任务。

针对不同平台的业务需求:

需求 描述 得票
中文文档 翻译英文文档 2 票
C 命令行工具 提供 C command line 接口功能 2 票
浏览器 wasm 支持 javascript 前端 Web Audio 1 票
Android JNI Android 端 JNI 封装 1 票
iOS swift iOS 端 swift 语言封装 1 票
C# Unity Unity 相应插件 0 票

针对音频领域的研发任务:

任务 描述 得票
智能调音器 针对吉他弦乐乐器的调音,识别音高和拨动的哪一根琴弦 0 票
旋律提取 从音乐音频中识别旋律音高轮廓,主要针对人声唱歌主旋律声音的基频提取 0 票
音轨分离 从音乐音频中分离出人声,钢琴、吉他、鼓、贝斯等多个乐器声音 0 票
和弦估算 识别音乐音频中和弦,和弦类型有大小三、挂 2/4 、属七、属九和弦以及各个类型的转位,包括起始和持续时间 0 票
音乐分类 针对音乐不同流派的分类,包括乡村、流行、民谣、中国风、爵士、摇滚、拉丁、R&B 等 0 票
钢琴转录 针对钢琴乐器音频的复音识别,确定复音的端点、音高组合、持续时间,转录为 midi 或曲谱 0 票

个人时间精力有限,我会按需求和任务优先级逐步开发完善,欢迎大家参与论讨评论投票!!! 后面我会汇总结果确认需求和任务优先级。

本人专业深度学习音频领域研发,能力水平有限,除对 Python 和 C 稍微熟悉外,其它平台业务经验较少,如果你有兴趣可以加入进来一起完善。
项目地址: https://github.com/libAudioFlux/audioFlux

另外,学校为了方便学生研发,我们实验室购买了一些 plus 订阅,自建 chatGPT PDF 相关服务,使用上不用翻墙,速度较为稳定,但是只能用于科研相关。有对研发这块感兴趣的,可以留言,有几个名额可以提供,算是回馈大家的支持吧。

2259 次点击
所在节点    程序员
20 条回复
CMLab
2023-04-03 10:04:37 +08:00
c 命令行+1 ,和弦识别+1
CMLab
2023-04-03 10:07:40 +08:00
@829939 对研发这块很有兴趣,能否有机会中个名额?
829939
2023-04-03 10:12:01 +08:00
@CMLab 留邮箱。
CMLab
2023-04-03 10:13:39 +08:00
@829939 ODk1MzgyMjMyQHFxLmNvbQ==
CMLab
2023-04-03 10:13:51 +08:00
非常感谢哈
602120734
2023-04-03 10:21:46 +08:00
最近正好在做音轨分离相关的模型。投音轨分离一票,期待可以尽快开源
602120734
2023-04-03 10:25:08 +08:00
OTg3NTAwODkyQHFxLmNvbQ== 顺便求个号
829939
2023-04-03 10:38:19 +08:00
@602120734
@CMLab 已发送。感谢支持
xbcslzy
2023-04-03 10:38:33 +08:00
前端人员表示希望大佬可以提供下 C 命令行工具
saxon
2023-04-03 10:43:30 +08:00
和弦估算,这个如果能做的易用的话 会有很多受众。特别是对想入门吉他的新同学
再提一个需求,和弦替换—— 用常见的和弦(姑且称之为新手和弦) 去凑,去尽量还原一个音频的中的和弦

留一个邮箱 121659994@qq.com.
CMLab
2023-04-03 10:47:33 +08:00
@829939 感谢,已收到
602120734
2023-04-03 10:53:53 +08:00
@829939 试了一下,效果不错,基于开源搭的吧,
kingpo
2023-04-03 11:12:35 +08:00
音轨分离,airi88@88.com 感谢
829939
2023-04-03 11:26:13 +08:00
@saxon 和弦替换属于和弦简化,业务上针对吉他新手是个好的建议。
saxon
2023-04-03 11:30:45 +08:00
@829939 这个基于现有功能可以实现吗,我倒是想基于你这个项目 开发这个简化功能。
saxon
2023-04-03 11:31:05 +08:00
不知道难度大不大
829939
2023-04-03 11:42:01 +08:00
@saxon 你说的是和弦替换还是识别?
替换的话属于乐理相关的,我这个项目不支持,识别的话可以基于这个开发,如果这块大家关注多的话,后续我会优先开发基于深度学习的和弦识别模型。
CMLab
2023-04-03 11:48:14 +08:00
@829939 分析论文的好东西,感谢!!!
saxon
2023-04-03 14:07:25 +08:00
@829939 对,和弦替换,就是您提到的和弦简化~
saxon
2023-04-03 14:09:35 +08:00
期待和弦识别模型能尽快上线!

这是一个专为移动设备优化的页面(即为了让你能够在 Google 搜索结果里秒开这个页面),如果你希望参与 V2EX 社区的讨论,你可以继续到 V2EX 上打开本讨论主题的完整版本。

https://www.v2ex.com/t/929317

V2EX 是创意工作者们的社区,是一个分享自己正在做的有趣事物、交流想法,可以遇见新朋友甚至新机会的地方。

V2EX is a community of developers, designers and creative people.

© 2021 V2EX