[飞桨多模态大模型套件PaddleMIX开发大赛] rfc & code

[megemini]

本文为 《飞桨多模态大模型套件PaddleMIX开发大赛》 https://competition.atomgit.com/competitionInfo?id=d65b849bc916bd42e1bc5f5ee2562efa 的方案 ～

参赛人员：megemini

请审核是否符合开发要求 ～

[lyuwenyu]

方向没问题；可以开始开发；

ps. 完成后，注意使用<真实图片例子>展示效果；

[paddle-bot]

Thanks for your contribution!

[megemini]

Update 20241222

增加相关算子与示例：

• paddlemix/datacopilot/nn/ 目录中增加 ARNIQA 模型。

  ARNIQA 模型使用 X2Paddle 转换为 Paddle 的模型格式，精度与原模型一致，具体可参考 filter_example.ipynb ～

  由于模型参数文件较大，如有需要请联系作者获取 ～ 或者，可以根据 filter_example.ipynb 中的方法，通过 X2Paddle 转换得到。

• paddlemix/datacopilot/ops/filter/ 目录中增加算子 arniqa 与 brisque

• paddlemix/datacopilot/example/iqa_filter/ 增加了以上算子的具体使用示例

@lyuwenyu 请评审 ～

[lyuwenyu]

不要把这些二进制文档提上来；可以拉到issue里 然后在这放链接；或者打个包后面我给你上传一下

[megemini]

删了吧 ～ 其实就是 ipynb 导出的 pdf ～

[lyuwenyu]

可以的；另外那些图片可以也去掉吗；打个包当到issue里；在ipynb里写一下链接；

[megemini]

删了吧 ～ 图片可以从 https://hf-mirror.com/datasets/adamo1139/llava-instruct-150k-with-images 下载 ～ 我示例里面也说明一下 ～

[lyuwenyu]

这个文档可以放到example对应的文件夹里

[megemini]

done ~