[wip] add mix schema

[lyuwenyu]

PaddleMIX统一多模数据格式

1. 纯文
2. 单图
3. 多图
4. interleaved
5. 音频
6. 视频

功能

1. MIX格式定义和检查
2. MM格式到MIX格式转换Op

---

特殊字段

1. images <-> <image>id</image>
2. audios <-> <audio>id</audio>
3. videos <-> <video>id</video>

[
    {
        'id': '000002b66c9c498e',
        'images': [
                {
                    'id': 0,
                    'url': 'train/000002b66c9c498e.jpg', 
                    'heigh': 100,
                    'width': 100,
                }, 
                {
                    'id': 1,
                    'url': 'train/000002b66c9c498e.jpg', 
                    'heigh': 100,
                    'width': 100,
                }, 
            ],
        'conversations': [
                {
                    'from': 'user', 
                    'value': '<image>id</image><image>id</image> xxxx'
                }, 
                {
                    'from': 'assistant', 
                    'value': 'xxx'
                },
                {
                    'from': 'user', 
                    'value': 'xxxx <image>id</image>'
                }, 
                {
                    'from': 'assistant', 
                    'value': 'xxx'
                }
            ],
    },
]

[paddle-bot]

Thanks for your contribution!