基本信息:
- 专利标题： 多模态数据处理方法、装置、设备和存储介质
- 申请号：CN202311070044.7 申请日：2023-08-23
- 公开(公告)号：CN117216729A 公开(公告)日：2023-12-12
- 发明人： 陈献钊 , 孙广智 , 唐昌礼 , 于文一 , 谭天 , 张超 , 李伟 , 卢璐 , 马泽君
- 申请人： 北京有竹居网络技术有限公司 , 清华大学
- 申请人地址： 北京市平谷区林荫北街13号信息大厦802室
- 专利权人： 北京有竹居网络技术有限公司,清华大学
- 当前专利权人： 北京有竹居网络技术有限公司,清华大学
- 当前专利权人地址： 北京市平谷区林荫北街13号信息大厦802室
- 代理机构： 北京世辉律师事务所
- 代理人： 王俊
- 主分类号： G06F18/40
- IPC分类号： G06F18/40 ; G06F18/25 ; G06N5/04 ; G06F16/332
摘要：
根据本公开的实施例，提供了多模态数据处理方法、装置、设备和存储介质。在多模态数据处理方法中，提供目标界面，目标界面至少包括用于接收视觉内容的第一控件，用于接收音频内容的第二控件和用于接收提示项的第三控件；经由目标界面获取目标视觉内容、目标音频内容和目标提示项；以及在目标界面中显示由目标模型基于目标视觉内容、目标音频内容和目标提示项所生成的内容。由此，可以支持对于多模态内容的理解，从而提高内容生成的质量。