端云结合多模态融合人机交互在汽车上的应用研究Research on the Application of Multimodal Fusion Human Machine Interaction Combined with Vehicle and Cloud Computing Technologies of Automobiles
郑红丽,刘朝阳,吴明哲,樊永友,蔡旭
摘要(Abstract):
随着芯片技术、通讯技术和云计算技术的快速发展,汽车人机交互向着更加多元化、智能化和个性化不断发展,产生了多模态融合交互概念。为处理复杂的多模态信息,并智能反馈给驾乘人员,建立了多模态人工智能(AI)交互模型,使之成为汽车上的“智慧”大脑。阐述了一种端云结合多模态融合的人机交互解决方案,在充分利用人工智能优势基础上,将云端和车端算力进行有效分解,形成了一套基于AI云端计算、车端辅助计算和执行的多模态融合人机交互应用方案。
关键词(KeyWords): 车云结合;多模态;多模态融合;车载应用;人机交互;交互策略
基金项目(Foundation):
作者(Author): 郑红丽,刘朝阳,吴明哲,樊永友,蔡旭
DOI: 10.19822/j.cnki.1671-6329.20210267
参考文献(References):
- [1]张惠.未来汽车人机交互界面(HMI)设计的发展趋势[J].汽车文摘, 2018(9):2-7.
- [2]杨小英.人工智能技术在汽车领域中的应用研究[J].时代汽车, 2020(9):30-31.
- [3]陈国旗.浅谈人工智能在汽车领域中的应用[J].科技风,2020(8):18-21.
- [4]肖博达,周国富.人工智能技术发展及应用综述[J].福建电脑, 2018(1):98-99+103.
- [5]韩旭萍.人工智能在汽车制造工业中的进展分析[J].自动化与仪器仪表, 2015(4):88-89.
- [6]丘德龙.浅谈人工智能在汽车领域中的应用,[J].内燃机与配件, 2018(10):204-205.
- [7]钱历.浅谈人工智能在汽车领域中的应用[J].科技风,2018(2):130-130.
- [8]丛凯,陈宏,苏征.浅析人工智能技术发展及应用研究[J].数字通信世界, 2019(10):211-211.
- [9]翟启仁.浅析人工智能在汽车设计中的应用——以谷歌无人驾驶汽车为例[J].科技创新导报, 2018(2):87-88.
- [10]杨宁芳,陈春飞.人工智能技术发展及应用研究[J].中国管理信息化, 2020(16):176-177.
- [11]聂仙,徐洋.人工智能技术在汽车电子领域中发展及应用[J].数字化用户, 2018(48):24-24.
- [12]康丽萍.人工智能在汽车驾驶技术领域的应用与发展研究[J].时代汽车, 2020(17):193-194.
- [13]杨小英.人工智能在汽车制造工业中的进展分析[J].时代汽车, 2020(9):30-31.
- [14]付磊,张昶.人工智能在智能网联汽车上的应用进展[J].汽车文摘, 2019(3):40-41.
- [15]于继成,王强,赵目龙,等.智能驾驶-AI芯片的算力研究[J].汽车文摘, 2019(1):31-36.
- [16]NXP. S32V234 Block Diagram[EB/OL].(2019-11-09)[2022-05-05]. https://www.nxp.com/cn/products/processors-an d-microcontrollers/armbased-processors-and-mcus/s32-automotive-platform/vision-processor-for-frontand-surround-view-cameramachine-learning-and-sensor-fusion-applications:S32V234.
- [17] RENESAS. Better computing capabilities and compliance with functionality safety standard[EB/OL].(2021-08-25)[2022-05-05]. https://www2.renesas.cn/cn/zh/solutions/automotive/soc/r-car-h3.html.
- [18] TI. High performance and power efficient DSPs[EB/OL].(2022-03-04)[2022-05-05]. http://www.ti.com/processors/dsp/c6000-dsp/c66x/overview.html.
- [19] XLINXI.ZynqUltraScal+MPSoC Product Tables and Product Selection Guide[EB/OL].(2019-02-22)[2022-05-05].https://china.xilinx.com/support/documentation/selectionguides/zynq-ultrascale-plusproduct-selection-guide.pdf.
- [20] QUALCOMM. SA6155P Product Brief[EB/OL].(2018-01-15)[2022-05-05]. https://www.qualcomm.com/content/dam/qcomm-martech/dm-assets/documents/qul7413_sa6155_productbrief_r2.pdf.
- [21] QUALCOMM. SA8155P Product Brief[EB/OL].(2019-05-10)[2022-05-05]. https://www.qualcomm.com/content/dam/qcomm-martech/dm-assets/documents/qul7413_sa8155_productbrief_r4.pdf.
- [22] NXP. IMX8 Series[EB/OL].(2021-06-14)[2022-05-05].https://www.nxp.com.cn/products/processors-and-microcontrollers/arm-processors/i-mx-applications-processors/i-mx-8-applications-processors:IMX8-SERIES.
- [23] RENESAS. R-Car Gen3 Series[EB/OL].(2020-10-20)[2022-05-05].https://www.renesas.cn/cn/zh/products/automotive-products/automotive-system-chips-socs/r-carh3ne-r-car-h3ne-h3ne-17g-high-end-automotive-system-chip-soc-vehicle-infotainment-and-integratedcockpit.
- [24] SEMIDRIVE. X9 Series[EB/OL].(2020-05-28)[2022-05-05]. https://www.semidrive.com/product/X9.
- [25] WHAIDUZZAMAN M, SOOKHAK M, GANI A, et al. A survey on vehicular cloud computing[J]. Journal of Network and Computer Applications, 2014, 40(4):325-344.
- [26]柳礼,李汝勇.时代汽车,“互联网+”背景下的智能网联汽车[J].时代汽车, 2022(20):22-24.
- [27]陈发堂,张杰棠,何沛,等.移动终端异系统间切换的改进[J].系统工程与电子技术, 2022, 44(8):2668-2676.
- [28]罗宏,黄嘉铭.针对行业用户的5G规划研究[J].广东通信技术, 2020, 40(8):2-4.
- [29]董超,云鹏.基于多维度大数据无线网站址级规划输出方法的研究[J].信息通信, 2020(1):247-248.