中文多模态医学大模型智能分析X光片，实现影像诊断，完成医生问诊多轮对话

01 多模态网络&内生安全 第六届ISC大会

针对工业过程的非线性和多模态特征,提出了一种基于局部近邻标准化(local neighborhood standard ization,LNS)和主多项式分析(principal polynomial analysis,PPA)结合的故障检测算法。首先,将样本数据通过局部近邻标准化(local neighbor standardization,LNS)算法,对每个样本构建k近邻数据集;然后应用k近邻数据集的均值和方差对当前样本进行标准化处理;最后使用PPA对已经标准化处理后的样本建模,计算出T2和SPE统计量,并确定控制限进行故障检测。LNS算法能够去除数据中的多模态特征,而PPA算法能够有效的处理非线性数据,因此LNS-PPA方法能够提高具有多模态非线性特征的工业过程故障检测能力。将该方法应用于多模态非线性数值例子和田纳西伊斯曼(TE)化工过程,并将测试结果与主元分析法(principal component analysis,PCA)、主多项式分析法进行对比,其结果能够有效验证LNS-PPA的优越性。

为解决传统多模盲均衡算法(MMA)在均衡高阶QAM信号时存在的收敛速度慢、稳态误差大等问题,提出了一种基于模拟退火萤火虫优化的小波加权多模盲均衡算法(SA-GSO-WT-WMMA)。该算法在MMA的基础上增加了加权项,并引入了模拟退火萤火虫优化(SA-GSO)算法和正交小波变换(WT),利用加权项自适应地调整算法中代价函数的模值,利用SA-GSO算法极强的全局寻优能力来优化均衡器的初始权向量,利用正交小波变换降低信号的自相关性,有效提高了均衡效果。水声信道仿真实验表明,该算法在降低稳态均方误差和加速收敛速度两方面表现卓越。

这是用NEO4J平台构建一个《人工智能引论》课程的多模态知识图谱相关代码与文件。 知识图谱的经典定义是结构化的语义知识库，是用形象化的图形式来表达出物理世界中的概念以及内部关系。**其基本组成单位是“实体－关系－实体”三元组**，实体间通过关系相互连接形成知识结构网络。而它**也是基于图的数据结构，基本组成是“节点－边－节点”**，从而将知识信息连接成为一个关系网。所以知识图谱主要有**实体、关系、属性**等部分。其中实体表示的某种事物是独立于其他事物的，也是构建图谱最基本的元素；关系表示的是实体与实体之间的关系，用边连接着实体；而属性则用来阐述某一类实体的一些具体的值。这些三元组形式是知识图谱数据层最底层的形式。 图数据库是一种新型的非关系型数据库，无论是节点还是边缘，它的图表都**基于图论**。图论中的基本元素节点和边对应图数据库当中的节点与关系。图数据库的模型是包括**节点、关系以及属性**。它主要存储两类数据：节点和边。节点是实体：如人、成绩、书籍或其他具体事物。边关系：连接节点的概念、事件或事物。

【多模态大模型综述】 使用 gpt3.5 精细翻译，完美融合图片等内容 由微软7位华人研究员撰写，足足119页 它从目前已经完善的和还处于最前沿的两类多模态大模型研究方向出发，全面总结了五个具体研究主题： - 视觉理解 - 视觉生成 - 统一视觉模型 - LLM加持的多模态大模型 - 多模态 agent 本报告一共7位作者。 发起人和整体负责人为 Chunyuan Li。 他是微软雷德蒙德首席研究员，博士毕业于杜克大学，最近研究兴趣为 CV 和 NLP 中的大规模预训练。 他负责了开头介绍和结尾总结以及“利用 LLM 训练的多模态大模型”这章的撰写。 核心作者一共 4位： Zhe Gan Zhengyuan Yang Jianwei Yang Linjie Li 他们分别负责了剩下四个主题章节的撰写。

交互多模(IMM)卡尔曼滤波器机动目标跟踪matlab(非常好).rar

多任务学习的多模式情感分析 使用CMU-MOSI数据库进行情感分析的单峰和多峰单任务，双任务和三任务学习模型。 在单任务模型中，我们执行回归实验以预测情绪得分。 在双任务模型中，我们执行多任务学习实验，这些实验以情感分数回归为主要任务，而强度或极性分类为辅助任务。 在三任务模型中，我们执行多任务学习实验，以情感得分回归为主要任务，强度和极性分类为辅助任务。 在多模式模型中，我们比较了早期融合，晚期融合，分层融合和张量融合网络。 这些代码适用于我们的ACL2018人类多峰语言计算建模研讨会论文： @inproceedings{tian2018polarity, title={Polarity and Intensity: the Two Aspects of Sentiment Analysis}, author={Tian, Leimin and Lai, Cather

设计了一种可用于阵列波导光栅(AWG)解调集成微系统的绝缘体上硅(SOI)基2×2多模干涉(MMI)耦合器，用光束传播法(BPM)对MMI耦合器进行了模拟。耦合器输入/输出波导采用倒锥形，多模干涉区尺寸为6 μm×57 μm。在TE偏振中心波长为1.55 μm时，器件附加损耗为0.46 dB，不均匀性为0.06 dB。在1.49~1.59 μm波长范围内耦合器的附加损耗小于1.55 dB。仿真结果表明所设计的2×2 MMI耦合器体积小、附加损耗低、波长响应范围宽、分光均匀，符合片上集成系统的要求。

利用ZEMAX软件进行多模光纤准直器的设计。在ZEMAX开发环境下建立多模光纤准直器光路系统的理论模型，通过人工优化的方法，设计并制作了可调焦的多模光纤准直器，仿真结果与实际结果相一致，证实了利用ZEMAX进行多模光纤准直器设计的可行性和准确性。利用所建立的模型，分析了各种因素对光纤准直器耦合效率和准直度的影响。