数字金融行业周报 | 要闻速览(11.25-12.1)嘉宾云集!2024第12届...

此次修订主要内容包括:一是扩大资产风险分类的覆盖范围,除特殊情形外将所有投资资产纳入分类范围。二是完善固定收益类资产分类标准。调整本金或利息的逾期天数、减值准备比例标准等,与商业银行保持一致;增加利益相关方风险管理状况、抵质押物质量等内容,丰富风险分类标准的内外部因素。三是完善权益类资产、不动产类资产风险...

GPT-4o、NotebookLM带来的AI语音新变化,声网们是怎么想的?

首先必须选一个比较好的模型基座,根据自己应用场景选百亿参数模型、千亿参数模型还是端侧模型。第二需要配备组织,如果组织含AI形态,大家很难把大模型用起来,对大模型也有要求,在数据资产积累过程中去探索不同的业务场景大模型能带来哪些提效,这个才能在大模型时代带来一些新的能力。阿里云智能集团通义千问高级产品...

让普通用户秒变视频创作大神! AI 视频生成模型CogVideoX v1.5还可...

端到端视频理解模型:用CogVLM2-caption模型生成精准的视频内容描述,提升文本理解和指令遵循能力。三维变分自编码器(3DVAE):视频数据压缩:基于3DVAE将视频数据压缩至原来的2%,降低训练成本和难度。时间因果卷积:采用时间因果卷积的上下文并行处理机制,增强模型的分辨率迁移能力和时间维度上的序列独立性。

AI日报:复旦、百度新模型可生成1小时长视频;全新ChatGPT Windows...

??音频概览功能升级,用户可自定义引导AI对话内容。????新增后台收听功能,用户可同时工作和收听音频。??商业版试点计划启动,企业可提前体验新功能并获得支持。4、复旦、百度联手打造全新AI模型Hallo2可生成4K超高清+1小时超长视频!复旦大学和百度公司联合开发的Hallo2AI模型将彻底改变人物动画生成的现状...

开源模型进展盘点:最新Mixtral、Llama 3、Phi-3、OpenELM到底有多...

论文《IsDPOSuperiortoPPOforLLMAlignment?AComprehensiveStudy》中给出了大量实验的结果,但其中的主要结论是:PPO通常优于DPO,且DPO更容易受到分布外数据的影响。这里,分布外数据的意思是LLM之前训练所用的指令数据(使用监督式微调)不同于DPO所用的偏好数据。举个例子,一个LLM首先在常...

NotebookLM爆火背后:AI原生产品的核心洞察与创新

Raiza:Gemini模型非常强大,我们使用的是Gemini1.5Pro作为NotebookLM的基础模型(www.e993.com)2024年12月19日。在此基础上,我们还有一个强大的语音模型和音频模型。但我认为,真正的秘诀在于我们打造的一个叫做“内容工作室”(ContentStudio)的工具。你可以在NotebookLM中看到这个工具的线索,当你打开NotebookGuide时,它会采取一种有判断倾向的方...

...揭秘;AI音乐发展史:罗马不是一天建成的;音乐生成模型 | ShowMeAI

Suno找到了创新的解决方案:TTS训练过程的主要限制是「texttospeech」训练数据非常有限,所以MikeyShulman他们另起炉灶,直接在audio(音频)数据上进行训练,然后tweak(调整)模型使其能执行文本到语音的任务。你可以理解为,他们将音频数据转换成了「tokens」,然后利用这些音频tokens进行自监督学习(self...

OpenAI o1:使用限额提高,o1 模型深度解析

??预训练一个语言模型(LM):通过经典方法预训练一个语言模型,使其具备基本的语言生成能力。??聚合问答数据并训练一个奖励模型(RewardModel,RM):基于人类偏好数据训练奖励模型,为后续的强化学习提供反馈机制。??用强化学习(RL)方式微调LM:使用奖励模型提供的反馈,通过强化学习算法(如PPO)对预训练...

大模型盲测竞技场放榜:国产黑马冲进世界七强,中文并列第一

智东西5月22日报道,周二,知名大模型竞技场LMSYSChatboatArena盲测评测结果更新,国内大模型独角兽零一万物的千亿参数闭源大模型Yi-Large在最新总榜中排名世界第七,中国大模型中第一,超过Llama-3-70B、Claude3Sonnet;其中文分榜更是与GPT-4o并列第一。

大模型扫盲系列——大模型实用技术介绍(上)

LMHead参数:这部分参数是模型参数最后一个组成部分,模型的最后一层是一个分类头,这层主要功能就是输出对所有tokenizer分类的概率,一般都是由一个线性层构成,也是模型最后输出结果的层。从代码可以知道,这层的参数量是:3072*256128=786,825,216...