jjzjj

校友会

全部标签

推理飙升2倍!普林斯顿北大校友祭出多头「美杜莎」,33B模型与13B一样快

由于LLM架构固有的内存限制,使得生成又慢又贵。对此,很多大佬都在寻找一种挽救的方法。Karpathy曾多次提出,大模型「投机采样」对于推理时间优化是一个出色的方案。但是,尽管投机解码能够加速生成速度,但因其太过复杂,并没有被许多开发者采用。今天,来自普林斯顿、UIUC等机构的华人团队提出了全新的简单框架:Medusa(美杜莎)。没有额外的草稿模型,研究人员只是引入了几个额外的解码头,微调出「美杜莎头」,能够在单个A100-8GGPU,一天时间内完成训练。结果发现,Medusa直接让模型推理加速约2倍。Vicuna-7b与Medusa为什么LLM生成效率低?从系统角度来看,LLM生成遵循一种「

【“蒙”友会“稿”起来】HarmonyOS 3.1握手Serverless - UI篇

 前言:    此帖主要讲解界面开发,有了此UI界面,之后的结合Serverless认证服务、云函数、云数据库、云存储帖子就有面子了^_^打算这系列结合Serverless不用端云一体化项目开发,在AGC开通好相关配置,然后下载相关json文件,复制到项目中使用,跟着开发文档一步步配置,从中学习到更多的知识,当然初学者,可以创建端云一体化项目学习、开发,更容易上手,然后再尝试创建一个空项目或带模板项目,手工配置Serverless相关设置,本UI项目是基于LoginAbility模板创建的,添加了邮箱注册和手机注册页面。效果:讲解:   1.主界面、包含标题导航组件,登录组件,注册组件,客服与

清华校友立功!谷歌发布首个全科医疗大模型,14项任务SOTA

本文经AI新媒体量子位(公众号ID:QbitAI)授权转载,转载请联系出处。全球首个全科医疗大模型正式发布:由谷歌Research和DeepMind共同打造的多模态生成模型Med-PaLMM,懂临床语言、懂影像,也懂基因组学。在14项测试任务中,Med-PaLMM均接近或超过现有SOTA,前提是所有任务都使用一组相同的模型权重。而在246份真实胸部X光片中,临床医生表示,在高达40.50%的病例中,Med-PaLMM生成的报告都要比专业放射科医生的更受采纳,这表明Med-PaLMM并非“纸上谈兵”,用于临床指日可待。对此,谷歌也自己给出了评价:这是通用医学人工智能史上的一个里程碑。所以,Med

【“蒙”友会“稿”起来】第一篇,聊聊我与“鸿蒙“的故事

因为我是一个花粉,所以一直以来都很关注华为的动态。第一次认识鸿蒙,那是在华为的开发者大会中,虽然很遗憾没有亲临过一次华为开发者大会,但还是一直关注着鸿蒙技术的发展历程。    2019年8月,华为“HarmonyOS”鸿蒙操作系统第一次进入公众视野。功能系统相关人员表示,鸿蒙并非要做iOS的替代,也绝不是要取代安卓,而是要面向万物互联时代。一时间,数码圈沸腾了。中国自己的操作系统诞生了!!!而如今,从鸿蒙刚诞生展示一碰即连,到现在已经完全普及了这个技术。鸿蒙的发展也是越来越好!从一开始的荣耀智慧屏率先搭载鸿蒙系统,到现在的手机,平板..........鸿蒙系统一路以来的发展都一直在我的关注中。

ICML 2023杰出论文奖放榜!北大校友一作斩获大奖,华人作者参与三篇,DeepMind苹果纷纷获选

ICML2023开奖了!今年一共有6篇文章摘得杰出论文奖的桂冠,从32篇候选论文中脱颖而出。官方表示,评选过程包括平均分数筛选,以及程序委员会成员推荐。然后,选出16个主题的论文,再递交给杰出论文奖的评委会。最终,评委会成员根据论文的清晰度、洞察力、创造力,以及未来可能的影响力,选择出最后6篇。下面,就让我们一起来看看这6篇论文吧!Learning-Rate-FreeLearningbyD-Adaptation机构:FAIR,三星AI中心作者:AaronDefazio,KonstantinMishchenko论文地址:https://openreview.net/forum?id=GXZ6cT

ICML2023杰出论文大幅减少至6篇,北大、武理工校友获奖,大模型水印受青睐

ICML全称是InternationalConferenceonMachineLearning,由国际机器学习学会(IMLS)举办,是计算机人工智能领域的顶级会议。今年的ICML大会已是第40届,于2023年7月23日至29日在美国夏威夷会议中心举行。今年,ICML共收到6538份投稿,其中1827份被接收,接收率约为27.9%。相较于2022年,本届的投稿、接收论文数量以及接收率都有所增加(投稿5630篇、接收短论文1117篇、长论文118篇、接收率21.9%)。ICML官方表示,每一份投稿都由领域主席和高级领域主席进行评审,以确保每一份投稿都得到适当的评估。今日,ICML官方放出了杰出论文

Meta重新定义多模态!北大校友共同一作,70亿参数文生图模型击败Diffusion

Meta又来炸场了!就在刚刚,Meta推出了一个基于Transformer的多模态模型——CM3leon,在文生图和图像理解领域都取得了绝对的突破,堪称同类最佳。而且,这种将多模态组合成单一模型,在此前公开的AI系统中是前所未有的。图片显然,Meta的这项研究,为多模态AI定义了一个全新的标准,预示着AI系统完全可以在理解、编辑、生成图像、视频、文本这些任务上自由切换。同时,CM3leon的推出,正式标志着自回归模型首次在关键基准上,与领先的生成扩散模型的性能相媲美。图片论文地址:https://ai.meta.com/research/publications/scaling-autoreg

马斯克官宣成立xAI!挖角谷歌+OpenAI豪华天团,清华校友加入,解密宇宙终极答案

马斯克的野心,终于暴露了!反AI斗士要做自己的AI了,x宇宙又添一员。几小时前,马斯克官宣成立新公司xAI,消息一出,立马引爆了全世界互联网。马院士,果然是要干一票大的!新公司的团队阵容十分豪华,星光熠熠,几乎都是来自谷歌、DeepMind、微软和OpenAI的大牛研究员。并且,这支「梦之队」中1/3是华人。图片ChatGPT爆火没多久,马斯克就忍无可忍地表示:我们需要的不是ChatGPT,而是TruthGPT。今天,马斯克终于如愿,可以做一个探求「最大真理」和「宇宙本质」的AI了。对此,xAI的另一位联合创始人GregYang表示,xAI初创公司将深入研究AI的一个重要领域——深度学习数学,

【“蒙”友会“稿”起来】HarmonyOS 3.1握手Serverless - Email注册账号

前言:     此贴主要讲解Email注册账号,并登录后获得返回的Email地址,本贴是在【“蒙”友会“稿”起来】HarmonyOS3.1握手Serverless-UI篇 基础上开发的,手工集成Serverless配置文件,并且实现Email注册账号,这里为什么要讲手工集成Serverless,而不用新版本DevEco Studio端云一体化开发,端云一体化开发-HTTP触发器的认证类型 这贴子是我之前写的,端云一体化开发,在开发上大大提高工作效力,但我们在学习阶段,还是要知道原理,知道端云一体化开发,都帮我们完成那些手动工作,只要动手实现集成Serverless登录认证、调用云函数、云数据库

MIT韩松创业两年被英伟达收购!3位联创都是清华校友,核心技术在256KB内存训练AI

股价暴涨185%,市值突破1万亿美元。要说今年AI圈谁是最大赢家,相信英伟达肯定在列。虽然已经赢麻,但英伟达还是不甘于只做GPU扛把子,现在又瞄准了另一个市场。这一次的目标是边缘计算芯片。据Theinformation披露,今年2月,英伟达已秘密收购人工智能初创公司OmniML。图片OmniML是一家专注于专注于边缘AI计算的初创公司,MIT韩松是联合创始人之一。图片虽然今年1月,OmniML才宣布与英特尔建立战略合作伙伴关系,但也不耽误英伟达2月立马入局搞收割收购。目前,OmniML官方LinkedIn账号已显示归属英伟达,且在谷歌搜索官方网址https://omniml.ai/,点击后也是