6月8日消息,国产多模态大语言模型 TigerBot 近日正式发布,包含70亿参数和1800亿参数两个版本,目前已经在GitHub开源。▲图源TigerBot的GitHub页面据悉,TigerBot带来的创新主要在于:提出指令完成监督微调的创新算法提升模型可学习性。运用ensemble和probabilisticmodeling的方法实现可控事实性和创造性。在并行训练上突破deep-speed等主流框架中的内存和通信问题。此外,该模型还针对中文语言更不规则的分布,从tokenizer到训练算法上做了更适合的优化。研究人员陈烨在虎博科技官网表示:“该模型在只使用少量参数的情况下,就能快速理解人类