微软Azure OpenAI支持数据微调啦!可打造专属ChatGPT
10月17日,微软在官网宣布,现在可以在Azure OpenAI公共预览版中对GPT-3.5-Turbo、Babbage-002和Davinci-002模型进行数据微调。
使得开发人员通过自己的数据集,便能打造独一无二的ChatGPT。例如,通过海量医疗数据进行微调,构建专注医疗领域的ChatGPT助手,可询问与医疗相关的病历、专业术语、治疗方案等内容。
目前,全球各行业积累了几年甚至几十年的巨量优质数据,如何高效利用、查询这些数据成为一大难题。
通过自有数据微调打造的AI助手可有效解决这一痛点,同时提升内容的准确性、安全性,是组织实现降本增效的利器。
详细微调教程:https://learn.microsoft.com/en-us/azure/ai-services/openai/tutorials/fine-tune?tabs=command-line
微软Azure服务:https://azure.microsoft.com/en-us/products/ai-services/openai-service/
什么是数据微调
大模型数据微调(Fine-tuning)是一种迁移学习方法,用于深度学习和机器学习。通常数据微调是基于一个预训练好的模型(例如,GPT-3.5-Turbo)作为基石,然后在特定的任务数据集(例如,法律、医疗、营销)上进行额外的训练,使模型能生成特定业务领域的内容。
例如,你想训练一个模型来回答法律相关的问题,首先在大量的通用文本数据上进行预训练,然后在医学问答数据集上进行微调。
简单来说,微调功能就是让ChatGPT,完全按照你的数据来生成内容。
需要注意的是,即便你有高质量的数据集,但选择的微调模型性能很差,生成的内容也不会很理想。
而微软提供基于OpenAI的GPT-3.5-Turbo,是一个经过全球数百万开发者验证的高性能成熟模型。
Azure OpenAI新功能
Babbage-002和Davinci-002是微软最新推出的GPT-3基础模型,可生成文本、代码等,没有接受过遵循指令的训练。但在微调、托管服务费用方面更便宜。
Babbage-002取代了已弃用的Ada和Babbage 模型, Davinci-002则取代了Curie和 Davinci。
GPT-3.5-Turbo是OpenAI性能最成熟模型之一,支持多轮深度对话、创建微调数据集、训练和部署等一站式开发服务。
Azure OpenAI微调功能演示
上传数据:微软在Azure OpenAI内置了数据过滤功能,当检测到用户上传的数据集包含非法、歧视等有害信息时,会自动删除这些内容。以下是上传数据集代码示例。
预训练:使用指定模型、训练和验证数据,并设置相应的参数。开发者可将Azure OpenAI Studio用于简单的GUI,或者使用微软的REST API或OpenAI Python SDK。
开始启动微调功能。
完成微调后,将返回评估指标,例如,训练和验证损失等参数。
目前,微软提供数据微调托管服务,用户无需担心任何算力资源问题,只需要选择时间即可。
收费标准:Babbage-002为34美元/小时;Davinci-002为68美元/小时;GPT-3.5-Turbo为102美元/小时。
3)Azure OpenAI 服务中的推理托管:当用户完成微调后,就可以使用模型生成专属内容了。
如果你没有足够的算力资源平台来支撑模型的日常输出,微软同样提供了托管服务。
收费标准:Babbage-002托管每小时1.7美元,Davinci-002每小时1.7美元,GPT-35-Turbo,每小时7美元。
腾讯发布多模态音乐生成模型M2UGen 支持图片、视频生成音乐
M2UGen是一款引领潮流的框架,融合了音乐理解和多模态音乐生成任务,旨在助力用户进行音乐艺术创作。通过其强大的功能,M2UGen提供了全方位的音乐生成和编辑体验。体验地址:https://top.aibase.com/tool/m2ugen站长网2024-01-03 11:02:120002手机就是车钥匙 vivo手机已适配理想汽车全系车型
现在手机和汽车的关联度是越来越高了,很多汽车都支持手机解锁、手机远程控制等,给车主带来了更多便利。快科技9月6日消息,vivo官方宣布,vivo数字车钥匙已适配理想汽车全系车型,在vivo手机智慧桌面,可便捷控制车辆、查看车况信息。理想汽车接入vivo数字车钥匙后,用户携带手机靠近车辆即可完成解锁,远离车辆即可闭锁。而车辆控制,则可以通过负一屏点击车辆控制按钮实现远/近场车控。站长网2023-09-06 21:43:040000三星智能指环 Galaxy Ring 不太可能在 2024 年第一季度随 Galaxy S24 系列正式上市
站长之家(ChinaZ.com)10月8日消息:据韩国媒体TheElec报道,传闻中将于2024年1月与GalaxyS24系列一同发布的三星GalaxyRing,现在预计将在2024年第三季度或2025年第一季度发布。站长网2023-10-08 17:36:560000苹果推俄罗斯套娃式扩散模型MDM 用于生成高质量图像和视频
要点:1.苹果推出了一款新的高分辨率图像生成模型,称为俄罗斯套娃式扩散模型(MatryoshkaDiffusionModels,MDM),用于生成高质量图像和视频。2.MDM采用嵌套UNet架构,结合多分辨率损失和渐进式训练,提高了高分辨率图像生成的效率和质量,同时避免了级联或潜在扩散的复杂性。站长网2023-10-30 17:53:030000tldraw发布病毒式应用 使用GPT-V自动生成网页代码
近日,tldraw发布了一款引人注目的病毒式应用程序,为用户提供了一种全新的软件设计体验。这款应用程序允许用户利用类似绘画的界面迅速设计软件,并通过其强大的GPT-V引擎自动生成相应的Web代码。这一创新功能不仅表现出色,生成的代码健壮可靠,而且还支持自然语言指令,为用户提供了更加灵活和便捷的操作方式。站长网2023-11-23 12:10:050001