1小时前发布
训练数据的来源大致几类:
公开网页。这是主体,包括新闻、百科、论坛、技术文档、开源代码。抓取时会做清洗和去重。
公开数据集。学术机构或者企业发布的语料,有些是专门为训练整理的。
授权内容。与出版方、内容平台达成合作的正式授权数据。
人工标注数据。用于后一阶段的对齐训练,让人来评判回答好坏,模型据此调整。
合成数据。用更强的模型生成、再筛选过的样本,近两年用得越来越多。
至于你上传的内容会不会被用于训练,取决于具体平台的服务条款,各家不同。有的默认不使用,有的默认使用但提供关闭入口。这一点必须自己去看条款,不能凭感觉。
这个问题要分两层看,很多人混在一起。
第一层是「会不会被拿去训练」。这一层看条款和设置,多数主流平台提供了关闭选项,企业版通常默认不用于训练。
第二层是「会不会被别人看到」。这一层跟训练无关,但风险更直接——如果平台的会话可以被分享或者被内部人员查看,那和训练是两件事。
还有第三层,容易被忽略:你在对话里发的链接、上传的文件被人爬走。这不属于平台的责任范围。
实际的处理原则很简单:按敏感程度分级。公开信息随便用;内部资料用企业版并确认条款;客户个人信息、未公开的财务数据、合同原件,不外传,本地处理或者脱敏之后再处理。
几个容易想岔的地方。
以为删掉对话就没事了。删除只影响你的界面,备份和日志里的记录不一定同步清除。
以为用了「隐私模式」就完全隔离。名称不同,实际做法差异很大,要看具体说明。
把整份客户名单粘进去让它整理。这类操作一旦发生,数据已经出去了,事后追不回来。
忽略截图里的信息。传一张系统截图,里面的客户名、价格、手机号全在里面,等同上传数据。
以为免费版和付费版一样。很多平台对免费用户的条款更宽,明确写了内容可能被用于改进服务。
一句话,先看条款,再分类,最后才决定传什么。顺序反了,前面做的都白做。
最多设置5个标签!
训练数据的来源大致几类:
公开网页。这是主体,包括新闻、百科、论坛、技术文档、开源代码。抓取时会做清洗和去重。
公开数据集。学术机构或者企业发布的语料,有些是专门为训练整理的。
授权内容。与出版方、内容平台达成合作的正式授权数据。
人工标注数据。用于后一阶段的对齐训练,让人来评判回答好坏,模型据此调整。
合成数据。用更强的模型生成、再筛选过的样本,近两年用得越来越多。
至于你上传的内容会不会被用于训练,取决于具体平台的服务条款,各家不同。有的默认不使用,有的默认使用但提供关闭入口。这一点必须自己去看条款,不能凭感觉。
这个问题要分两层看,很多人混在一起。
第一层是「会不会被拿去训练」。这一层看条款和设置,多数主流平台提供了关闭选项,企业版通常默认不用于训练。
第二层是「会不会被别人看到」。这一层跟训练无关,但风险更直接——如果平台的会话可以被分享或者被内部人员查看,那和训练是两件事。
还有第三层,容易被忽略:你在对话里发的链接、上传的文件被人爬走。这不属于平台的责任范围。
实际的处理原则很简单:按敏感程度分级。公开信息随便用;内部资料用企业版并确认条款;客户个人信息、未公开的财务数据、合同原件,不外传,本地处理或者脱敏之后再处理。
几个容易想岔的地方。
以为删掉对话就没事了。删除只影响你的界面,备份和日志里的记录不一定同步清除。
以为用了「隐私模式」就完全隔离。名称不同,实际做法差异很大,要看具体说明。
把整份客户名单粘进去让它整理。这类操作一旦发生,数据已经出去了,事后追不回来。
忽略截图里的信息。传一张系统截图,里面的客户名、价格、手机号全在里面,等同上传数据。
以为免费版和付费版一样。很多平台对免费用户的条款更宽,明确写了内容可能被用于改进服务。
一句话,先看条款,再分类,最后才决定传什么。顺序反了,前面做的都白做。
一周热门 更多>