第一种:打开一个网页后点击鼠标的右键就会有"查看源文件",操作鼠标右键--->查看源文件即可弹出一个记事本,而记事本内容就是此网页的html代码。
可能会碰到一些网页鼠标右键无反应或提出提示框,那是因为做网页的加入了JS代码来禁止用户查看源文件代码或复制网页内容,但是这种方法也没用,只有你稍微懂得以下第二种方法即可查看此网页的源代码源文件。
第二种:通过浏览器状态栏或工具栏中的点击“查看”
然后就用一项“查看源代码”,点击查看源代码即可查看此网页的源代码源文件。
在微软IE下查看--->源文件即可查看此网页代码在傲游浏览器下截图:查看别人网页的源代码可以为我们制作网页时候有帮助,以后将介绍查看源代码更多方法及怎么运用到别人的源代码文件。三、其它浏览器具体查看html网页源代码方法步骤-TOP首先请打开您的网络浏览器,然后访问任何一个网页。完成上述步骤后,您可以通过以下针对不同网络浏览器的简单步骤快速查看html网页源代码。
1)、Firefox浏览器,请按以下步骤操作:
2)、谷歌浏览器,请按以下步骤操作:或直接谷歌浏览器中使用快捷键“Ctrl+U”即可查看被访网页源代码。对于这些的话,新手朋友可以参考附件里面的知识学习下
一次标准流程的测评能够辅助大家更好的对模型进行深入了解。本文作者分享了自己对大模型进行测评的整个过程,其中有不少可以借鉴的点,供大家参考。
前段时间公司非常看好AI赛道,所以想要将AI能力集合至公司内的产品中,助力产品降本增效。在调研初期,我也走了比较多的弯路,在这篇文章里,详细说说模型测评怎么做,应该如何制作文档有助于汇报。
由于我们是工业低代码产品,在b端中也属于较为复杂的,之前也非常认真的撰写过操作手册、搭建规范,也研究过更为易读的方式,但依旧不能提升用户对产品的熟悉速度,所以公司前段时间希望能够利用AI快速解决这个问题。
之前我一直对测评这件事的目的不是特别明确,除了确定大模型的价格、功能还需要测评什么。一次标准流程的测评能够辅助大家更好的对模型进行深入了解,如验证算法模型的有效性,为技术选型提供依据;发现模型潜在的问题,判断是否可以优化或选择其他模型;还可以识别模型在特定数据集上的表现,这样能够确保它的准确性和可靠性。另外模型测评不是一个人的工作,中间有很多的工作(如性能指标之类的)需要算法同学协助。
以下是我根据工作中遇到的常见评测内容及方法进行的汇总内容(仅供参考),希望能给大家一些帮助。
在正式开始测评前,我们先看一下可能会存在的误区和需要准备的一些资料。
1.模型评测的误区模型评测的一般步骤和流程包括以下几个关键阶段:
3.收集必要信息需要收集模型评测所需的数据、文档等,本次我们公司是想要验证知识库在低代码产品中的可落地性,所以使用的数据为产品的标准培训手册。通常训练数据集需要以下几份不同用法的数据,但是可以根据企业需求进行选择。
在模型评测中,确认企业测评的目的后首先就需要确认所需的测评指标,只有有了指标才能更好的确定模型提问的问题。下面的各项指标用于衡量模型的不同方面,能帮助开发者和决策者了解模型在实际应用中的表现:
大模型基础能力
性能指标
效率指标
稳定性和鲁棒性
安全性和隐私保护
成本效益分析
可扩展性和兼容性
根据指标确定提问问题,本次公司内部主要围绕企业业务场景:提升产品易用性,降低投诉率。需要借助大模型完成以下功能:
通常测评问题可以分为:功能性测评、非功能性测评。功能性的测评是/p>
以我们公司的项目为例,我的功能性测评为:
非功能性测评
产品经理需要制定一套标准的打分指南,能够便于对模型评分进行解释,而不是过于主观的进行评分,示例:
4??:完全满足要求,一字不改。直接采用。
3??:不完全满足,有小瑕疵但可接受。小改之后采用。
2??:不完全满足,有大瑕疵,虽然可以改,但改起来也比较麻烦。不会改,直接抛弃。
1??:完全不满足,都是错的,都是偏题。无法用。
7.数据预处理在我们确认目标并开始测试前,需要对已有的文档进行预处理,因为公司之前的文档是我写给团队内部及合作伙伴的参考操作手册,所以必然存在一些口语上的问题、格式不统一等,为了让大模型更好的理解企业文档中的内容,所以我进行了如下操作:
数据规范化(DataNormalization)
数据清洗(DataCleaning)
真正的测评部分就比较简单了,搭建好流程以后将自己的问题提给大模型,然后进行打分即可。这部分主要说下我们使用的平台-Dify。
Dify是一个开源的大语言模型(LLM)应用开发平台,允许开发者通过直观的界面或者代码方式来创建AI应用,管理模型,上传文档形成知识库,创建自定义工具(API),并对外提供服务。
开发者拥有高度的定制化能力和对项目的控制权,适合那些寻求灵活解决方案的专业开发者,并且企业使用收费不高。
(非
我这边主要介绍一下基础流程,创建账号??接入模型??创建Agent/知识库助手??配置流程??配置提示词(可以对模型角色进行限定,回答的内容会更加精准)??完成。具体的操作大家还是要看下官方手册
官方操作文档:https://docs.dify.ai/v/zh-hans/guides/application_orchestrate/agent
ps:提示词模版(仅供参考):
–Role:企业应用知识库检索助手
–Background:用户需要一个能够快速检索企业知识库并提供专业建议的助手,以解决工作中遇到的问题。
–Profile:作为一个专业的企业应用助手,我具备深入企业知识库、理解用户需求并提供解决方案的能力。
–Skills:知识库检索、问题分析、建议生成、信息整合。
–Goals:提供快速准确的知识库检索服务,帮助用户找到问题的答案并给出专业建议。
–Constrains:检索结果需确保准确性和相关性,建议应基于最佳实践和企业标准。
–OutputFormat:结果应以清晰、条理化的形式呈现,包括直接答案、相关文档链接和进一步的操作建议。
–Workflow:
1.接收用户的检索请求和问题描述。
2.在企业知识库中进行关键词匹配和内容检索。
3.分析检索结果,提取关键信息和建议。
4.向用户提供答案和建议,并根据需要提供进一步的指导。
–Examples:
–用户请求:检索关于“项目管理”的最佳实践。
助手回应:检索到关于项目管理的最佳实践文档,并提供关键点摘要和相关操作步骤。
–用户请求:解决“供应链中断”的问题。
助手回应:提供供应链中断的常见原因分析、预防措施和应急响应方案。
–Initialization:欢迎使用企业应用知识库检索助手。请告诉我您需要检索的内容或需要解决的问题,我将为您提供专业的帮助。
结果分析与可视化是模型评测过程中的重要环节,它帮助我们直观理解模型性能并传达评测发现,使用图表和图形展示结果能够很好的分析模型的优势和不足。将之前评测的不同问题进行打分,然后利用数据可视化工具或者excel转换为图表即可。
撰写报告时明确报告的结构和内容,所处案例和使用场景一定要贴合企业需求,尽可能清晰、准确地呈现评测结果,也便于企业后续进行存档和查阅。
模型优化是一个持续的过程,能够提升模型的性能、可扩展性、和实用性。可以/p>
目前平台的知识库功能已经上线了一段时间,Agent辅助搭建页面、蓝图等功能也内测了好几轮。
总的来说,AI对复杂系统的提效还是挺多的,只是前期要把所需文档准备好,尤其是企业知识库这块,操作手册、公司文档可以说是最重要的东西,系统的操作手册搭建也是需要很长一段时间沉淀下来。
agent辅助功能则需要不断的沉淀系统的标准化场景,尽量给AI提供足够多的样本进行学习,生成的内容会更加符合需求。
以上是一些个人总结,各位看官有疑问可以随时提出,一起讨论。
本文由@13号小星球原创发布于人人都是产品经理,未经许可,禁止转载
题图来自Unsplash,基于CC0协议
该文观点仅代表作者本人,人人都是产品经理平台仅提供信息存储空间服务。