简体
  • 简体中文
  • 繁体中文

热门资讯> 正文

Innodata发布开源LLM评估工具包和评估数据集,并宣布新的LLM信任和安全获胜

2024-04-25 20:30

纽约,NY/ACCESSWIRE/2024年4月25日/领先的数据工程公司Innodata Inc.(纳斯达克股票代码:INOD)今天宣布,它已经发布了一个开源的LLM评估工具包,以及一个包含14个半合成和人工制作的评估数据集的存储库,企业可以在企业任务的背景下利用它来评估其大型语言模型(LLM)的安全性。

使用该工具包和数据集,数据科学家可以同时自动测试跨多个危害类别的潜在LLM的安全性。通过识别产生问题输出的准确输入条件,开发人员可以了解他们的人工智能系统如何响应各种提示,并可以识别使系统与预期结果保持一致所需的补救微调。Innodata鼓励企业LLM开发人员开始按原样使用工具包和发布的数据集。Innodata预计,该工具包的商业版本和更广泛、不断更新的基准数据集将于今年晚些时候推出。

随着工具包和数据集的发布,Innodata发布了围绕其LLM安全基准方法的基础研究。在白皮书中,Innodata分享了它使用该工具包对Llama2、Mistral、Gema和GPT进行真实性、毒性、偏见和幻觉倾向基准测试所获得的可复制结果。

工具包、数据集和研究可在GitHub上获得

Innodata于2023年第四季度开始为其一家大型技术客户提供信任和安全方面的服务。在2024年第一季度,Innodata赢得了另外两项LLM安全和评估项目--一项是针对超标定器自己的基础模型,另一项是通过Innodata与超标定器的白标计划为超标定器的企业客户提供的服务。此外,在2024年第一季度,Innodata开始针对LLM信任和安全方面的新客户和现有客户进行试点。

有关低成本管理中的评估和红队的其他信息,请参阅:

关于Innodata

Innodata(纳斯达克股票代码:INOD)是一家全球数据工程公司,向世界上许多最负盛名的公司提供人工智能的承诺。我们提供支持AI的软件平台和托管服务,用于AI数据收集/注释、AI数字转型和特定行业的业务流程。我们的低代码Innodata AI技术平台是我们产品的核心。在每一种关系中,我们都尊重我们30多年的传统,为客户提供最高质量的数据和出色的服务。访问以了解更多信息。

前瞻性陈述

本新闻稿可能包含修订后的1934年证券交易法第21E节和修订后的1933年证券法第27A节所指的某些前瞻性陈述。这些前瞻性陈述包括但不限于有关我们的运营、经济表现和财务状况的陈述。诸如“项目”、“相信”、“预期”、“可以”、“继续”、“可能”、“打算”、“可能”、“应该”、“将会”、“预期”、“表示”、“预测”、“可能”、“估计”、“计划”、“可能”、“可能”、“承诺”或其否定等词语,以及其他类似的表述一般都是前瞻性表述。

这些前瞻性陈述是基于管理层目前的预期、假设和估计,受到一些风险和不确定因素的影响,包括但不限于俄罗斯和乌克兰之间持续的冲突以及哈马斯对以色列的攻击和随后的冲突造成的影响;对大型语言模型的投资;客户可能终止合同;预计或承诺的工作量可能无法实现;可能不会变成工作或预期工作量的管道机会和客户讨论;我们的服务支持的市场继续发展的可能性;我们的客户和潜在客户执行业务计划的能力和意愿,从而对我们的服务提出要求;数字数据解决方案(DDS)部门对基于项目的工作的持续依赖,以及此类合同的主要随意性,以及这些客户减少、推迟或取消项目的能力;可能无法替换已完成、取消或减少的项目;DDS部门的收入继续集中在有限数量的客户;我们对敏捷部门内容提供商的依赖;公司实现收入和增长目标的能力;整合收购、合资企业和战略投资并从其获得协同效应的困难;我们可能收购的公司和企业潜在的未发现的负债;我们收购的公司和企业的商誉和其他收购的无形资产的账面价值的潜在减值;市场状况的持续低迷或低迷;外部市场因素的变化;我们业务或增长战略的变化;现有竞争对手的出现或增长;各种其他竞争和技术因素;我们对信息技术系统的使用和依赖,包括潜在的安全漏洞、网络攻击、隐私泄露或导致未经授权披露消费者、客户、员工或公司信息或服务中断的数据泄露;以及我们向美国证券交易委员会提交的文件中不时显示的其他风险和不确定性。

我们的实际结果可能与前瞻性陈述中提到的结果大不相同。可能导致或促成这种差异的因素包括但不限于第一部分第1A项所讨论的风险。“风险因素”,第二部分,第7项。“管理层对财务状况和经营结果的讨论和分析”,以及我们于2024年3月4日提交给证券交易委员会的Form 10-K年度报告的其他部分,我们可能会向证券交易委员会提交的其他文件对这些报告进行了更新或修订。鉴于这些风险和不确定性,不能保证前瞻性陈述中提到的结果一定会发生,您不应过度依赖这些前瞻性陈述。这些前瞻性陈述仅代表截至本新闻稿发布之日的情况。

我们没有义务更新或审查任何指导或其他前瞻性声明,无论是由于新信息、未来发展或其他原因,除非美国联邦证券法可能要求。

公司联系人

Marcia Novero Innodata Inc.Mnovero@Innodata.com(201)371-8015

来源:Innodata Inc.

风险及免责提示:以上内容仅代表作者的个人立场和观点,不代表华盛的任何立场,华盛亦无法证实上述内容的真实性、准确性和原创性。投资者在做出任何投资决定前,应结合自身情况,考虑投资产品的风险。必要时,请咨询专业投资顾问的意见。华盛不提供任何投资建议,对此亦不做任何承诺和保证。