繁體
  • 简体中文
  • 繁體中文

熱門資訊> 正文

Innodata發佈開源LLM評估工具包和評估數據集,並宣佈新的LLM信任和安全獲勝

2024-04-25 20:30

紐約,NY/ACCESSWIRE/2024年4月25日/領先的數據工程公司Innodata Inc.(納斯達克股票代碼:INOD)今天宣佈,它已經發布了一個開源的LLM評估工具包,以及一個包含14個半合成和人工製作的評估數據集的存儲庫,企業可以在企業任務的背景下利用它來評估其大型語言模型(LLM)的安全性。

使用該工具包和數據集,數據科學家可以同時自動測試跨多個危害類別的潛在LLM的安全性。通過識別產生問題輸出的準確輸入條件,開發人員可以瞭解他們的人工智能系統如何響應各種提示,並可以識別使系統與預期結果保持一致所需的補救微調。Innodata鼓勵企業LLM開發人員開始按原樣使用工具包和發佈的數據集。Innodata預計,該工具包的商業版本和更廣泛、不斷更新的基準數據集將於今年晚些時候推出。

隨着工具包和數據集的發佈,Innodata發佈了圍繞其LLM安全基準方法的基礎研究。在白皮書中,Innodata分享了它使用該工具包對Llama2、Mistral、Gema和GPT進行真實性、毒性、偏見和幻覺傾向基準測試所獲得的可複製結果。

工具包、數據集和研究可在GitHub上獲得

Innodata於2023年第四季度開始為其一家大型技術客户提供信任和安全方面的服務。在2024年第一季度,Innodata贏得了另外兩項LLM安全和評估項目--一項是針對超標定器自己的基礎模型,另一項是通過Innodata與超標定器的白標計劃為超標定器的企業客户提供的服務。此外,在2024年第一季度,Innodata開始針對LLM信任和安全方面的新客户和現有客户進行試點。

有關低成本管理中的評估和紅隊的其他信息,請參閱:

關於Innodata

Innodata(納斯達克股票代碼:INOD)是一家全球數據工程公司,向世界上許多最負盛名的公司提供人工智能的承諾。我們提供支持AI的軟件平臺和託管服務,用於AI數據收集/註釋、AI數字轉型和特定行業的業務流程。我們的低代碼Innodata AI技術平臺是我們產品的核心。在每一種關係中,我們都尊重我們30多年的傳統,為客户提供最高質量的數據和出色的服務。訪問以瞭解更多信息。

前瞻性陳述

本新聞稿可能包含修訂后的1934年證券交易法第21E節和修訂后的1933年證券法第27A節所指的某些前瞻性陳述。這些前瞻性陳述包括但不限於有關我們的運營、經濟表現和財務狀況的陳述。諸如「項目」、「相信」、「預期」、「可以」、「繼續」、「可能」、「打算」、「可能」、「應該」、「將會」、「預期」、「表示」、「預測」、「可能」、「估計」、「計劃」、「可能」、「可能」、「承諾」或其否定等詞語,以及其他類似的表述一般都是前瞻性表述。

這些前瞻性陳述是基於管理層目前的預期、假設和估計,受到一些風險和不確定因素的影響,包括但不限於俄羅斯和烏克蘭之間持續的衝突以及哈馬斯對以色列的攻擊和隨后的衝突造成的影響;對大型語言模型的投資;客户可能終止合同;預計或承諾的工作量可能無法實現;可能不會變成工作或預期工作量的管道機會和客户討論;我們的服務支持的市場繼續發展的可能性;我們的客户和潛在客户執行業務計劃的能力和意願,從而對我們的服務提出要求;數字數據解決方案(DDS)部門對基於項目的工作的持續依賴,以及此類合同的主要隨意性,以及這些客户減少、推迟或取消項目的能力;可能無法替換已完成、取消或減少的項目;DDS部門的收入繼續集中在有限數量的客户;我們對敏捷部門內容提供商的依賴;公司實現收入和增長目標的能力;整合收購、合資企業和戰略投資並從其獲得協同效應的困難;我們可能收購的公司和企業潛在的未發現的負債;我們收購的公司和企業的商譽和其他收購的無形資產的賬面價值的潛在減值;市場狀況的持續低迷或低迷;外部市場因素的變化;我們業務或增長戰略的變化;現有競爭對手的出現或增長;各種其他競爭和技術因素;我們對信息技術系統的使用和依賴,包括潛在的安全漏洞、網絡攻擊、隱私泄露或導致未經授權披露消費者、客户、員工或公司信息或服務中斷的數據泄露;以及我們向美國證券交易委員會提交的文件中不時顯示的其他風險和不確定性。

我們的實際結果可能與前瞻性陳述中提到的結果大不相同。可能導致或促成這種差異的因素包括但不限於第一部分第1A項所討論的風險。「風險因素」,第二部分,第7項。「管理層對財務狀況和經營結果的討論和分析」,以及我們於2024年3月4日提交給證券交易委員會的Form 10-K年度報告的其他部分,我們可能會向證券交易委員會提交的其他文件對這些報告進行了更新或修訂。鑑於這些風險和不確定性,不能保證前瞻性陳述中提到的結果一定會發生,您不應過度依賴這些前瞻性陳述。這些前瞻性陳述僅代表截至本新聞稿發佈之日的情況。

我們沒有義務更新或審查任何指導或其他前瞻性聲明,無論是由於新信息、未來發展或其他原因,除非美國聯邦證券法可能要求。

公司聯繫人

Marcia Novero Innodata Inc.Mnovero@Innodata.com(201)371-8015

來源:Innodata Inc.

風險及免責提示:以上內容僅代表作者的個人立場和觀點,不代表華盛的任何立場,華盛亦無法證實上述內容的真實性、準確性和原創性。投資者在做出任何投資決定前,應結合自身情況,考慮投資產品的風險。必要時,請諮詢專業投資顧問的意見。華盛不提供任何投資建議,對此亦不做任何承諾和保證。