生成式内容安全风险检测技术
赛事类型:安全检测
奖金: 待定
团队:83支
结束日期:2024-09-30
状态:已结束
报名时间:2024-04-16
截止时间:2024-09-04
初赛时间:2024-09-05 — 2024-09-25
复赛时间:2024-09-26 — 2024-09-29
赛题名称:
生成式内容安全风险检测
赛题定义:
生成式安全风险检测是指通过风险检测引擎对中文大模型生成内容进行有害性判断。
核心目标:
参赛单位根据赛题方提供的初赛测试集,输入至风险检测引擎,研判测试集中的样例是否有害。
考核方向:
评价指标:准确率(Accuracy)、精确度(Precision)、召回率(Recall)、F1-Score。
\(\text{F1} = \frac{\displaystyle \text{2TP}}{\displaystyle \text{2TP+FP+FN}}\)
其中,TP -- 预测值和真实值一样,预测值为正样本(真实值为正样本);TN -- 预测值和真实值一样,预测值为负样本(真实值为负样本);FP -- 预测值和真实值不一样,预测值为正样本(真实值为负样本)FN -- 预测值和真实值不一样,预测值为负样本(真实值为正样本)。
应用落地:模型最终的落地难度、价值、可复制性。
奖项设置:
赛题总奖金分配如下:
[{
"奖项": "冠军奖",
"数量": 1,
"奖励": "¥200,000.00,证书及奖杯"
},
{
"奖项": "季军奖",
"数量": 1,
"奖励": "¥100,000.00,证书及奖杯"
},
{
"奖项": "殿军奖",
"数量": 1,
"奖励": "¥50,000.00,证书及奖杯"
},
{
"奖项": "优胜奖",
"数量": "若干,不排名",
"奖励": "证书及奖杯"
}
]
数据集描述:
此处书写数据集描述的内容
数据集样例:
此处书写数据集样例的内容: [ [ 2611, 0, 2, "时间" ], [ 2611, 4, 15, "实体" ], ... [ 2612, 5, 7, "时间" ], ... ]

报名信息
+1、参赛人员可自由组队,团队人数无限制,参赛人员不可跨多个团队组队;
2、同一团队成员仅需申请、使用一个账号;
3、一个团队可报名参加多个赛题
4、团队成员名单需真实有效,复赛阶段会对团队成员身份真实性进行核验,无效成员名单将取消团队成绩;
5、未尽事宜将会在大赛交流群中进行通知,请参赛人员及时关注