

台北捷运提供捷运AI智能客服,有网友测试后发现,该AI客服可协助产生代码范例,事件在网络揭露后,吸引大批网友讨论、测试,台北捷运公司紧急要求厂商断开与Azure Open AI串接,回复原本的旅客应答功能。
台北捷运表示,接到通报后,已要求厂商立即断开串接Azure Open AI功能,回归到提供旅客常见问答题库,以回应旅客询问,目前旅客询问捷运相关信息,像是首末班车咨询、遗失物协寻服务等等皆正常服务。
由于事件发生后,吸引大批网友测试,导致该服务使用的Token量爆增,可能导致使用生成式AI费用激增,对此,台北捷运强调,接到通报后已立即要求厂商断开串接Azure Open AI,因发现异常即立即处置,并无明显费用产生。
台北捷运初步研判原因为,网友以编程语言测试捷运AI智能客服,超出原先设置的数据库范围,系统通过Azure OpenAI回应,因此台北捷运立即要求厂商断开串接功能,回到北捷已建置的旅客常见问题应答。
由于没有对民众提出的问题请求设限,挡掉和台北捷运旅客服务以外的无关问题,如果长时间遭到外界滥用,可能导致生成式AI巨额的收费外,有心人士可能测试各种提问方式,还可能设法骗取AI客服回应企业内的敏感数据,可能衍生出资安的风险。
对此,台北捷运回应,此次虽然一发现异常就立即处置,所幸没有明显费用产生,但后续将邀请相关单位召开会议,研议AI智能客服精进做法,并请厂商提出检讨报告,由台北捷运公司的资安长督导应用单位创建检核机制。
生成式AI带动一波AI应用浪潮后,不少公司期待运用生成式AI带来的效益,特别是在客户服务方面,因少子化缺工问题,为减轻真人客服的工作压力,导入生成式AI精进AI客服能力,此次台北捷运AI智能客服,反映企业使用生成式AI对外提供服务,类似应用在上线前应该谨慎检测,避免用户提出服务以外的请求,可能导致被滥用,甚至产生资安的风险。