IBM与NYPD合作的程度以及它与之保密的程度,是科技公司与政府合作建立监控系统而无需公众监督的一个令人担忧的例子。多年来,人工智能这样的新技术加强监控的能力令隐私权拥护者担忧。我们不仅知道这样的系统可能具有种族偏见,而且没有明确的法规来规范它们的使用。
据报道,纽约警察局于2007年首次通过微软子公司Vexcel购买了IBM的视频分析软件。该技术于2010年3月开始在纽约市反恐指挥中心进行测试,该指挥中心是曼哈顿下城安全计划的一部分。纽约警察局发言人彼得唐纳德告诉The Intercept,该软件当时运行在该中心512台摄像机中的不到50台摄像机上。
据报道2012年,IBM正在根据纽约人的身体和面孔特征测试视频分析软件,这些数据来自于公开参与时捕获和存档的物理数据,然后该公司利用这一镜头改进其搜索功能,让运营商建立根据年龄,性别,头发颜色,面部毛发和肤色查找人物的功能。但是,纽约警察局表示它从未真正使用这些功能,希望避免出现任何类型的技术问题。虽然IBM向NYPD提供了具有种族或肤色搜索功能的工具,但是被纽约警察局明确拒绝了。
然而,前IBM研究员Rick Kjeldsen表示他在2009年至2013年间参与了NYPD项目,而纽约警察局表示,它在2016年停止使用IBM的技术,IBM则对此发表声明称其仍然绝对致力于负责任地推进新技术。