AIに学習させる上で最も難しかったことは、カメラから見えなくなったボールを正確に追跡することだったという。「ボールは選手の体に隠れて見えないこともあれば、テレビのフレームから外れてしまうこともあります」と、彼は説明する。「したがって、ボールが見えなくなったときに追跡することが課題でした。まず、ボールの行く先をソフトウェアに予測させます。そしてボールが再び現れたときに、ボールを見失ってから再び確認したときまでのギャップを計算し直し、(欠落している)データを埋めて自動的に追跡を再開できるようにします。これが最大の課題のひとつでした」