Yann LeCun, mi asesor en NYU, escribió un dialecto orientado a objetos de lisp llamado Lush mientras trabajaba en Bell Labs. Se siente como un MATLAB liso, y está orientado a la creación rápida de prototipos de experimentos numéricos y la investigación de aprendizaje automático. Se instala fácilmente si está usando Linux o Mac OS. A fines de la década de los 90, una buena parte de los cheques en los EE. UU. Fueron leídos por la red LeNet-5 que escribió en Lush.
Lo usamos para la mayoría de nuestra investigación, ya que tiene tanto soporte para redes neuronales convolucionales, álgebra lineal, y tiene un fácil FFI C/C++ para todo lo demás. También viene con un código de demostración para implementar redes neuronales y redes convolucionales para la clasificación de imágenes y caracteres, que es probablemente el lugar donde te gustaría comenzar.
Está en los repositorios de Ubuntu, pero es probable que desee la última versión desde aquí:
http://lush.sourceforge.net/
http://masonium.com/blog/2011/02/08/cl-fann-released/ acaba de salir. No tengo experiencia con eso, pero podría ser útil. –