Detección de línea en una imagen de hoja musical en Android

Question

Estoy trabajando en el proyecto de Android sobre reconocimiento de música óptica. Tomo una foto de una partitura a través de una cámara móvil y trato de reconocer las notas y los símbolos. Estoy muy familiarizado con la metodología después del preprocesamiento, pero este tipo de trabajo generalmente se realiza con la ayuda de un escáner. (en cambio tengo que usar una cámara móvil)

Intuitivamente, usé primero la transformada de hough para detectar pentagramas (líneas del pentagrama), luego calculo el ángulo entre ellos y el eje horizontal y giro la imagen tanto como el ángulo. Esto podría funcionar teoraticamente pero encuentra segmentos de linea y el angulo de estos segmentos no son consistentes. Así que no funcionó. (Tal vez por el efecto de la perspectiva)

Después de eso, probé muchos algoritmos de detección de bordes y búsqueda de líneas, pero ninguno de ellos funcionó estable. (incluida la rotación del dominio de frecuencia y los detectores del segmento de línea)

Ahora estoy pensando en un nuevo enfoque similar al de los escáneres de documentos en Android. Intento convertir mi imagen en un formulario como documento escaneado. Quiero alinear mi imagen con el eje horizontal y deshacerme del efecto debido a la inclinación y la perspectiva.

Me pregunto si alguien tiene alguna idea sobre cómo lograr este "escaneo de documentos". O si tiene alguna idea sobre cómo alinear el documento o la detección de línea estable, sería más que útil para mi trabajo futuro. Gracias.

Answer 1

Puede simplemente medir la altura de la barra superior o inferior a la izquierda y la derecha de la hoja, y calcular el ángulo a partir de esa. La única dificultad puede ser encontrar un buen punto para medir la altura automáticamente (es decir, encontrar qué columna escanear verticalmente para el pentagrama). Una forma de hacerlo más robusto sería verificar 6 o cuántos píxeles negros consecutivos estén separados por zonas blancas de ancho casi constante. Cuando lo encuentre, está seguro de que no hubo notas sueltas o símbolos que arrojen la medición.

Answer 2

primero deberá remover las distorsiones de la cámara:

http://en.wikipedia.org/wiki/Distortion_(optics)#Software_correction

Siguiente, siguiente forma de aplicación de openOMR, puede utilizar el siguiente fragmento de código para realizar la FFT a fin de encontrar el ángulo de toda la imagen es sesgada en:

http://www.koders.com/java/fid38ED5C64ADB6C4F5F01FB05FB08744AF159A8244.aspx?s=FFT#L23