Scraper para XBMC de Culturalia.net

1, 2, 3
Hola a todos.

Antes de nada saludar en general a todos los integrantes de esta comunidad.

El motivo de este post es hacer público que he desarrollado un scraper para XBMC que permite obtener la información de las películas de la web culturalia.net

Para los que seais fans del XBMC seguramente sepais que el XBMC incorpora un buscador de datos para rellenar fichas de las películas que tengamos (en la X, en discos o incluso en un PC de nuestra red casera).

Esta funcionalidad, aunque chula no era muy interesante para los hispano hablantes ya que la información de las películas se buscaba en http://www.imdb.com.
Esta web aunque bastante completa tiene el gran defecto de estar casi toda en inglés, lo que hacía que nuestras fichas no quedaran todo lo lucidas que podrían.

Bueno, pues en las últimas versiones del XBMC los programadores del mismo han abierto dicha funcionalidad permitiendo que programadores externos puedan desarrollar parsers (scrapers) para obtener la información de otras webs distintas a IMDB.

De hecho ya existen varios scrapers que se distribuyen con XBMC y que extraen los datos de webs francesas, chinas, etc.

Pero faltaba una en Español, y viendo que nadie se animaba decidí intentarlo por mi mismo.

El resultado es culturalia_beta2.xml, un scraper que extrae toda la información necesaria para rellenar las fichas de todas nuestras películas en castellano. Hasta los posters son en Español, y bastante grandes.

Si quereis información adicional del scraper podeis ir al foro de desarrollo de xboxmediacenter.com donde iré publicando los avances. (lamentablemente en inglés) http://www.xboxmediacenter.com/forum/showthread.php?t=24970

De momento el xml no es público, más que nada porque estoy esperando tener permiso de los administradores de la web de culturalia para distribuirlo.

Lo que si puedo hacer es dejarlo a un grupo reducido de beta testers que estén interesados.

Los únicos requisitos son:

1. Estar familiarizado con XBMC y con los procedimientos de actualización de programas en la XBOX (vamos, ke sepan ftpar algo sin tener que preguntar)

2. Tener una versión MUUUUY reciente de XBMC. Las funcionalidades abiertas de IMDB están sólo desde la v2.0.1 del XBMC e incluso esta versión da algunos problemas. Por ejemplo no van bien los acentos y eñes. Yo recomiendo la revisión 7841 o superior.

3. Estar dispuesto a jurar sobre la tumba de todos sus ancestros que no distribuirá el scraper hasta que tengamos permiso de culturalia.net para hacerlo.

Y ya está... si creeis que os puede interesar no dudeis en escribir.

Un saludo,

Jur.
Aunque no tengo ni he bajado nunca caratulas, te animo a que continues, yo lo quiero probar, culturalia es una pagina muy buena con multitud de peliculas... un saludo y sigue con esto que seguro le va a interesar a toda la comunidad xboxer.
Puta madre, haber si el proyecto tira viento en popa. Yo usa la x de reproductor, y le acabo de hacer una pequeña expansión y ahora tiene 500gb, así que no me importaria colaborar, solo dime en que carpeta tengo que poner el programa y si quieres me ofresco de betatesters.

Saludoss
Yo estoy interesado en usar esta funcion y ser un beta testers, yo al principio usaba esa funcion, pero al estar en ingles, algunas pelis no las encontraba, otras las ponia mal, un rollo, finalmente carge todas las caratulas de forma individual, la verdad es que simpre me gusto esta opción, solo tengo un problema yo de ingles ni papa, por lo que no podre seguir los avances en la web oficial, pero si eso no inporta, te paso mi correo para lo que quieras, losfumaos@gmail.com, un saludo.
Me parece una idea genial, yo lo estoy usando, en ingles logicamente, pero si hay la posibilidad de verlo en castellano yo me apunto.
Un saludo.
Hola chicos,

Gracias por vuestro interés.

Durante el día de ayer estuve arrenglando los problemillas principales que daba con casos especiales y ahora tiene una pinta bastante buena. Ayer estuve actualizando mi biblioteca (una 200 pelis) y todas iban de vicio.

Voy a escribir unas pequeñas instrucciones de instalación y uso en castellano para los interesados en participar en la beta.

Lo único fundamental es que hay que tener una versión moderna de XBMC. Yo tengo la revisión 7841 del 16/02/2007 y va perfecta.
Así que, por favor, a los interesados os ruego que antes de nada consigais esta o una superior. Las anteriones posiblemente os den problemas con los acentos o no funcionarán en absoluto.

Posteo las instrucciones aquí y a los que me vayan dando el Ok de que tienen una versión adecuada les haré llegar el scraper.

No he tenido respuesta de la gente de culturalia. Si siguen sin contestar seguramente aplique el refrán de quien calla otorga y lo haga publido directamente...

Hasta dentro de un ratito.

Jur.
Me parece un proyecto cojonudo xD, como bien dices ya se vienen añadiendo varios scrapers (incluso uno de videos porno xD) y uno en español estaría muy bien aunque yo ya estoy familiarizado con el ingés.
Yo estoy dispuesto a echarte una mano en todo lo que pueda, gracias por la aportación que tienes entre manos y saludos.

Salut!
Yo esta tarde le pongo esa version que tu dices la del 16-02-07, asi que quedo a la espera de que me mandes el archivo y las instrucciones, Gracias.
Yo tengo la versión XBMC 2.01 rev7841, de ingles ni papa, pero tambien tengo unas 200 pelis en la videoteca :p , juas si este proyecto funciona y las caratulas se ven bien va estar de puta madre.

Ta luegoo
Lo bueno se hace esperar y cuando me pongo a escribir se me van el santo al cielo...

Pero ya está. La beta 2 lista para partir...

Como prometí esta mañana he creado un pequeño? ficherito de instrucciones. Éste, como todo, acepta vuestras opiniones y mejoras. Sobre todo la parte de instalación que nunca sé si me quedo corto en explicaciones o me paso...

Os diré que Culturalia no ha contestado por lo que aún no puedo/debo distribuir la beta libremente.

Pero como tampoco quiero ser esclavo de las peticiones de entrar en la beta, esto es lo que vamos a hacer.

Yo voy a adjuntar a este post los archivos necesarios para instalar la Beta en vuestras X en un zip llamado culturalia_beta2.zip

Este Zip contiene 3 archivos:

- Lee ESTO primero.txt: Las instrucciones de instalación y uso. Yo me he pasado 5 horas escribiéndolo (desde mi anterior post) así que os ruego que lo leais antes de preguntar cosas que estén ahí recogidas... no es mucho pedir, ¿no?
-Culturalia_beta2.xml: el scraper propiamente dicho.
-Culturalia_beta2.gif: el logo para la selección de scraper.

Toda persona que quiera formar parte de la fase de pruebas beta debe mandar un post en este thread y esperar que yo le informe por un privado, por correo o añadiéndole a la lista oficial de beta testers que se muestra más abajo.

Tened en cuenta que en esta fase no contestaré preguntas de gente que no pertenezca a los "probadores oficiales".

Cuando la beta sea pública (espero que Culturalia conteste cuanto antes) todo este royo no hará falta (creedme, es más incómodo para mi que para vosotros).

¿Por qué toda esta tontería? Es sencillo. Me da igual publicar el zip que mandarlo por correo que cualquier otro medio. Si alguien quiere hacerlo público, lo hará. Así que si me arriesgo a que a culturalia le siente mal y decida tomar acciones contra mi, por lo menos que sea verdad que lo publiqué yo, ¿no? Así no me podré volver contra ningún beta tester.
********** CAMBIO DE POLITICA **********
PRUEBAS BETA LIBRES. Si quieres probar el scraper, adelante. Si ves algo extraño o necesitas ayuda manda un mensajito...
Si quieres participar oficialmente en la beta aplica lo de siempre (ver arriba)
********** CAMBIO DE POLITICA **********

Bueno, dicho lo cual.

LISTA DE PROBADORES BETA AUTORIZADOS:

    Nick/Estado/VerXBMC/Skin
    javiolo_x/Activo/rev7841/xTV
    pavilion3/Pendiente/160207/?? (averigua la rev exacta porfa)
    Jpg2/Pendiente/??/??
    josolehd/Activo/rev7841/xTV
    TOOKiE/Pendiente/??/??
    speed/Activo/rev7841/PMIII-XBC-MC360


Para los que no la habéis dado, por favor mandar vuestra versión exacta de XBMC y que skin estais usando preferentemente, más que nada para estar al tanto de los posibles problemas.

Al entrar en la beta os comprometeis a informar de los problemas que encontreis y perseguirlos hasta que se solucionen. Si a alguien no le apetece que pida ser excluido.
No os preocupeis por el inglés ya que vamos a llevar las pruebas por aquí. Al fin y al cabo es algo para españoles... Hasta que no sea beta pública no la subiré al sitio oficial.

Al resto os animos a que os apunteis y empecemos a darle algo de empaque a la escena española que está algo paradilla...

Sal&2.

Jur.

Adjuntos

Bueno jurrabi me pongo con ello haber que tal me va, limpiaré mi biblioteca y utilizaré el nuevo scraper.

P.D; Tengo la rev.7841 skin xTV

Saludos y ya diré cosas!
Espero que te vaya bien.

Ya me contarás.
Voy a comentar mi primera toma de contacto con dicho raspador, ya que hoy no voy a poder hacer más pruebas con el mismo, daré una primera impresión para cotejar los resultados con lo de los otros probadores, mañana ya miraré de "jugar" más con el.

Una vez instalado el scraper en su correspondiente carpeta, al arrancar el XBMC he ido a Vídeos, posteriormente en Video he procedido a fijar el scraper mediante Setcontent, lo he seleccionado y ok. Dentro de Video tengo una carpeta de Películas, he vuelto a darle a Setcontent y ya me salía como fijado el sacraper de culturalia, hasta aquí todo ok.

Después al entrar en dicha carpeta he seleccionado la primera película y al darle obtener información sobre la película, para mi sorpresa veo que la información es la del imdb, tanto la carátula como la ficha, he seguido porbando con varias películas y seguía cargandome la información de imdb.

Después he decidido empezar de nuevo limpiando mi biblioteca de vídeos, he vuelto a fijar como Setcontent culturalia (ya estaba de antes), he procedido a obtener la información de la película y seguía obteniendo la información tanto la carátula como la ficha de imdb, pero sin embargo al darle a actualizar, veo que pone obteniendo datos de culturalia y me consigue cargar toda la información de culturalia (que gustazo da verlo xD), pero lógicamente la carátula es la del imdb, he ido a obtener miniatura y escogí la de culturalia, así con varias películas.

Concluyendo que fijando mediante setcontent como scraper culturalia y al darle obtener información, me carga la información de imdb, pero al darle a actualizar me la coge de caratularia.

Mañana le metere más mano, os animo a todos a probarlo esta muy chulo, salvo lo que comento,(quizás sea como consecuencia de alguna configuración que tenía en el XBMC o del scraper, pero lo desconozco e indagaré más sobre el mimso).

Saludos y buen finde!
Me da la impresión de que estás viendo la información que en su día te bajaste de IMDB.

Me explico. Cuando dices...
joselehd escribió:Después al entrar en dicha carpeta he seleccionado la primera película y al darle obtener información sobre la película, para mi sorpresa veo que la información es la del imdb, tanto la carátula como la ficha, he seguido porbando con varias películas y seguía cargandome la información de imdb.
me da la impresión que no te está buscando la info sino que está sacando la que ya tiene almacenada.

Y cuando le das a actualizar es cuando busca en culturalia por primera vez.
De hecho, cuando inicia la búsqueda tiene que aparecerte la ventana de "Consultando información de XXXX" donde XXXX te dice el scraper que está usando. Si no te sale esa ventana y va rápido a la ficha de la película es que está cogiendo la ficha que ya tiene guardada.

Cuando dices que borras la base de pelis, como lo haces?
Porque me parece que la opción de "limpiar biblioteca" que hay en la Solapa general de los Ajustes de Videos no limpia la biblioteca de videos, sino la de música...

Si tienes ocasión pruebalo sobre una peli que aún no hubieras metido nunca en la base de datos. Una nueva vamos y compruebas que scraper está usando.

En cuanto a lo de la carátula es el comportamiento normal ya que XBMC no machaca una carátula que ya exista por si la habías puesto manualmente tu. Sólo la carga directamente si no encuentra ninguna ya puesta...

Yo para empezar de cero decidí empezar en una instalación limpia.

Gracias y un saludo,

Jur.
Yo lo he probado en una instalación limpia ( no había usado la base del imdb ni niguna otra) y el scraper funciona bien. He estado pasando las cerca de 30 pelis de mi hd y salvo algún titulo raro que no estaba en culturalia, todo ha funcionado perfecto.
No estoy en los tester, pero quería confirmarte el buen funcionamiento.
Gran trabajo, gracias. [oki]

Creo que si entras por ftp, puedes borrar las bases de datos de peliculas y de música.

Saludos al foro.
Gracias Speed por tu info, pero me gustaría que respetarais un poco más el asunto del la autorización previa para usar el scraper. Yo he sido bastante serio en el planteamiento y me gustaría que, hasta que Culturalia autorice el uso de sus datos seamos cuidadosos con este asunto.

Si quieres ser beta tester te ruego que me digas ke revisión de XBMC tienes y ke skin utilizas.

Si no quieres serlo te ruego que borres el scraper.

Gracias por tu tiempo y comprensión.

En otro orden de cosas efectivamente las base de datos están en el directorio UserData, y se pueden borrar por ftp o en el propio administrador de archivos del XBMC.

Yo de todas formas considero una costumbre sana empezar de cero de vez en cuando. Sobre todo si has probado el IMDB alguna vez ya que así limpias los directorios de carátulas y ahorras un poco de tamaño en disco.


Por último speed, por curiosidad. ¿Qué películas no has podido encontrar en Culturalia?

Un saludo,

Jur.
Hola, de nuevo.

No hay problema.

Las películas que no encontré en culturalia son:

esta y esta .

Saludos al foro.

EDITO: La versión de mi XBMC es la Pre-2.1 (7841) del 16/02/07 y las pieles que uso ahora mismo son MC360, Xbox Classic y Project Mayhem III, todas en su última versión.
Bueno os comento, he decidido hacer una istalación limpia que desde la salida de la última compilación de T3CH no la hacía y ya tocaba, además es bastante rápido, aunque no tengo problemas de espacio en disco xD.

Como bien has dicho jurrabi, aunque fijara el scraper de culturalia en Setcontent, al obtener la información de la película me cargaba la que en su día me descargé de IMDB, a pesar de limpiar las librerias, como bien has dicho se deben borrar las carpetas UDATA, TDATA (salvo las partidas guardadas).

Tras este impás, todo me ha ido muy bien salvo algunas cosas que tú ya comentas en el LEEME, la verdad es que te vuelo a dar la enhorabuena se nota que te lo has currado y es de agradecer para toda la comunidad hispana.

También dar las gracias a culturalia, que no la conocia y tiene una muy buena base de datos, ya que hasta mucha de las películas manga que tengo, las tenían y casi completas en su totalidad.

Saudos!
joselehd escribió:Tras este impás, todo me ha ido muy bien salvo algunas cosas que tú ya comentas en el LEEME,

¿Qué cosas del readme te han pasao?

Gracias por tu tiempo,

Jur.
Te comento ciertas cosas que he notado, no se muy bien si serán causadas por el XBMC, el motor de búsqeda de culturalia o el propio scraper. Son aspectos que ya has comentado en el LEEME;

- Al realizar una búsqueda manual y mostrarse diversos resultados, seguido del nombre de la película introducida se muestran una serie de carácteres "extraños" e ilegibles.

- Si no se obtiene carátula y le doy a obtenerla manualmente, me propone como miniatura la de una búsqueda anterior.

- Como bien decias al realizar la búsqueda de una película con un nombre muy corto, en mi caso se trataba de saw, no me aparecía nada,
sin embargo esta si que está en la base de datos de culturalia como tú apuntabas.

Saludos!
Veo ke estamos bastante alineados... :D

De los temas ke comentas te cuento los avances...

- El primero tiene ke ver con los códigos de página. Actualmente el scraper informa bien a XBMC que quiere poner caracteres en UTF8. El XBMC lo tiene en cuenta en la toma final de datos (en la ficha final verás que ya no aparecen caracteres extraños) pero en la ventana de selección si que siguen apareciendo. Estoy trabajando con la gente del media center para solventarlo.

- El segundo también es un fallo de XBMC. Aún no lo he notificado ya que realmente, como no había carátula en culturalia me da igual lo ke salga. Hay que buscarla a mano en cualquier caso. De todas formas lo notificaré también.

- El tercero es el más peliagudo porque efectivamente tiene que ver con el motor de búsqueda de culturalia y no con el scraper ni con XBMC. Aquí lo suyo sería hablar con los responsables de culturalia, pero ahí no he tenido mucho éxito hasta ahora. De todas formas te alegrará saber que en la Beta3 espero tener lista una forma de poder meter la ficha aunque no la encuentre el buscador.
La idea se basa en buscar la ficha en el PC (por director o por donde puedas) y cuando la tengas (en el caso de Saw http://www.culturalianet.com/art/ver.php?art=23233) guardar la URL en un ficherito de texto con el mismo nombre que la peli y extensión nfo.

Esto hará que XBMC no llame a la búsqueda y en vez de eso le pase la URL al scraper para que obtenga los detalles directamente. Esto aún no está funcionando, pero espero que lo haga pronto.

Es más enrevesado, pero al menos nos permitirá tener en la biblio las pocas pelis de 3 letras que hay... Donde las Saw's son imprescindibles, por supuesto ;)

Un saludo,

Jur.
Madre mia, menudo trabajo estas haciendo jurabi (solo con leerte se da uno cuenta que ahí hay talento). Yo todavia estoy muy verde en este mundillo, pero viendo como te ayuda joselehd poco queda por colaborar.

Si en poco tiempo logro hacerme con este mundillo y aun necesitas mi ayuda, no dudes que la tendras.

Mi mas sincera enhorabuena (a los dos ;) )
Muchísimas gracias por tus ánimos freaksyler...

De todas formas, talento el justo. Sólo ilusión y ganas de currar.
Llevo aprovechándome del curro ke hacen otros con la X desde hace muchos años y ahora ke vi una ocasión de colaborar me lancé a ver ke salía.

La verdad es ke estoy contento, no sólo porke este escraper va a dejar mi biblio como los chorros del oro sino porke todos los xboxeros españolitos podamos sentir ke el bicho nos habla en cristiano...

En cualquier caso aprovecho la ocasión para cambiar la política de uso de la beta. Me estoy dando cuenta de que exigir autorización para usar el scraper sólo está perjudicando (o mejor dicho causando más molestias) al que kiere ayudar. El ke va de jeta se lo descarga (el ficherito lleva 17 descargas y no veo ni una petición), lo usa y si le va bien ni lo dice...

Así ke de ahora en adelante el ke kiera probrar el scraper sea bienvenido. Y si kiere dejar akí ke tal le ha ido el asunto pues ke lo haga.

De todas formas mantendré el programa beta por poder mencionar a kien se ha molestado algo más ke la media... ;)

Gracias otra vez freakstyler y te animo a ke te animes a probarlo. No te preocupes por la verdez (piensa en verde). Si usas XBMC poner el scraper en marcha es cosa de niños... y seguro ke te va a gustar.

sal&2

Jur.
Primero decir que todas las enhorabuenas tiene que ser para jurrabi, simplemente porque es quien se las merece por el curro que se ha dado, yo simplemente lo he testado y además con mucho gusto.

En cuanto a lo de que la gente empieza a bajarse el scraper y no comenta nada, se veia venir..

El tema del motor de búsqueda de culturalia, estaría bien poderse poner en contacto con ellos y arreglar el probelma de raíz, supongo que a ellos también les interesaría, pero desconozco si es factible y si les interesa, por otra parte la alternativa que propones es muy buena, ya que nos protegemos de obtener un resultado negativo en la búsqueda de una película que efectivamente esta en culturalia.

Parece ser que hay problemas en palabras de tres letras (no creo que haya muchas, pero en fin..), ya que por ejemplo a mi Hulk, me la encuentra sin problemas.

Saludos!
Buenas, acabo de instalarlo. el problema es que tengo toda la información del IMDB bajada desde el viernes. He borrado todas las carátulas y me las baja de nuevo, pero la BBDD de videos están las antiguas.... como puedo borrar el fichero para empezar de cero?
Te ocurre lo que me pasó a mi en un primer momento, lo explico más arriba, yo hice una instalación limpia del XBMC, pero borrando los thumbnails y el UDATA debería bastar, en todo caso actualiza y te irá bien.

Saludos!
Animo con ese peaso de curro [oki] [plas]
jurrabi escribió:Me estoy dando cuenta de que exigir autorización para usar el scraper sólo está perjudicando (o mejor dicho causando más molestias) al que kiere ayudar. El ke va de jeta se lo descarga (el ficherito lleva 17 descargas y no veo ni una petición), lo usa y si le va bien ni lo dice...
Así ke de ahora en adelante el ke kiera probrar el scraper sea bienvenido. Y si kiere dejar akí ke tal le ha ido el asunto pues ke lo haga.

Sin palabras...
tijeras escribió:Buenas, acabo de instalarlo. el problema es que tengo toda la información del IMDB bajada desde el viernes. He borrado todas las carátulas y me las baja de nuevo, pero la BBDD de videos están las antiguas.... como puedo borrar el fichero para empezar de cero?
Como te dice joselehd, la mejor forma de empezar de cero es... pues empezar de cero. Es decir coger una instalación nueva con la revisión más moderna que puedas conseguir.

Como imagino que mucha gente no querrá hacerlo por no tener que volver a configurar sus conexiones, temas, idioma y demás opciones de configuración he dedicado un ratillo a averiguar como borrar la base de datos de videos sin afectar al resto de cosas.

En principio esto debería funcionar con la opción "Limpiar Biblioteca" del menú de configuración de Ajustes de Vídeo->General (en versiones anteriores incorrectamente traducido a Limipar Biblioteca Musical).
He comprobado en los foros de soporte de XBMC que había algún bug notificado porque la biblio no se limpiaba con esta opción. Y en teoría está arreglado... pero en la práctica se ve que no.

Así que mientras que lo solucionan habrá que buscar un método alternativo. La información que hay que borrar se encuentra en el directorio UserData de la unidad Q:, que apunta al directorio donde tengais instalado el XBMC. Osea que si teneis instalado el XBMC en E:\Apps\XBMC la Q apuntará ahí.

Hay que borrar los siguientes archivos y directorios:

- Q:\UserData\Thumbnails\Video
(dentro de este hay un directorio bookmarks ke podeis dejar si kereis guardar los puntos de marca que tengais guardados. Si no usais esto da igual)
- Q:\UserData\Database\MyVideos33.db

- Por último debéis borrar la información del UDATA de la X. La forma de hacer esto es entrar en el Dash original de la X, entrar en memoria y borrar cualquier partida guardada de nombre XBMC (yo tenía 2).

Recordad que al borrar la biblioteca de videos tendréis que volver a Fijar el contenido (Set Content) de cada carpeta de películas que tengais e indicar que quereis usar Culturalia Beta2 como scraper.

Con esto deberíais tener la biblio como una patena y poder empezar de Cero. Si aun después de esto seguís viendo comportamientos extraños (carátulas que no se muestra bien o que salen cambiadas), como siempre, sigo recomendando una instalación limpia que ayudará a evitar problemas.

Un saludo y bienvenido tijeras...

Jur.
Bueno lo primero dar las gracias a Jurrabi por este currito, que me ha dejado el xbmc como los chorros del oro, con comentarios en español increible. Gracias.

Lo segundo, coño dar un poco de tiempo antes de encer las alarmas la gente supongo que lo comentara cuando pueda, no todos tenemos tiempo libre en el mismo momento.

Wueno aqui van mis datos, los que no sirvan los tirais:

Recuerdo que uso el XBMC del Eolinstaller rev 21, la compatible, con el skin Xtv. Para limpiar las las caratulas antiguas me fui a UserData\Thumbnails\Video y lo borre, luego me fui a mi carpeta peliculas hice un set content, elegi culturalia, escaneo automatico y escaneo recursivo.

- El 87%aprox. de las peliculas dio en el clavo. En el primer escaneo de mi carpeta "peliculas 2" (ya que tengo dos particiones) las peliculas que estaban dentro de una carpeta no las busco, pero en el siguiente escaneo de la carpeta "peliculas", ahi si que lo escaneo todo, con el 87 de acierto.

- En parentesis me bloquea el skin y tengo que reiniciar, es decir busco información de la pelicula "el guardian (The guardian)" y se bloquea.

- Los guiones bajos no los acepta da error en la busqueda, "La_Caperucita", no lo busca, pero bueno esto es una tonteria lo escribes bien y ya esta.

- Las segundas, terceras, etc partes, no las coge se queda con la primera, buscas transporter 2 y sale la 1º, pero esto en automatico, en manual la encuentra sin problemas.


Estoy muy contento con el scrapper he encontrado el 97% aprox. de las peliculas con sus comentarios y eso esta de puta madre.
Jurrabi [oki] [oki] [oki]

Saludos y paciencia la madre de la ciencia
gracias javiolo por la info.

Respecto al tema de la paciencia... no era cuestión de paciencia. Para poder bajártelo tenías ke pedir permiso (antes) y nadie lo hizo. Es decir, había 20 descargas y nadie lo pidió... pero como digo lo esperaba. (no es tu caso ke eras beta tester desde el inicio)

Lo del Fullscan yo lo desaconsejaba por tratarse de una versión beta. Supongo que luego habrás ido arreglando las ke fallaron sin problemas.

Por cierto, rev20 no me dice nada. El numero de revisión que necesito es la del svn de XBMC. Si no has tenido problemas con tildes y eñes debes tener una 78xx altita...

El tema de los paréntesis hacía tiempo ke lo esperaba... ;) Ya lo tenía localizado y está arreglado para la beta 3 (que tiene fecha prevista de publicación el 28)

Buen trabajo javiolo, hasta ahora nadie se había dado cuenta. Lo raro es ke se te cuelgue. A mi con los 3 skins ke uso (PMIII, XBOX Classic y MC360) no se me cuelga, sino que no me coge el título (lo deja en blanco)... o mejor dicho lo dejaba, porke yo ya tengo la preBeta3 ;) ventajas de ser el desarrollador, supongo.

Ánimo chicos, ke hay algún pekeño bug más en beta 2 ke aún no ha salido. Y también molaría ke saliera alguno ke no tenga pillado... ;)

Javiolo, del 3% ke dices ke no te ha pillado, y dejando de lado las de 3 letras y las de título entre paréntesis, porfa lístame las ke haya para echarles un vistazo.

Lo de los subrayados ke comentas... es cosa del buscador de culturalia ke toma como una sola palabra "La_Caperucita"... Si me preguntas a mi, es lo que debe hacer ya que para eso sirve el subrayado, para separar sin romper la palabra...

Gracias otra vez,

Jur.
Wueno aqui tienes la version que utilizo del XBMC 2.01 rev7841 y las peliculas que no ha encontrado, pero que he mirado haber si estaban en la web de culturalia y tampoco estan o no las he encontrado:

-Initial D
-Final Fantasy VII la peli
-Los colegas del barrio
-Wanted
-Libertad
-La armada de alqaeda (docu)
-Los secretos de las artes marciales (docu)
-El cuerpo humano del futuro(docu)
-The Corporation, las tres partes (docu)

Wueno pues aqui tienes mi 3%

Saludoss
Okas... gracias.

Lógicamente si tu no has podio verlas, el scraper lo tiene chungo.

Me refería a si alguna ke estuviera en Culturalia, no te la había pillao, pero ya veo ke no... :D

Muchas gracias,

jur.
Aprovecho este hilo y pongo aquí que ha salido una nueva revisión del XBMC, con muchas novedades respecto a los scrapers, han incluido varios nuevos y una gran novedad es que no sólo para películas sino también para series de televisión.

Me pongo a probarlo a ver que tal y si tira bien el scraper de culturalia.

Salut!
Efectivamente joselehd.

Además añadir que esta versión será MUUUUY conveniente para los usuarios de Scraper Culturalia (Aún no se le ocurre un nombre mejor a nadie para la v. final?) ya que permitirá usar la funcionalidad de ficheros NFO para las pelis para las que no se puede buscar la ficha (Tipo Saw, Ray, etc.)

Permaneced tuneados... beta3 está en camino.

Un saludo,

Jur.
Bueno gento, tengo poquísimo tiempo libre, pero no por eso estoy menos entusiasmado que cualquiera de vosotros.

He hecho limpieza por varios métodos
Carpeta thumbails\video
Userdata\database
y e:\Udata\088880xxx como sea

El resultado es que..... parece haber ido bien.... de todas formas actualizaré a la versión de día 26 que la acabo de bajar.

Por cierto yo tengo unas 700 pelis en discos USB externos y de series otras toneladas, así que hay bastantes que no me pone el título correcto por ser un poco raras...

Pero vamos, genial un 11 al "rascador" jeje eso es lo que hacen todo el día mis discos
Ya ha llegado... Beta3 está aquí.

No es que sea una revolución pero si tiene algunas cosillas que a más de uno le va a gustar...

Pero primero lo primero... changelog.txt

----------------------------------------------------------------------------------Cambios en beta3:

ERRORES ARREGLADOS
1. Los títulos que tiene paréntesis no se leían correctamente. Ejemplo : The Ring 2 (ARREGLADO)
2. Algunas películas con formatos especiales en los datos no se rellenaban adecuadamente. Ejemplo "Viven", que no cogía la sinopsis. (ARREGLADO)
3. El campo votos ya se muestra bien.

NUEVAS FUNCIONALIDADES
1. Soporte para ficheros NFO (ver más abajo)


ERRORES CONOCIDOS

1. (EDITADO) Las tildes y eñes no se muestran bien en la pantalla de selección de película (cuando se encuentran varias opciones). Este error es de XBMC y será resuleto en una próxima Release. (ARREGLADO EN BETA3B

PENDIENTE.

La siguiente versión será la RC1 (Propuesta de v1.0) por lo que habrá que incluir documentación en inglés.


OTRAS TAREAS.

Actualización del manual:
- Sección para el borrado manual de la base de datos de películas
- Información sobre el uso de ficheros NFO.



RC1 prevista para el Miercoles 3 de marzo de 2007
----------------------------------------------------------------------------------

En cuanto a las cosas nuevas... algo de información acerca de ficheros NFO (extraido del fichero de documentación)

-------------
Ficheros NFO:
=============

A partir de la versión Beta3 de Scraper Culturalia (y junto con una rev7937 o superior de XBMC) podemos
usar funcionalidad de ficheros NFO. ¿Para qué sirve esto?

En general un fichero NFO es un fichero de texto normal (viene de info reducido a 3 letras) que suele
acompañar a las relases de todo tipo, incluidas las películas. En estos ficheros NFO se incluyen datos
de la release como el título, Año de estreno, etc… Un dato que se suele incluir es un enlace web
(generalmente de la IMDB) que apunta a la ficha de la película para poder consultar más información de
la misma si queremos.

Los amables señores del XBMC han pensado que en vez de pedirle al scraper que busque la ficha, pueden
mirar si hay un fichero NFO para esa peli y si lo hay ir directamente a por la ficha de sus datos.

Y aquí entramos nosotros. Nosotros podemos aprovechar esto y crear ficheros NFO para nuestras pelis.
Pero, ¿para qué íbamos nosotros a querer usar ficheros NFO? Ahora lo vas a ver claro...
¿Has intentado buscar en culturalia pelis como SAW o X-MEN o RAY? Seguro que no has tenido suerte.
El asunto es que Culturalia tiene un filtro a la hora de buscar que elimina las palabras de 3 letras o
menos. Hacen esto seguramente para quitar de en medio todos los artículos y demás palabras del lenguaje
que forman parte de casi todas los títulos, y que dificultan el mostrar una lista de resultados acertada.
El problema es que cuando el título es una sola palabra de 3 letras, es imposible encontrar la ficha por
medios normales, y esto por supuesto implica que nuestro scraper tampoco la encuentra.
¿Y qué hacemos entonces? ¿Pues no te lo había dicho? F i c h e r o s N F O .
Basta con crear un fichero de texto que contenga la URL a la ficha de la película en cuestión en
culturalia y llamarlo como el fichero de nuestra película. Con esto bastará para que XBMC pueda encontrar
la información de nuestra querida peli. Para dejarlo más claro pongamos un ejemplo.

Si tenemos una película que se llama: C:\Pelis\Saw.dvdrip.avi
Creamos un fichero de texto llamado C:\Pelis\Saw.dvdrip.nfo en el que escribimos:

http://www.culturalianet.com/art/ver.php?art=23233

(En el fichero podemos poner todo lo que nos apetezca, pero el Scraper solo buscará la ficha de
Culturalia)

¡Y ya está! Con esto veréis como XBMC es capaz de llenar la ficha de Saw con todo gusto...

-Ya, ¿pero como encuentro yo la ficha?

¡De verdad! ¿Es que os lo tengo que dar todo mascado chicos? Bueno... vale. ¡De verdad que hacéis
conmigo lo que queréis! Aquí va mi truquito personal...

Yo lo que hago es buscar la peli por director, por ejemplo. Es decir, por pasitos…
1. Me voy a la web de IMDB (http://www.imdb.com)
2. Busco la peli en cuestión. En nuestro caso SAW
3. En la ficha de Saw miramos el director: James Wan
4. Con esto vamos a Culturalia (http://www.culturalia.net) y buscamos el director (IMPORTANTE ¡¡marcando que
queremos buscar personas!!)
5. Esto nos da la lista de películas que ha dirigido Mr. Wan, y entre ellas nuestra deseada SAW.

¡¡Y ya está. Tenemos la información que necesitamos para nuestro NFO!!


El uso de ficheros NFO tiene una ventaja adicional. El uso de ficheros NFO tiene precedencia al scraper
que tengamos solicitado por defecto. Esto significa que si hemos elegido Scraper Culturalia como el
scraper preferido para nuestro directorio, pero para una película en particular creamos un NFO con una
URL de IMDB, esto tendrá precedencia y XBMC sacará la información de IMDB sin mirar en culturalia.
Esto puede ser útil para películas que no tengan ficha en Culturalia, pero si en otras páginas que
tengan scraper (cada día más)...

Y yo creo que con esto basta sobre NFOs, ¿no?

----------------------------------------------------------------------------------

Por último lo más importante... El fichero. Las instrucciones de instalación son iguales que el la beta2. Pero podeis mirar las instrucciones.

Espero que os guste y lo disfruteis tanto como yo haciendolo.

Saludos,

Jur.
EDICIÓN IMPORTANTE.
Como ya está solucionado el tema de los caracteres raros en la página de búsqueda he decidido no esparar a RC1 para publicarlo. Disculpad las molestias.

Adjuntos

Gracias jurrabi, nos pondremos con ello, de paso prepararé un par de archivos nfo haber que tal va la nueva funcionalidad que incorpora esta nueva revisión del XBMC.

Saludos!
Lo dicho, en cuanto llegue a casa pruebo la ultima beta

En general de mi lista de pelis, hay muchas que no las encuentra (son pelis raras) y muchas otras como por ejemplo "007 el mañana nunca muere" o "5x2 cinco veces dos" me pilla otra que los años 70 que no tienen nada que ver.

Pero vamos al menos tengo caratulas e info de casi todas mis pelis (una gozada, parece un videoclub)

Por cierto utilizo la release de T3CH de día 26 de febrero con el skin MC360 1.02 con los sounds actualizados y la traducción al español a 720p en una LCD de 42" panoramica.

La verdad es que este media center es fabuloso y no deja de sorprenderme
Raro lo tuyo, Tijeras...

A mi el mañana nunca muer me la coje a la perfección. ¿acaso estás usando búsqueda automática? Si es así, ya sabes que no es recomendable (te cojeá pelis equivocadas muchas veces)

En el caso de 5x2 es del tipo de pelis de 3 letras ke no se pueden buscar...
En este caso... ya sabes, fichero nfo.

te lo pondré facil esta vez...
http://www.culturalianet.com/art/ver.php?art=23098


tijeras escribió:Por cierto utilizo la release de T3CH de día 26 de febrero con el skin MC360 1.02 con los sounds actualizados y la traducción al español a 720p en una LCD de 42" panoramica.

La verdad es que este media center es fabuloso y no deja de sorprenderme

;)
Si tan sólo fuera lo suficientemente potente como para poder con pelis 720p...
Por cierto, comentaste que la última versión de XBMC llevaba novedades en cuanto al scraper, y una de ellas era una fuente nueva para series. ¿Has hecho alguna prueba? Imagino que son series sólo en inglés....

Respecto a que la Xbox no pueda con pelis 720p, bueno, es una pena, pero de momento como en HDTV lo que tengo, casi todo son demos, presentaciones y no pelis en sí... pues mira, a día de hoy tampoco me preocupa.... ya veremos cuando el emule este plagado de ellas.

Ahora probaré lo de los nfo

Por cierto, y esto está más relacionado con XBMC que con el scrapper. ¿Hay posibilidad de estar en modo BBDD y los títulos ponga el del fichero, y no el descargado?

Se que luego manualmente puedes editar título a título. Pero una a una es un palo
No ke yo sepa.
Si estás en modo biblio se ve lo de la biblio.

Sorry.

Por cierto, si no aparece ningún error, y puesto ke tampoco tengo pendiente añadir ninguna funcionalidad, mañana pasaré la beta a RC1 y de ahí a v1.0

En ese punto os informo que la gente de XBMC me ha confirmado que meterá el scraper en el svn del xbmc con lo que nuestro kerido Scraper culturalia vendrá de serie con el XBMC...

:D
Eso es cojonudo, y un gran reconocimiento para ti, sin duda has hecho un gran trabajo, felicidades.
Yo lo he probado... que conste que he conectado la xbox a proposito a internet para tener la info de culturalia en las pelis. Comento lo que me ha pasado:

Mas o menos los errores tipicos: lo de las 3 letras de saw, y alguna pelicula rara que no me cogia, por ejemplo, Los viajeros de la noche. He buscado el titulo en ingles por internet, y entonces lo he cambiado y me la ha pillado. Ningun problema más que deba reseñar. El guion bajo da un poco por saco pero es acostumbrarse y poner los nombres correctos a las peliculas. Por cierto, lo del nfo no me funciona porque he utilizado una release anterior a la que comentais...

Por cierto he utilizado la beta3 y este XBMC 17.Feb.2007.XBMC.XBOX.MediaCenter.2.0.GasGiver, asi que todo correctisimo muchas gracias por el trabajo realizado, y perdon por no ser tester pero es que no he tenido configurado internet en la xbox hasta esta mañana.

Un saludo!
gracias a ti por tus comentarios...

Ke lo disfrutes con salud.

Y ya ke te pones a descubrir el mundo de internet para la X, no te olvides de echarle un vistazo al tiempo o la los videos de youtube ;)

Jur.
jurrabi, puedo incluir tu Scraper en el Eol2?
Y si tengo las películas en un DVD ¿como puedo actualizar la información?
Wueno Jurrabi enorabueno has hecho un trabajo de lujo, ojala todos los scrapers fueran como el tuyo con esas caratulas, jejeje, me alegro que lo pongan de serie en el xbmc, ahora formas parte de un programa que ha hecho y hace historia jejeje,.

Saludos y mil gracias.

P.D: he probado la beta 3 y de lujo.
Perdonad, pero he estado unos días hasta arriba de curro.

Por Partes...

javiolo_x, gracias por el input.

Retamero, tu pregunta no es del scraper sino de XBMC en general. La verdad no tengo ni idea de como hacer para meter en la biblio los dvds. kizá en http://www.xboxmediacenter.com puedas encontrar algo.

hal9000, no se ke es el eol2. te importa iluminarme?

en cualquier caso te diré ke es probable ke el scraper vaya con las distribuciones de xbmc a partir de la semana ke viene...

sal&2.

jur.
Jurrabi, el EOL2 es el EOLinstaler 2.0, un CD/DVD que ha creado Hal9000 para instalar xploits, con las ultimas versiones de la mayoria de los programas utiles para XBOX, una pasada vamos, yo lo tengo instalado y viene todo lo necesario, aplicaciones, dashboards, emuladores, ftp, etc....
Tendre que esperar a que Hall9000 saque la rev 30 para instalar el scraper...:D
Buen curro,si señor.
Tienes mi permiso para meterlo Hal9000. De hecho será un honor.

De todas formas, esperad a esta noche ke subiré la versión 1.0 Definitiva.

Esta será la que se publique suba también al svn del XBMC.

Sal&2.

Jur.
107 respuestas
1, 2, 3