Forum openmoko-fr.org

Forum de la communauté francophone autour du projet OpenMoko

Vous n'êtes pas identifié.

Annonce

Bienvenue sur ce forum.

Face à un afflux de spammers, les inscriptions ont été désactivée.
Si vous souhaitez vous inscrire, il faudra en faire la demande auprès du webmaster (voir la section "Contact" sur le Blog).

#126 01-01-2010 13:42:17

Claptroll
Addicted-Moko
Date d'inscription: 11-04-2009
Messages: 344

Re: OpenMoko:WikiReader

Félicitations et bonne année à tous smile

Hors ligne

 

#127 01-01-2010 16:40:03

Garth
MoKorateur
Date d'inscription: 29-09-2008
Messages: 656
Site web

Re: OpenMoko:WikiReader

wouhou!
félicitation
et en plus ca chambre :p
+++
Bon tout plein de choses à tous

Hors ligne

 

#128 01-01-2010 18:11:44

misc
Addicted-Moko
Lieu: Clamart
Date d'inscription: 10-04-2009
Messages: 724

Re: OpenMoko:WikiReader

Pour répondr eà la queston sur osx, je dirais virtualbox pour emuler linux.

Hors ligne

 

#129 01-01-2010 19:35:43

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader

Download time !

http://geekshadow.com/images/wiktionaryfr.png

* WikiSim (pour émuler le WikiReader, binaire Linux uniquement)
* Firmware du WikiReader en Français (Mis à jour avec les dernières sources)
* Wiktionary Français pour WikiReader (version compilé datant du 11 décembre 2009, comprend aussi le firmware français)

Pour utiliser l'émulateur wikisim :
Créez un dossier, décompresser le Wiktionary Français et déplacez wikisim puis exécuter le.

Enjoy smile

Dernière modification par GeekShadow (01-01-2010 21:38:20)


Projet de traduction du WikiReader en français

Hors ligne

 

#130 02-01-2010 07:23:50

misc
Addicted-Moko
Lieu: Clamart
Date d'inscription: 10-04-2009
Messages: 724

Re: OpenMoko:WikiReader

Wow, nice, ça mérite un journal linuxfr, non ?

Hors ligne

 

#131 02-01-2010 12:22:33

Garth
MoKorateur
Date d'inscription: 29-09-2008
Messages: 656
Site web

Re: OpenMoko:WikiReader

une vidéo?

Hors ligne

 

#132 02-01-2010 18:36:31

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader


Projet de traduction du WikiReader en français

Hors ligne

 

#133 02-01-2010 19:10:29

Burn2
MoKorateur
Date d'inscription: 15-05-2009
Messages: 1782

Re: OpenMoko:WikiReader

Félicitation!


Fr A6 - Android 1.5
Aucun fix, A6 pur. (donc bug du buzz inside hmm )

Hors ligne

 

#134 03-01-2010 14:13:31

Garth
MoKorateur
Date d'inscription: 29-09-2008
Messages: 656
Site web

Re: OpenMoko:WikiReader

Merci à toi! wink
Félicitation!
On me dit que tu  as gagné un réduction pour un nouveau wikireader! :p

Dernière modification par Garth (03-01-2010 14:13:58)

Hors ligne

 

#135 03-01-2010 22:20:08

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

Hello à tous et bonne année ! Effectivement elle commence bien !

Hyper big up à GeekShadow qui a fini avant moi la compilation du wikionnaire ! Falicittions et merci.

Je prenche encore sur wikipedia, qui me laisse quelque fil à retordre. avecles caractères "pourris" qui trainent de cà de là. J'ai essayé de faire des tests de nettoyage au fil de l'eau, mais les perfs sont excecrables....  Je ne désespère pas, et cette bonne nouvelle m'a redonné la pêche pour repartir !

Quid des tailles de fichiers et temps de traitement ?


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#136 04-01-2010 15:19:35

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader

Garth a écrit:

Merci à toi! wink
Félicitation!
On me dit que tu  as gagné un réduction pour un nouveau wikireader! :p

Ou tu as vu ça ?

asthro a écrit:

Hyper big up à GeekShadow qui a fini avant moi la compilation du wikionnaire !

L


Projet de traduction du WikiReader en français

Hors ligne

 

#137 04-01-2010 16:07:31

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader

Garth a écrit:

Merci à toi! wink
Félicitation!
On me dit que tu  as gagné un réduction pour un nouveau wikireader! :p

Où tu as vu ça ?

asthro a écrit:

Hyper big up à GeekShadow qui a fini avant moi la compilation du wikionnaire !

Le fichier était beaucoup moins gros en même temps big_smile

asthro a écrit:

Je penche encore sur wikipedia, qui me laisse quelque fil à retordre. avec les caractères "pourris" qui trainent de ça de là. J'ai essayé de faire des tests de nettoyage au fil de l'eau, mais les perfs sont exécrables....  Je ne désespère pas, et cette bonne nouvelle m'a redonné la pêche pour repartir !

Arf... pas moyen de faire un script pour nettoyer ? Je n'ai pas eu d'erreur du tout avec la dernière version du code sur git !

asthro a écrit:

Quid des tailles de fichiers et temps de traitement ?

Alors la... pas calculé. De toute façon je vais surement retraiter le Wiktionary pour plusieurs choses :

* Inclusion du bon fichier licence (l'actuel correspond encore à Wikipédia qui est similaire)
* Inclusion de credits via une page big_smile
* Filtrage pour ne pas lister les templates
* Suppression des fichiers pedia.hst et pedia.pas (historique enregistré et mot de passe)

Pour la taille vois par toi même wink


Projet de traduction du WikiReader en français

Hors ligne

 

#138 07-01-2010 22:15:15

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

Bonsoir,

Je suis passé devant mon ordi qui compile Wikipedia avec les dernier scripts du GIT. 250 000 articles en 24h ! A ce rythme là il aura fini dimanche soir pour le parsing. Je n'ose pas imaginer le temps de rendering.

Je vais essayer en plus  avec une autre machine un peu plus "dédiée". A moins de monter une "ferme" de compilation : 4 VM sur mon quad core, qui compilent en // (je commence à comprendre comment ça marche ! ), a évitera aux 3 autres cores de regarder le 4ème saturer.

en attendant, je vais dessiner les plans de mon dock....
@geekshadow : c'est combien la taille initiale du wiktionaire ? (l'archive targz j'entend)


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#139 08-01-2010 11:57:41

fylefou
Addicted-Moko
Lieu: Marseille
Date d'inscription: 24-10-2008
Messages: 330

Re: OpenMoko:WikiReader

donc si je recapépette :
il faut bien telecharger la dernière version des outils du wiki sur le git et lancer tout ca comme le dis asthro sous son blog?
si c'est ça je m'attaque au test du wikibook
d'abord faut trouver quoi et comment le dl

et maintenant que vous avez un peu compris la methode , yaurait un moyen de compiler autre chose que du wiki , ca serait tres compliqué vous pensez?

Dernière modification par fylefou (08-01-2010 12:08:17)


FR A6 -autono+buzzzzzzzz fix merci footware
qtmoko 26 - parce que un telephone qui marche c'est pratique qd meme
__________________________________

Hors ligne

 

#140 08-01-2010 15:02:35

misc
Addicted-Moko
Lieu: Clamart
Date d'inscription: 10-04-2009
Messages: 724

Re: OpenMoko:WikiReader

Sans vouloir paraphraser coluche, mais tu penses à quoi en particulier ?

Hors ligne

 

#141 08-01-2010 15:41:10

fylefou
Addicted-Moko
Lieu: Marseille
Date d'inscription: 24-10-2008
Messages: 330

Re: OpenMoko:WikiReader

oh a rien c'était juste pour faire avancer le wikinikiliki,.. le wikilikikinini..... le wikikiwiliki......
en fait si mais je pense egalement avoir ma reponse , faudra fvoir via le format xml des wiki
mais je pense a des export de libroveritas par exemple
mais a ce que je vois , la compilation de fait  de xml->html->compilé, non?
alors peut etre que su html.....
je verrais bien un ebook quoi , pour pouvoir livre en entier dive into python dans le bus....

je viens d'essayer de compiller wikiquote en utilisant le script scripts/Run

Code:

scripts/Run -w "/home/philippe/wikireader/wikireader/work" -d "/home/philippe/wikireader/wikireader/dest" -l fr -p wikiquote

resultat:

Code:

scripts/Run: needs update
refusing to pull with rebase: your working tree is not up-to-date
rm -f "stamp-r-index"
cd /home/philippe/wikireader/wikireader/host-tools/offline-renderer && make index \
        XML_FILES="/home/philippe/wikireader/wikireader/XML-Licenses/en/license.xml /home/philippe/wikireader/wikireader/XML-Licenses/en/terms.xml /home/philippe/wikireader/wikireader/frwikiquote.xml" RENDER_BLOCK="0" \
        WORKDIR="/home/philippe/wikireader/wikireader/work/fr" DESTDIR="/home/philippe/wikireader/wikireader/dest/fr"
make[1]: entrant dans le répertoire « /home/philippe/wikireader/wikireader/host-tools/offline-renderer »
./ArticleIndex.py  \
        --article-index="/home/philippe/wikireader/wikireader/work/fr/articles.db" \
        --article-offsets="/home/philippe/wikireader/wikireader/work/fr/offsets.db" \
        --article-counts="/home/philippe/wikireader/wikireader/work/fr/counts.text" \
        --templates="/home/philippe/wikireader/wikireader/work/fr/templates.db" \
        --prefix="/home/philippe/wikireader/wikireader/dest/fr/wikiquote" /home/philippe/wikireader/wikireader/XML-Licenses/en/license.xml /home/philippe/wikireader/wikireader/XML-Licenses/en/terms.xml /home/philippe/wikireader/wikireader/frwikiquote.xml
Cyclic redirect: Émile Ajar -> Émile Ajar
Unresolved redirect: Heidegger -> Martin Heidegger
Unresolved redirect: Ronaldo -> Ronaldo Luis Nazário de Lima.
Unresolved redirect: L'Été, ça craint -> South Par
Cyclic redirect: Claude Orland -> Claude Orland
Unresolved redirect: Skins (série télévisée) -> (série télévisée)
Unresolved redirect: Godfried Danneels -> Godfried Danneels/copyvio
Cyclic redirect: Les Chants de Maldoror -> Les Chants de Maldoror
Articles:         1905
Redirects:         885
Sum:              2790
Merged:           2782
Difference:         -8
Restricted:          0
Templates:        2306
rTemplates:        861
Writing bigrams: /home/philippe/wikireader/wikireader/dest/fr/wikiquote.fnd
Time: 0s
Sorting titles
Time: 0s
Writing matrix: /home/philippe/wikireader/wikireader/dest/fr/wikiquote.fnd 
Time: 0s
Writing: /home/philippe/wikireader/wikireader/dest/fr/wikiquote.pfx
Time: 0s
Flushing databases
Writing: files
Time: 0s
Writing: articles
Time: 0s
Writing: offsets
Time: 0s
Loading: articles
Time: 0s
Loading: offsets and files
Time: 0s
make[1]: quittant le répertoire « /home/philippe/wikireader/wikireader/host-tools/offline-renderer »
touch "stamp-r-index"

real    6m18.928s
user    5m26.612s
sys    0m3.476s
make: *** Pas de règle pour fabriquer la cible « farm0 ». Arrêt.

real    0m0.243s
user    0m0.084s
sys    0m0.056s

et j'ai pas grand chose dans le rep :

Code:

ll dest/fr/
total 668K
-rw-r--r-- 1 philippe philippe  46K 2010-01-08 15:42 wikiquote.fnd
-rw-r--r-- 1 philippe philippe 616K 2010-01-08 15:42 wikiquote.pfx

normal?

Dernière modification par fylefou (08-01-2010 15:50:07)


FR A6 -autono+buzzzzzzzz fix merci footware
qtmoko 26 - parce que un telephone qui marche c'est pratique qd meme
__________________________________

Hors ligne

 

#142 08-01-2010 16:09:30

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader

asthro a écrit:

@geekshadow : c'est combien la taille initiale du wiktionaire ? (l'archive targz j'entend)

212 Mo

fylefou a écrit:

donc si je recapépette :
il faut bien telecharger la dernière version des outils du wiki sur le git et lancer tout ca comme le dis asthro sous son blog?
si c'est ça je m'attaque au test du wikibook
d'abord faut trouver quoi et comment le dl

et maintenant que vous avez un peu compris la methode , yaurait un moyen de compiler autre chose que du wiki , ca serait tres compliqué vous pensez?

Oui dernière version sur le GIT.
Pour compiler autre chose je ne sais pas mais tu peux toujours convertir un document avec la syntaxe xml utilisé par les wiki

Sinon pour ton erreur, Asthro à expliqué qu'il faut compiler à la main car le script 00run.sh est prévu pour une "ferme" d'ordinateurs qui compilent.

Voici les opérations manuelles :

1° parsing du dump :  make parse -j3 DESTDIR=image WORKDIR=work XML_FILES=test2.xml
2° indexation du dump :
make index -j3 DESTDIR=image WORKDIR=work XML_FILES=test2.xml
3° rendering du dump :
make render -j3 DESTDIR=image WORKDIR=work XML_FILES=test2.xml
4° multiplexage (?) des fichiers temporaire
make combine DESTDIR=image WORKDIR=work XML_FILES=test2.xml
5° génération du hash :
make hash DESTDIR=image WORKDIR=work XML_FILES=test2.xml


Projet de traduction du WikiReader en français

Hors ligne

 

#143 08-01-2010 16:57:39

fylefou
Addicted-Moko
Lieu: Marseille
Date d'inscription: 24-10-2008
Messages: 330

Re: OpenMoko:WikiReader

yep dsl j'avais lu ça....
parcontre j'ai désormais

Code:

File "./ArticleParser.py", line 241, in <module>
    main()
  File "./ArticleParser.py", line 145, in main
    (start_article,))
sqlite3.OperationalError: no such table: offsets

la base sqlite semble vide ,

Code:

 sqlite3 /home/philippe/wikireader/wikireader/work/offsets.db
SQLite version 3.5.9
Enter ".help" for instructions
sqlite> .tables
sqlite>

ça vous est arrivé?


J'avais pas fait le make install avant et il se trouve que

Code:

../../binutils/configure: 1944: flex: not found
checking for flex... lex
checking for yywrap in -ll... no
checking lex output file root... ../../binutils/configure: 1: lex: not found
configure: error: cannot find output from lex; giving up
Configure in /home/philippe/wikireader/wikireader/host-tools/binutils-2.10.1/build/binutils failed, exiting.
make: *** [binutils] Erreur 1

niak niak niak pb de dep...

mea culpa asthro avait tout dis

Dernière modification par fylefou (08-01-2010 17:36:11)


FR A6 -autono+buzzzzzzzz fix merci footware
qtmoko 26 - parce que un telephone qui marche c'est pratique qd meme
__________________________________

Hors ligne

 

#144 08-01-2010 23:23:41

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

que ton "pardon" libre vienne te libérer mon fils....


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#145 09-01-2010 12:23:55

fylefou
Addicted-Moko
Lieu: Marseille
Date d'inscription: 24-10-2008
Messages: 330

Re: OpenMoko:WikiReader

merci pour votre magnanimité mon père

humhum.... au vu de la serie d'action j'ai bien l'impression que le parse cree bien le acticle...html , qui est un fichier contenant plein de fichiers html contaténé
on peu donc imaginer crer un fichier autrement que avec le make parse classique , ou en modifiant le ArticleParser.py pour qu'il genere un html a partir de .... ce que l'on veux en fait....


il fait en plus que 240 lignes!!!!
humhum cela me laisse entrevoir le chemin des possibles... mais comme disait le philosphe Morpheus : "il y a une difference entre connaitre le chemin et arpenter le chemin"
(oua la tournure mistique que prend le topic)

bon pour me faire la main je suis arrivé a compiler le wikiquote
faut que je le teste sur mon wikipedia ---> ok sur le wikipedia (pas tout correctement mais bon...surement ce bleme des accent , que l'on doit pouvoir résoudre en modifiant les code)


me viens autre idée : menu de selection du wiki au démarage?? ca doit etre ne autre affaire... bref ... prochain test compiler un fichier html


ps: sur le wikitionnaire cherchez bite ....

Dernière modification par fylefou (09-01-2010 12:57:36)


FR A6 -autono+buzzzzzzzz fix merci footware
qtmoko 26 - parce que un telephone qui marche c'est pratique qd meme
__________________________________

Hors ligne

 

#146 09-01-2010 17:32:54

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

Tout XMl est parsable, c'est sûr. Donc pas de souci à ce niveau là.

Le coup de selectionner une source au démarrage : là, ca doit pas être bien sorcier, mais faut lire les sources du "kernel"

Je ne veux pas savoir comment tu es arrivé sur la page "bite" de wiktionnaire, mais effectivement, c'est un poil gras (et j'ai pas compri l'étymologie)


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#147 10-01-2010 10:02:41

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

Parsing terminé en 56h, rendering en cours.... vu que ça va plus vite, il devrait être terminé pour demain soir ...(super cadeau d'anniv!)


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#148 10-01-2010 13:12:51

fylefou
Addicted-Moko
Lieu: Marseille
Date d'inscription: 24-10-2008
Messages: 330

Re: OpenMoko:WikiReader

pour le bite .... promis c'est en faisant random!!!!

sinon , anniversaire? de qui le tiens?

et pour le xml , oué mais que le xml des wiki surement spécificité de tag.. je vais fouiller les .py pour voir un peu plus loin mais aujourd'hui g la chambre de bébé a preparer


FR A6 -autono+buzzzzzzzz fix merci footware
qtmoko 26 - parce que un telephone qui marche c'est pratique qd meme
__________________________________

Hors ligne

 

#149 11-01-2010 21:55:31

asthro
MoKorateur
Lieu: Haubourdin - Nord
Date d'inscription: 02-01-2009
Messages: 775
Site web

Re: OpenMoko:WikiReader

oui, le mien, mais là mon WR n'en aura pas : après un bug de compilation à 15000 articles (rendering) et forçage du script à "passer" outre les erruer, une grosse merde arrive à 175000 articles. un foutu caractère qui ne passe pas à l'encodage !!!!! Grrrr.

J'ai "passé" outre un 'raise e' -> 'pass', jespère que ça n'aura pas trop d'influence sur le reste.

Chose rigolote dans certaines lignes de débug : "xxxxx.png -> picture too big"

Et le peu d'articles rendu est plutôt pas mal foutu (c'est exploitable via le simulateur) :

http://freerunner.daily.free.fr/files/wiki.png
(l'article est le premier sorti au hasard en cliquant sur RAND ... si si, j'vous jure ;-D )

Je relance, et testerai demain sur le WR.

Dernière modification par asthro (11-01-2010 21:56:13)


______ // AstHrO \\ ________
A6 * Revival   *  QtMoko V31fr
Site proSite freerunner

Hors ligne

 

#150 11-01-2010 22:26:02

GeekShadow
MoKorateur
Lieu: Fontenay le Comte
Date d'inscription: 30-11-2009
Messages: 40
Site web

Re: OpenMoko:WikiReader

zarb... et avec un dernier checkout du GIT ?


Projet de traduction du WikiReader en français

Hors ligne

 

Pied de page des forums

Propulsé par FluxBB 1.2.20
Traduction par FluxBB.fr

Hébergé par :
Bearstech