Vendredi 20 Octobre 2006 22:36:51

Projection sur un fichier au format Lexico3 d'un fichier de segments répétés issus de Lexico3, de ses hapax et des 2 fichiers d'hapax associés aux 2 parties de textes constituant l'ensemble du texte.

Mode d'emploi du programme (à lancer dans une fenêtre MSDOS ou "Invites de commandes") :
projette-segments-hapax fichier-SR fichier longueur-plancher-segment frequence-plancher-segment fichier-hapax fichier-hapax1 fichier-hapax2

Ci-dessous, les différentes versions avec le résultat de la projection. En rouge les segments et en bleu les hapax.
Ces 2 types d'unités sont aussi encapsulés dans des balises appelées respectivement SR et HAPAX.

On distingue aussi les hapax du texte n°1 (qui ne sont pas hapax du n°2), ceux du texte n°2 (qui ne sont pas hapax du n°1) et les hapax du texte complet.

FICHIER 1

§ <MOIS="200602"><JOUR="20060210"><HEURE="2006021000">
Dans la bonne ville de <HAP2>Puteaux</HAP2> (Hauts-de-Seine) <HAP2>s</HAP2>'<HAP2>est</HAP2> niché un drôle
de <HAP2>moustique</HAP2>. Voilà bientôt quatre ans que sa susurration perturbe la
tranquillité <HAP2>des</HAP2> travaux de la majorité <HAP2>municipale</HAP2> (UMP) et que ses
piqûres agacent <HAP2>tout</HAP2> particulièrement la famille <HAP2>Ceccaldi</HAP2>-<HAP2>Raynaud</HAP2>,
père et fille, <HAP2>qui</HAP2> <HAP2>se</HAP2> sont succédé <HAP2>dans</HAP2> <HAP2>le</HAP2> fauteuil de <HAP2>maire</HAP2>. En <HAP2>avril</HAP2>
2004, <HAP2>une</HAP2> piqûre un peu <HAP2>plus</HAP2> vive que les autres les <HAP2>a</HAP2> décidés <HAP2>à</HAP2>
porter plainte <HAP2>au</HAP2> nom de la ville.
Le <HAP2>moustique</HAP2>, un <HAP1><HAP1-et-2>trentenaire</HAP1-et-2></HAP1> <HAP2>à</HAP2> l'<HAP1><HAP1-et-2>allure</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>juvénile</HAP1-et-2></HAP1>, Christophe Grébert,
<HAP1><HAP1-et-2>comparaissait</HAP1-et-2></HAP1>, <HAP1><HAP1-et-2>vendredi</HAP1-et-2></HAP1> 3 <HAP1><HAP1-et-2>février</HAP1-et-2></HAP1>, devant la 17^e <HAP1><HAP1-et-2>chambre</HAP1-et-2></HAP1> du tribunal
<HAP1><HAP1-et-2>correctionnel</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>Paris</HAP1-et-2></HAP1> pour diffamation. <HAP1><HAP1-et-2>Il</HAP1-et-2></HAP1> lui <HAP1><HAP1-et-2>était</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>reproché</HAP1-et-2></HAP1> d'avoir
<HAP1><HAP1-et-2>diffusé</HAP1-et-2></HAP1> sur son blog (monputeaux.com), un <HAP1><HAP1-et-2>article</HAP1-et-2></HAP1> du Parisien <HAP2>qui</HAP2>,
<HAP1><HAP1-et-2>sous</HAP1-et-2></HAP1> <HAP2>le</HAP2> <HAP1><HAP1-et-2>titre</HAP1-et-2></HAP1> "<HAP1><HAP1-et-2>Nouveaux</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>remous</HAP1-et-2></HAP1> <HAP2>à</HAP2> la <HAP1><HAP1-et-2>mairie</HAP1-et-2></HAP1> de <HAP2>Puteaux</HAP2>", <HAP1><HAP1-et-2>évoquait</HAP1-et-2></HAP1> <HAP2>le</HAP2>
<HAP1><HAP1-et-2>licenciement</HAP1-et-2></HAP1> d'<HAP2>une</HAP2> <HAP1><HAP1-et-2>employée</HAP1-et-2></HAP1> <HAP2>municipale</HAP2> et les <HAP1><HAP1-et-2>menaces</HAP1-et-2></HAP1> que <HAP1><HAP1-et-2>celle</HAP1-et-2></HAP1>-<HAP1><HAP1-et-2>ci</HAP1-et-2></HAP1>
<HAP1><HAP1-et-2>aurait</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>reçues</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>après</HAP1-et-2></HAP1> avoir <HAP1><HAP1-et-2>dénoncé</HAP1-et-2></HAP1> <HAP2>des</HAP2> <HAP1><HAP1-et-2>irrégularités</HAP1-et-2></HAP1> <HAP2>dans</HAP2> <HAP2>une</HAP2> <HAP1><HAP1-et-2>passation</HAP1-et-2></HAP1>
de <HAP1><HAP1-et-2>marchés</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>publics</HAP1-et-2></HAP1>. Sur son blog, Christophe Grébert avait <HAP1><HAP1-et-2>ajouté</HAP1-et-2></HAP1> <HAP2>des</HAP2>
<HAP1><HAP1-et-2>commentaires</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>personnels</HAP1-et-2></HAP1>, <HAP2>dans</HAP2> <HAP1><HAP1-et-2>lesquels</HAP1-et-2></HAP1> il <HAP1><HAP1-et-2>affirmait</HAP1-et-2></HAP1> avoir été, lui
aussi, la <HAP1><HAP1-et-2>cible</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>tentatives</HAP1-et-2></HAP1> d'<HAP1><HAP1-et-2>intimidation</HAP1-et-2></HAP1>.
<HAP1><HAP1-et-2>Poursuivi</HAP1-et-2></HAP1> <HAP2>au</HAP2> <HAP1><HAP1-et-2>côté</HAP1-et-2></HAP1> du Parisien, Christophe Grébert <HAP2>a</HAP2> <HAP1><HAP1-et-2>tenté</HAP1-et-2></HAP1> de faire
<HAP1><HAP1-et-2>valoir</HAP1-et-2></HAP1>, devant <HAP2>le</HAP2> tribunal, la <HAP1><HAP1-et-2>spécificité</HAP1-et-2></HAP1> de son blog, qu'il <HAP2>a</HAP2>
<HAP1><HAP1-et-2>présenté</HAP1-et-2></HAP1> comme "<HAP2>le</HAP2> site d'un <HAP1><HAP1-et-2>citoyen</HAP1-et-2></HAP1> <HAP2>qui</HAP2> <HAP1><HAP1-et-2>veut</HAP1-et-2></HAP1> faire <HAP1><HAP1-et-2>circuler</HAP1-et-2></HAP1>
l'information <HAP1><HAP1-et-2>locale</HAP1-et-2></HAP1>". <HAP1><HAP1-et-2>L</HAP1-et-2></HAP1>'<HAP1><HAP1-et-2>idée</HAP1-et-2></HAP1>, <HAP2>a</HAP2>-t-il <HAP1><HAP1-et-2>raconté</HAP1-et-2></HAP1>, lui <HAP2>est</HAP2> <HAP1><HAP1-et-2>venue</HAP1-et-2></HAP1> <HAP2>au</HAP2>
<HAP1><HAP1-et-2>lendemain</HAP1-et-2></HAP1> du <HAP1><HAP1-et-2>premier</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>tour</HAP1-et-2></HAP1> de l'<HAP1><HAP1-et-2>élection</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>présidentielle</HAP1-et-2></HAP1> de 2002, <HAP2>qui</HAP2>
avait <HAP1><HAP1-et-2>vu</HAP1-et-2></HAP1> son <HAP1><HAP1-et-2>candidat</HAP1-et-2></HAP1>, <HAP1><HAP1-et-2>Lionel</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>Jospin</HAP1-et-2></HAP1>, être <HAP1><HAP1-et-2>devancé</HAP1-et-2></HAP1> par Jean-<HAP1><HAP1-et-2>Marie</HAP1-et-2></HAP1> Le
<HAP1><HAP1-et-2>Pen</HAP1-et-2></HAP1>. "<HAP1><HAP1-et-2>Ça</HAP1-et-2></HAP1> <HAP2>a</HAP2> été un <HAP1><HAP1-et-2>choc</HAP1-et-2></HAP1> pour <HAP1><HAP1-et-2>moi</HAP1-et-2></HAP1> et j'ai <HAP1><HAP1-et-2>décidé</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>m</HAP1-et-2></HAP1>'<HAP1><HAP1-et-2>engager</HAP1-et-2></HAP1>. <HAP1><HAP1-et-2>J</HAP1-et-2></HAP1>'ai
<HAP1><HAP1-et-2>adhéré</HAP1-et-2></HAP1> <HAP2>au</HAP2> <HAP1><HAP1-et-2>PS</HAP1-et-2></HAP1> <HAP2>le</HAP2> 22 <HAP2>avril</HAP2> et, comme je <HAP1><HAP1-et-2>suis</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>journaliste</HAP1-et-2></HAP1>, j'ai <HAP1><HAP1-et-2>ouvert</HAP1-et-2></HAP1>
ce blog. Je <HAP1><HAP1-et-2>me</HAP1-et-2></HAP1> promène <HAP2>dans</HAP2> la ville <HAP1><HAP1-et-2>avec</HAP1-et-2></HAP1> mon <HAP1><HAP1-et-2>appareil</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>photo</HAP1-et-2></HAP1> et je
mets en <HAP1><HAP1-et-2>ligne</HAP1-et-2></HAP1> aussi <HAP1><HAP1-et-2>bien</HAP1-et-2></HAP1> <HAP2>une</HAP2> <HAP1><HAP1-et-2>manifestation</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>culturelle</HAP1-et-2></HAP1> ou <HAP1><HAP1-et-2>sportive</HAP1-et-2></HAP1>
qu'un <HAP1><HAP1-et-2>fait</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>divers</HAP1-et-2></HAP1> ou un <HAP1><HAP1-et-2>compte</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>rendu</HAP1-et-2></HAP1> du <HAP1><HAP1-et-2>conseil</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>municipal</HAP1-et-2></HAP1>."
Sur monputeaux.com, Christophe Grébert n'<HAP2>a</HAP2> pas <HAP1><HAP1-et-2>manqué</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>chroniquer</HAP1-et-2></HAP1>
les <HAP1><HAP1-et-2>déboires</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>judiciaires</HAP1-et-2></HAP1> de l'<HAP1><HAP1-et-2>ancien</HAP1-et-2></HAP1> <HAP2>maire</HAP2>, <HAP1><HAP1-et-2>Charles</HAP1-et-2></HAP1> <HAP2>Ceccaldi</HAP2>-<HAP2>Raynaud</HAP2>.
"Je <HAP1><HAP1-et-2>fais</HAP1-et-2></HAP1> <HAP2>une</HAP2> <HAP1><HAP1-et-2>revue</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>presse</HAP1-et-2></HAP1>, <HAP2>s</HAP2>'<HAP2>est</HAP2>-il <HAP1><HAP1-et-2>défendu</HAP1-et-2></HAP1>. <HAP1><HAP1-et-2>Dès</HAP1-et-2></HAP1> qu'<HAP1><HAP1-et-2>on</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>parle</HAP1-et-2></HAP1> de
<HAP2>Puteaux</HAP2> <HAP1><HAP1-et-2>quelque</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>part</HAP1-et-2></HAP1>, je <HAP2>le</HAP2> mets sur mon blog." <HAP1><HAP1-et-2>Un</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>argument</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>jugé</HAP1-et-2></HAP1>
<HAP1><HAP1-et-2>irrecevable</HAP1-et-2></HAP1> par l'avocat de la ville, <HAP1><HAP1-et-2>M</HAP1-et-2></HAP1>^e Jean-<HAP1><HAP1-et-2>Marc</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>Fedida</HAP1-et-2></HAP1>, <HAP1><HAP1-et-2>selon</HAP1-et-2></HAP1>
lequel il n'<HAP1><HAP1-et-2>y</HAP1-et-2></HAP1> <HAP2>a</HAP2> pas <HAP1><HAP1-et-2>lieu</HAP1-et-2></HAP1> de faire <HAP2>une</HAP2> <HAP1><HAP1-et-2>distinction</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>entre</HAP1-et-2></HAP1> un <HAP1><HAP1-et-2>journal</HAP1-et-2></HAP1> et
un blog. "<HAP1><HAP1-et-2>Quel</HAP1-et-2></HAP1> que <HAP1><HAP1-et-2>soit</HAP1-et-2></HAP1> <HAP2>le</HAP2> <HAP1><HAP1-et-2>moyen</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>utilisé</HAP1-et-2></HAP1>, la diffamation n'<HAP1><HAP1-et-2>appartient</HAP1-et-2></HAP1>
pas <HAP2>au</HAP2> <HAP1><HAP1-et-2>débat</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>public</HAP1-et-2></HAP1>", <HAP2>a</HAP2> <HAP1><HAP1-et-2>souligné</HAP1-et-2></HAP1> l'avocat en <HAP1><HAP1-et-2>qualifiant</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>M</HAP1-et-2></HAP1>. Grébert de
"<HAP1><HAP1-et-2>moto</HAP1-et-2></HAP1>-<HAP1><HAP1-et-2>crottes</HAP1-et-2></HAP1> de la diffamation, <HAP2>qui</HAP2> <HAP2>se</HAP2> promène et <HAP1><HAP1-et-2>ramasse</HAP1-et-2></HAP1> <HAP2>tout</HAP2> ce <HAP2>qui</HAP2>
<HAP1><HAP1-et-2>traîne</HAP1-et-2></HAP1> <HAP2>dans</HAP2> les <HAP1><HAP1-et-2>rues</HAP1-et-2></HAP1> de <HAP2>Puteaux</HAP2>".
<HAP1><HAP1-et-2>Si</HAP1-et-2></HAP1> elle <HAP2>a</HAP2> considéré que, pour Le Parisien, la diffamation devait être
<HAP1><HAP1-et-2>retenue</HAP1-et-2></HAP1> par <HAP2>le</HAP2> tribunal, la <HAP1><HAP1-et-2>procureure</HAP1-et-2></HAP1>, <HAP1><HAP1-et-2>Béatrice</HAP1-et-2></HAP1> Vautherin, <HAP1><HAP1-et-2>ne</HAP1-et-2></HAP1> <HAP2>s</HAP2>'<HAP2>est</HAP2>
en <HAP1><HAP1-et-2>revanche</HAP1-et-2></HAP1> pas <HAP1><HAP1-et-2>prononcée</HAP1-et-2></HAP1> sur <HAP2>le</HAP2> <HAP1><HAP1-et-2>cas</HAP1-et-2></HAP1> du blog de Christophe Grébert.
"<HAP1><HAP1-et-2>On</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>pourrait</HAP1-et-2></HAP1> <HAP2>a</HAP2> <HAP1><HAP1-et-2>priori</HAP1-et-2></HAP1> lui <HAP1><HAP1-et-2>accorder</HAP1-et-2></HAP1> <HAP2>le</HAP2> <HAP1><HAP1-et-2>bénéfice</HAP1-et-2></HAP1> de la <HAP1><HAP1-et-2>polémique</HAP1-et-2></HAP1>
<HAP1><HAP1-et-2>citoyenne</HAP1-et-2></HAP1> <HAP2>s</HAP2>'il <HAP2>s</HAP2>'<HAP1><HAP1-et-2>agit</HAP1-et-2></HAP1> d'un site <HAP1><HAP1-et-2>personnel</HAP1-et-2></HAP1> pour lequel il n'<HAP2>est</HAP2> pas
tenu <HAP2>à</HAP2> un <HAP1><HAP1-et-2>devoir</HAP1-et-2></HAP1> d'information et de <HAP1><HAP1-et-2>contradiction</HAP1-et-2></HAP1>", <HAP2>a</HAP2> <HAP1><HAP1-et-2>indiqué</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>M</HAP1-et-2></HAP1>^<HAP1><HAP1-et-2>me</HAP1-et-2></HAP1>
Vautherin. <HAP1><HAP1-et-2>Mais</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>si</HAP1-et-2></HAP1> monputeaux.com devait être considéré comme <HAP2>le</HAP2> site
"<HAP2>plus</HAP2> <HAP1><HAP1-et-2>officiel</HAP1-et-2></HAP1>" d'un <HAP1><HAP1-et-2>sympathisant</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>politique</HAP1-et-2></HAP1>, <HAP1><HAP1-et-2>alors</HAP1-et-2></HAP1> il <HAP1><HAP1-et-2>serait</HAP1-et-2></HAP1> tenu <HAP2>à</HAP2>
"<HAP1><HAP1-et-2>davantage</HAP1-et-2></HAP1> de <HAP1><HAP1-et-2>précautions</HAP1-et-2></HAP1> <HAP1><HAP1-et-2>contradictoires</HAP1-et-2></HAP1>", <HAP2>a</HAP2>-t-elle <HAP1><HAP1-et-2>observé</HAP1-et-2></HAP1>. <HAP1><HAP1-et-2>Jugement</HAP1-et-2></HAP1>
<HAP2>le</HAP2> 17 <HAP1><HAP1-et-2>mars</HAP1-et-2></HAP1>.

FICHIER 2

§ <MOIS="200603"><JOUR="20060310"><HEURE="2006031000">
Dans la bonne ville de <HAP2>Puteaux</HAP2> (Hauts-de-Seine) <HAP2>s</HAP2>'<HAP2>est</HAP2> niché un drôle
de <HAP2>moustique</HAP2>. Voilà bientôt quatre ans que sa susurration perturbe la
tranquillité <HAP2>des</HAP2> travaux de la majorité <HAP2>municipale</HAP2> (UMP) et que ses
piqûres agacent <HAP2>tout</HAP2> particulièrement la famille <HAP2>Ceccaldi</HAP2>-<HAP2>Raynaud</HAP2>,
père et fille, <HAP2>qui</HAP2> <HAP2>se</HAP2> sont succédé <HAP2>dans</HAP2> <HAP2>le</HAP2> fauteuil de <HAP2>maire</HAP2>. En <HAP2>avril</HAP2>
2004, <HAP2>une</HAP2> piqûre un peu <HAP2>plus</HAP2> vive que les autres les <HAP2>a</HAP2> décidés <HAP2>à</HAP2>
porter plainte <HAP2>au</HAP2> nom de la ville.