Journal Fichiers plagier, comment le mettre en evidence

Posté par Anonyme le 08 décembre 2003 à 09:50.

Étiquettes : aucune

déc.

2003

Bonjour,

J'ai une joyeuse question du lundi matin. J'ai un disque de 80go fourré de documents. D'un autre coté j'ai 4 cds remplis de documents inspiré du premier. C'est a dire des fichiers légérement modifiés dans leur date de création, de modification et aussi dans leur contenus. Comment mettre en evidence que ces 2 cds contiennent des données plagiées.

Je cherche une solution pour traiter des gros volumes, superieur à 5000 fichiers. Dans le lot y'a un peut de tout, des .doc, des .xls, des fichiers en texte brute, des fichiers xml, html...

Quelqu'un à la solution miracle ?

# Re: Fichiers plagier, comment le mettre en evidence

Posté par Boa Treize (site web personnel) le 08 décembre 2003 à 10:02. Évalué à 2.

Avec strings tu peux récupérer les bouts de chaînes texte qui traînent dans les documents. Avec diff, tu peux voir s'il y a des sections qui se ressemblent (c'est à dire des zones que diff saute allègrement parce qu'identiques). Bien sûr, impossible de faire ça d'un coup pour l'ensemble des CDs, mais si tu as des répertoires que tu estimes copiés, ça peux être un début de les « comparer » de la sorte.

C'est juste une vague idée, pas une solution miracle ou même testée.
# Re: Fichiers plagier, comment le mettre en evidence

Posté par Anonyme le 08 décembre 2003 à 10:31. Évalué à 1.

En fait ce qu'il me faudrait aussi c'est un programme scriptable capable de convertir du .doc et du .xls (surement word et excel 2000) en texte brut.
- [^] # Re: Fichiers plagier, comment le mettre en evidence
  
  Posté par Ramso le 08 décembre 2003 à 10:38. Évalué à 1.
  
  ça existe mais j'ai oublié le nom :-)
  
  ou au pire, ça converti en HTML, donc t'ajoute une pièce à ta moulinette et c'est bon !
# Re: Fichiers plagier, comment le mettre en evidence

Posté par plagiats le 08 décembre 2003 à 12:29. Évalué à 1.

on parle de moa?

sinon pour excel, un export des données en csv est possible. une moulinette doit exister également
http://www.google.fr/linux?q=xls+vers+csv&btnG=Recherche+Google(...)

plagiats
# Re: Fichiers plagier, comment le mettre en evidence

Posté par __caffeine__ le 08 décembre 2003 à 13:21. Évalué à 1.

Si t'as accès à une boiboite windows, tu peux jouer avec les extensions win32all de python. ça te permet d'utiliser l'API win32 pour manipuler les.xls, .doc et autres cochonneries...
Sinon, si les fichiers sont les mêmes, un bête md5 suffit.
Dernière solution: macros OOo (jamais testé)
# Re: Fichiers plagier, comment le mettre en evidence

Posté par Cédric Girard (site web personnel) le 08 décembre 2003 à 14:08. Évalué à 1.

Ma soluce serait de calculer un hash de tous les fichiers, mais bon ca ne passe bien sur que si les fichiers sont les memes, pas si ya du texte en commun. Ensuite comparaison des crc.
Ca doit tenir une grosse charge

Suivre le flux des commentaires

Note : les commentaires appartiennent à celles et ceux qui les ont postés. Nous n’en sommes pas responsables.