====== Données et nature ====== :!: En cours de construction ====== Jour1 ====== ===== Qu'est-ce qu'une donnée ? ===== Dans les technologies de l'information, une donnée est une description élémentaire, souvent codée, d'une réalité (chose, transaction, événement, etc.) Les données peuvent être conservées et classées sous différentes formes : papier, numérique, alphabétique, images, sons, etc. Le processus d'enregistrement des données dans une mémoire s'appelle la mémorisation. Les données sont, avec les traitements, l'un des deux piliers sur lesquels repose toute méthode en informatique. Les bonnes pratiques recommandent une indépendance stricte entre les données et les traitements. Ce principe vise à ménager et à faciliter les évolutions futures des applications : De la sorte toute modification ou refonte des données n'impacte pas ou très peu le domaine des traitements, et réciproquement. ([[https: fr.wikipedia.org-wiki-Donnée %28informatique%29|Wikipedia]]) * Structuration : base de données, données élémentaires, [[https: fr.wikipedia.org-wiki-Métadonnées|métadonnées]], autres documents (images, vidéos, son, ...) * Support, stockage * Visualisation * Sécurité ===== Données ===== * Données gouvernementales * Données culturelles * Données scientifiques * Données environnementales & économiques Historique du Data Processing : [[http://dvautier.home.comcast.net/~dvautier/tab/intro.htm]] ===== Applications ===== * Etat : statistiques, comptabilités, recensement, * Justice : preuves * Médical : génome (human reference) * Economie : données personnelles, ciblage marketing, data mining * Web sémantique * Système expert * Data center * Intrusions * Data journalisme, sécuriser ses sources, anonymat * Vie privée, rétention des données * Data moshing * Big Data, Cloud, ... * Neutralité du Net * Données libérées (Age de l'accès ?): Open Data (villes), sciences, éducation, histoire * et Pure Data ? (datastructure pour manipuler le son graphiquement) * Google : [[http://fkaplan.wordpress.com/2012/01/17/quand-les-mots-valent-de-lor/|capitalisme linguistique ]], [[ http://www.internetactu.net/2009/01/23/nicolas-carr-est-ce-que-google-nous-rend-idiot/|Google nous rend idiot ? ]], comment se passer de Google, [[http://www.internetactu.net/2009/12/15/une-societe-de-la-requete-14-de-la-googlisation-de-nos-vies/|la googlisation de nos vies ]] * Facebook : fini la vie privée, mémoire, [[http://www.slate.fr/story/14879/facebook-twitter-google-monetisation-internautes-revoltez-vous]] * [[http://www.controle-tes-donnees.net/]] ===== Visualisation des données ===== * = compression de connaissances * Elle permet en un seul coup d'œil d'en saisir la tendance générale. Une des pionniers de l'usage moderne de la représentation graphique, semble avoir été Charles Joseph Minard (1781-1870), professeur puis super-intendant de l'école des Ponts et Chaussées, célèbre pour ses cartes figuratives et tableaux graphiques illustrant la campagne napoléonienne de Russie. il convient de garder à l'esprit qu'une représentation graphique reste, par essence, une simplification de la réalité. ([[https: fr.wikipedia.org-wiki-Visualisation des données|Wikipedia]]) ===== Exemples ===== * Revenus des multinationales : [[http://www.happier.co.uk/infogram/amount-top-companies-earn-per-second.html]] * [[http://polau.org/pacs/]] ===== Exemples pratiques, les méta données ===== * document HTML + / : web sémantique, référencement * type MIME * encapsulation TCP/IP * format sons, images (exif tool) ====== Tout est donnée ====== ... ====== * Atelier Data Processing avec Pd Nicolas Montgermont : http://www.nimon.org/edu/data//processing/index.htm * Martin Howse (UK): * Earth Coding * * [[http://publiclab.org/]] : web tools : [[http://mapknitter.org/]], [[http://spectralworkbench.org/]], [[http://infragram.org/]] * [[http://codelab.fr/2011]] : liens algos, ia, ... * [[http://schoolofdata.org]] * [[http://affordance.typepad.com/mon weblog/2013/12/if-ca-va-then-oui-et-toi-les-algorithmes-de-la-routine.html]] * [[http://internetactu.blog.lemonde.fr/2013/12/13/big-data-pourquoi-nos-metadonnees-sont-elles-plus-personnelles-que-nos-empreintes-digitales/]] * [[http://vimeo.com/80597786]] tutorial 1h sur Processing + data visualisation * [[http://www.kawenga.org/post/2013/04/04/LogforData-3e-temps-de-r%C3%A9sidence-%C3%A0-Kawenga]] : projet logDorData * projet cerveaux artificiel : SYNAPse, humain Brain Project * [[http://affordance.typepad.com/mon weblog/2014/02/politique-des-algorithmes.html]] ===== Visualisation de données ===== * Livre [[http://www.eyrolles.com/Audiovisuel/Livre/cartographie-des-reseaux-9782212135695]] * Livre "Data Visualization" (Processing), Sémiologie graphique de Jacques Bertin (livre incontournable), livre "Images de pensée", Antoine Schmitt, Application NewsMap , Nicolas Montgermont (ping), Ikeda, ..., livre (datavizion), livre "Guide du datajournalisme : Collecter, analyser et visualiser les données", senses tor norretranders * Livre [[http://www.eyrolles.com/Informatique/Livre/data-visualisation-9782212135992]] * [[https: addons.mozilla.org-fr-firefox-addon-lightbeam-]] * open data : http://www.youtube.com/watch?feature=player//embedded&v=aHxv//2BMJfw * http://www.latribune.fr/technos-medias/internet/20130926trib000787315/un-nouveau-business-aux-etats-unis-pirater-et-vendre-des-donnees-informatiques.html * http://owni.fr/2010/12/08/donnees-liberees-chercheurs-debrides-societe-impliquee/ * exemples : articles de journaux, démographie, bourses, météo, disque dur, statistique, page web, arbres (noeuds), cartes, Internet, gépolitique (Bureau d'études, université tangent, theyrule.net), séquencages adn, data-journaliste, acides-aminèes ([[http://gerard.paresys.free.fr/Theme/Theme3.html|exemple avec pd ]])... * [[http://eu.wiley.com/WileyCDA/Section/id-814251.html]], [[http://marcinignac.com/projects/category/featured/]], [[http://www.bewitched.com/]], [[http://www.informationisbeautiful.net/visualizations/the-billion-dollar-o-gram-2009/]], [[https: www.youtube.com-watch?v=AdSZJzb-aX8]], [[http://homes.cs.washington.edu/~jheer/]], [[http://www.technologyreview.com/news/414119/simpler-data-visualization/]], [[http://www.informationisbeautiful.net/visualizations/the-billion-dollar-o-gram-2009/]], [[http://www.technologyreview.com/news/408104/mapping-the-internet/]] * Processing, Javascript ([[http://d3js.org/]]), ... * conférences [[ http://www.ted.com/talks/hans rosling shows the best stats you ve ever seen.html|Hans Rosling ]], tor norretranders * [[http://outils.expoviz.fr/]] * data body : [[http://www.olats.org/studiolab/databody.php#pres]] * [[ http://ldt.iri.centrepompidou.fr/ldtplatform/ldt/front/player/98c4f3d0-da60-11e2-a18e-00145ea4a2be/|cultural data ]], [[http://data.bnf.fr/]], [[http://hdalab.iri-research.org/hdalab/]], open science, sciences contributives (floradata,[[http://vigienature.mnhn.fr/]], etc.), [[http://fr.dbpedia.org/]], [[https: p2pu.org-en-courses-5-open-science-an-introduction-]] * taxation des données : [[http://www.zdnet.fr/actualites/taxation-des-donnees-colin-collin-defendent-leur-rapport-devant-les-senateurs-39786544.htm]] * [[http://wimmics.inria.fr/]], web sémantique http://fr.wikipedia.org/wiki/SPARQL, [[http://fr.wikipedia.org/wiki/Web des donn%C3%A9es]] * mpeg4 * carte de pensée : freeplane, labyrtinth, [[http://www.lirmm.fr/cogui/]] * interface graphiques : [[http://virage.blueyeti.fr/]] * [[http://www.telecom-valley.fr/blog/hackathon]] * [[http://www.powersof10.com/]] * [[http://eyebeam.org/events/scraping-political-data-activism-web-hacking-techniques]] * [[http://openart.eyebeam.org/]] * Guerilla Open Access Manifesto : http://pastebin.com/cefxMVAy (2008) * data set, gefx, google api, openlayers, ... * Processing NYtimes : [[http://blog.blprnt.com/blog/blprnt/7-days-of-source-day-2-nytimes-36536]] * data materialized demography : [[http://brightestyoungthings.com/articles/photos-24-hour-city-project.htm]] * [[http://www.journaldunet.com/solutions/analytics/hadoop/]] * Parse + REGEXP avec Processing : [[http://shiffman.net/2011/12/22/night-3-regular-expressions-in-processing/]] * [[http://www.madeinlaboate.org/news-innovation/nantes-ouvre-ses-donnees-publiques-lappel-a-projets]] * [[http://www.scoop.it/t/innovation-sociale-et-citoyenne]] * texte alice aux pays des merveilles : [[http://arts-numeriques.codedrops.net/Long-text-markup]] * [[http://www.brainpickings.org/index.php/2012/12/21/100-diagrams-that-changed-the-world/]], [[http://www.brainpickings.org/index.php/2012/04/16/in-pursuit-of-the-unknown-ian-stewart/]] * [[http://www.webmii.com]] : recherche sur vous sur Internet * [[http://wiki.labomedia.org/index.php/Le Web 4.0 /CONTENUS]] * [[http://www.newsresources.org/tag/donneesfleuries]] ==== Logiciels ==== * [[http://wiki.imacros.net/Main Page]] * [[https: addons.mozilla.org-fr-firefox-addon-imacros-for-firefox-]] * [[http://www.filetransit.com/files.php?name=Data Scraping]] * Fake ?? * [[https: scraperwiki.com-]] * [[http://www.crummy.com/software/BeautifulSoup/]] * [[http://scrapy.org/]] {{http://images.telerama.fr/medias/2010/07/media 58014/healthmap-newsmap-et-homeland-guantanamos,M39910.jpg}} {{http://culturedecoded.files.wordpress.com/2008/08/feb-07-news-map1.jpg?w=480}} {{http://www.nouveauxmedias.net/allema IM/im al 07.gif}} {{http://referentiel.nouvelobs.com/file/3184791.jpg}} {{http://www.boutiquesdemusees.fr/uploads/photos/2262/5769 xxl.jpg}} {{http://1.bp.blogspot.com/-yC3Sg755-tA/T04XQw-vZII/AAAAAAAAACM/hqwLOTPXb2U/s640/Image8.gif}} ===== Tout est donnée ===== * data love : [[http://datalove.me/]] Love data Data is essential Data must flow Data must be used Data is neither good nor bad There is no illegal data Data is free Data can not be owned No man, machine or system shall interrupt the flow of data Locking data is a crime against datanity Love data * exploration des données (wireshark, commandes unix cat /dev/mem | /dev/snd) * datacenters, vies privée, algorithmes de datamining, (antidataming de RYBN), cryptographie ([[ https: fr.wikipedia.org-wiki-Salage %28cryptographie%29|salage ]], darknet, TOR * data moshing (compression, codecs), détournement jeu vidéo, glitch, nombre aléatoire, ..., statistiques * scripts. Exemple avec un script Python qui analyse une image et qui crée un fichier Pure Data ([[http://jeromeabel.net/files/code/pd/pd-works/scripts/imageToPd/]]) * rasterisation, stéréo, fausse 3D, ascii art, ... * livre autodefense intellectuelle, * [[https: www.cryptoparty.fr-index.php-Marseille]] * hachoir [[http://jkp.antisocial.be/bgucore-hachoir.html]] ([[ https: bitbucket.org-haypo-hachoir-wiki-Home|hachoir lib in python ]] * ipv6 tunnel https://hackerspace.be/Network/IPv6 * [[http://wiki.labomedia.org/index.php/Scripts bash linux audiovisuel]] * [[http://bases-hacking.org/]] * bio-data (ANNECY) Workshop: Bio-data in interactive art (GENEVE) * perl - gif : [[http://codelab.fr/1583]] {{http://img.wonderhowto.com/img/47/09/63475276574585/0/datamosh-combine-two-videos-create-digital-art.300x140.jpg}} {{https: sphotos-a-mia.xx.fbcdn.net:hphotos-ash3:c214.0.531.531:s370x247:1001611 10151545334868736 1904774574 n.jpg}} Baden Pailthorpe {{http://arts-numeriques.codedrops.net/local/cache-vignettes/L283xH318/cart-b6c1c.jpg}} Cory Archangel * [[http://www.recyclism.com/corrupt.php]], [[http://www.corrupt.recyclism.com/]] * [[http://en.wikipedia.org/wiki/Glitch art]] ===== Code & nature ===== * !! architecture de l'univers, corps=machine * !! chaos/ordre/hasard/lois * CNRS - le monde en équations : [[http://www.cnrs.fr/monde-equations/map/map.html]] * BBC- équations : [[http://www.youtube.com/watch?v=erUQhXjY9ic]] * Comment utiliser des équations, des formules et algorithmes pour former des espèces (modélisations) * Rappels Maths * Créatures, organismes, vie de groupe (fractales, nombre d'or, jeu de la vie, règles, hasard), fractale (poumon, reins, vaisseaux sanguins, vie cellulaire, plante, climat, paysage en 3D, auto-simlarités, longueur d'une côte) : [[http://lesieclebleu.blogspot.fr/2010/10/mandelbrot-et-la-decouverte-dun-nouveau.html]] * Fractel, Mandelbrot, enesmble de Julia, Lewis Fry Richardson, esnemeble de MandelBrot, Flocon de Koch, réduire la taille des antennesNathan Cohen (fractal antenna, http://www.m0wwa.co.uk/page/M0WWA//fractal//antenna.html), rythme cardiaque, répartision arbre/foret, rapport masse/énergie {{http://www.scienceprog.com/wp-content/uploads/2007i/fractal/cell antenna.gif}} * Intelligence/vie artificielle : algorithme d'apprentissage * lettre / bacterie, maladie, ondes, propagation, génération * livre code secret, code nature, programmation flashmx, vie artificielle * [[http://natureofcode.com/]] * "beauté" d'un visage !! : [[http://www.youtube.com/watch?v=v5TaiKC7QuA]], documentaire fractales :[[http://www.youtube.com/watch?v=u9HhyBQuiOw&list=PLF2EDCBFDAA6EA95A]] * Pi, fibonnacci, ammonite, tournesol, pomme de pain, oeil de mouche, ... * [[ http://vi.sualize.us/link/?rid=MzBjYWI0NDBlMmUzYWU0OGY2ZGQ2NzEwN2RhYTg1Yjg~&rel=eyJwZXJwYWdlIjoxMiwiZXhjbHVkZSI6WyIzOTk3MjE5Il0sImN1cnJlbnR1c2VyaWQiOm51bGwsIm5zZndpbWFnZXMiOmZhbHNlLCJtb2RlcmF0ZWRpbWFnZXMiOmZhbHNlLCJiTWVkaWEiOiIwIiwidGFncyI6WyJhbnRlbm5hIiwiZWxlY3Ryb21hZ25ldGlzbSIsImZyYWN0YWwiLCJnb2xkIiwiaW5zdGFsbGF0aW9uIiwic291bmQiXX0~&url=aHR0cDovL3d3dy53ZS1tYWtlLW1vbmV5LW5vdC1hcnQuY29tL2FyY2hpdmVzLzIwMTEvMDMvY2x1Yi10cmFuc21lZGlhbGUtZXhoaWJpdGlvbi5waHA~|Aura by Joyce Hinterding ]] * processing et trigo : http://www.res-publica.fr/ENSEIGNEMENT/ADVANCED/TRIGONOMIE/trigo.html * http://www.res-publica.fr/ENSEIGNEMENT/ADVANCED/MOTION/motion.html * http://jsxgraph.uni-bayreuth.de/wiki/index.php/Superformula * http://www-inrev.univ-paris8.fr/extras/Michel-Bret/cours/bret/cours/cours.htm * [[http://www.complexification.net/gallery/]], [[http://codes.mome.hu/CodesOfNature Mome.htm]] * [[http://www.cooperhewitt.org/object-of-the-day/2013/08/26/planetary-collecting-and-preserving-code-living-object]] * [[http://www.formeselementaires.com/]] !! * sciences musique : [[http://www.atonor.de/videos.html]] * processing : [[http://www.creativeapplications.net/processing/geometry-textures-shaders-processing-tutorial/]] * documentaire CHERCHE TOUJOURS de Mathias THÉRY & Étienne CHAILLOU * [[http://www.jeffreypoirier.org/contact.php]] Contenir l'essaim * [[http://danielcorbeil.com/installations/arthropolis-2007-2014/]] {{http://www.nuvo.net/imager/joyce-hinterding-aura-at-a-2009-show-in-sydney-in-the-piece-hinterdin/b/original/2516488/43ef/Hinterding.jpeg}} Joyce Hinterding, "Aura," {{http://referentiel.nouvelobs.com/file/rw645/3195145.JPG}} {{http://www.imal.org/sites/default/files/slideshows/11/02/egregore125.jpg}} {{http://www.offf.ws/2011/wp-content/uploads/TheYellingRoom JoshuaDavis3.jpg}} ===== Live Coding ===== * pure data, super collider, fluxus, BNIZ, Bytebeat * [[https: www.youtube.com-watch?v=6OrtZRGHr M]], [[https: www.youtube.com-watch?v=PaXQFketBCM]] {{http://www.pawfal.org/fluxus/images/Screenshot-16.png}} ===== Tracking ===== * Apprentissage C++, Open CV, Open Frameworks : algos de reconnaissance de formes * Techniques de captations sans fils (magnétisme, caméra, infrarouge, infrason, radio, Kinect) * [[http://itp.nyu.edu/~dbo3/cgi-bin/wiki.cgi?ProcVid]] {{http://ivl.calit2.net/wiki/images/4/46/Eye-Tracking.jpg}}