---

A2EB - Analyse Energétique et Environnementale des Bâtiments

---

 

 

Données enregistrées dans la table "edata"

 

Grâce à la baisse du coût des capteurs, de plus en plus d'objets sont connectés au net. Ils envoient régulièrement des données sur leur environnement. Ces données peuvent être analysées pour créer de nouveaux services personnalisés.

 

Données sur le serveur

 

Ce serveur web+SQL est dédié à la collecte de données envoyées par des objects connectés à Internet. Ce sont des capteurs avec une interface web, on parle d'IoT (Internet of Things), qui transmettent des données à ce serveur. Une fois stockées (dans une base de données), les données sont rendues accessibles pour des tâches de visualisation, de traitement, d'analyse, etc.

 

Remarque : chaque object connecté se distingue avec un identifiant (id) et certains requièrent un mot de passe.

 

Sommaire :

• Affichage en ligne de données
• Export des données (CSV, XML, texte...)
• Aide pour envoyer des données à la base de données
• Aide pour récupérer automatiquement des données CSV
• Structure des données CSV
• Explications sur la base de données SQL
• Envoi de données par un formulaire

 

Affichage en ligne de données

 

Vous pouvez réaliser les opérations suivantes :  

Filter selon un objet connecté avec son id= , le mois et l'année
Effacer les données pour un objet connecté avec son id= et le mot de passe
Envoyer le mot de passe à
le formulaire

 

 

 

Synthèse de toutes les données déjà collectées (19 February 2026 20:08:19)

 

 

Remarques :

• l'IoT avec id=2 sert pour faire des tests,
• les IoT sur fond bleu sont protégés en écriture par un mot de passe (2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 2004 2005 ).

 

 

 

Affichage des vingts dernières données de l'objet connecté avec id=7777

 

num. ligne	inst. serveur	inst. uts serveur	nc	st	1	2	3	4	5	6	7	8	9	10	11	12	13	14	15	16	17	18	19	20
20666153	2025-01-05 16:59:56	1736092796.0822	1	2	10	11	12															20	21	22
20655724	2024-12-09 16:00:25	1733756425.8751	33	77	145003	10	11															77	47	747
20655722	2024-12-09 16:00:22	1733756422.2194	33	77	145003	10	11															77	47	747
20655721	2024-12-09 16:00:18	1733756418.9691	33	77	145003	10	11															77	47	747
20655720	2024-12-09 16:00:15	1733756415.7573	33	77	145003	10	11															77	47	747
20655719	2024-12-09 16:00:12	1733756412.5194	33	77	145003	10	11															77	47	747
20655718	2024-12-09 16:00:09	1733756409.2876	33	77	145003	10	11															77	47	747
20655717	2024-12-09 16:00:05	1733756405.967	33	77	145003	10	11															77	47	747
20655716	2024-12-09 16:00:02	1733756402.7226	33	77	145003	10	11															77	47	747
20655715	2024-12-09 15:59:59	1733756399.4859	33	77	145003	10	11															77	47	747
20655714	2024-12-09 15:59:56	1733756396.1878	33	77	145003	10	11															77	47	747
20655711	2024-12-09 15:59:14	1733756354.2426	33	77	145003	10	11															77	47	747
20655710	2024-12-09 15:59:10	1733756350.9875	33	77	145003	10	11															77	47	747
20655709	2024-12-09 15:59:07	1733756347.7909	33	77	145003	10	11															77	47	747
20655708	2024-12-09 15:59:04	1733756344.4072	33	77	145003	10	11															77	47	747
20655707	2024-12-09 15:59:01	1733756341.0681	33	77	145003	10	11															77	47	747
20655706	2024-12-09 15:58:57	1733756337.7253	33	77	145003	10	11															77	47	747
20655705	2024-12-09 15:58:54	1733756334.4846	33	77	145003	10	11															77	47	747
20655704	2024-12-09 15:58:21	1733756301.3671	33	77	145003	10	11															77	47	747
20655703	2024-12-09 15:58:18	1733756298.1254	33	77	145003	10	11															77	47	747

 

 

Export des données (CSV, XML, texte...)

Toutes les données d'un objet connecté dans un fichier CSV

Un fichier CSV (texte séparé par des virgules ou points virgules: Comma-Separated Values) contenant toutes les données déjà transmises par un objet connecté est fabriqué au moment précis où cette page web est demandée. Un fichier par année est créé et mis en ligne :

 

edata.csv

• id de l'objet connecté: 7777
• nombre de lignes : 0
• instant de création du fichier : February 19 2026 20:08:25
• taille du fichier : 0 octets
• durée de calcul : 6.0759000778198 s

 

 

Dernières mesures d'un objet connecté :

La dernière donnée mesurée par un object connecté peut être récupérée à tout instant :

• au format XML (exemple IoT avec id = 7777)
• au format texte (exemple IoT avec id = 7777 )

Pour récupérer uniquement le dernier enregistrement d'un IoT dans une chaîne de caractères, on peut utiliser le script PHP eget.php en passant en paramètre l'identifiant de l'IoT.
Voici un exemple (ici l'id du IoT ou objet connecté est 7777) : eget.php?id=7777

 

Remarque : le script eget.php retourne toujours 26 valeurs séparées par des ';', il retourne une série de 26 '0'si l'id de l'IoT est manquant, et il retourne du 'vide' (NULL en SQL) si l'id de l'IoT est inexistant (dans tous les cas et même pour des id corrects des valeurs pourront être vides si l'IoT n'a pas rempli tous les champs var1 à var20).

 

Données sous forme de séries temporelles

Le script suivant avec passage de deux paramètres (id et date), retourne les instants des enregistrements d'un objet connecté pour le jour indiqué sous la forme d'une série de nombres séparés par une virgule.

Exemple : http://www.mmi.iutmulhouse.uha.fr/etseries.php?idd=11&ddate=2019-12-08

Ici, les données de l'objet connecté id=11 du 8 décembre 2019 sont retournées au format :

YYYY, MM, DD, HH, MM, SS, ms, id, 0, cc, δt1, δt2, δt3 ... 
avec le code cc=0 -> ms, cc=1 -> s, cc=-1 -> "vide"

Les 10 premiers chiffres servent d'en-tête, les autres (δt1 à δtn) représentent les écarts de temps selon le code cc.

 

Pour aller en haut

 

Aide pour envoyer des données à la base de données

La transmission des données (requête) repose sur le protocole HTTP du Web. Dans la spécification du protocole HTTP, GET permet à un IoT (= client Web = objet connecté) de demander une page Web en lui transmettant des paramètres. Les paramètres sont :

• id : identifiant de l'objet connecté (client web) qui est OBLIGATOIRE (entier),
• dt : instant de mesure (datetime),
• nc : valeur de son compteur interne (entier),
• st : son status (entier),
• var1 à var20 : valeurs numériques à stocker (float).

 

C'est le paramètre id qui sert à distinguer l'origine des données, i.e., qui permet de reconnaître l'IoT qui a transmis une ligne de données sur le serveur SQL (Structured Query Language).

 

Transmettre des donnée se fait en accédant à "la ligne de code" à une page web PHP qui se trouve sur le serveur en transmettant les paramètres et leurs valeurs directement dans l'URL. Autrement dit, le programme embarqué dans l'objet connecté doit construire une URL comme celle de l'exemple ci-dessous.

 

Exemple d'URL pour envoyer des données (à tester dans un navigateur avec id=2):

http://www.mmi.iutmulhouse.uha.fr/einsert.php?id=2&dt=2020-10-21%2019:28:26&nc=33&st=77&var1=14&var2=24&var3=34&var18=84&var19=94&var20=204  

 

Il faut donc fabriquer une chaîne de caractères qui servira d'URL. Pour mettre les données dans le bon format on utilise généralement une fonction sprintf(...) qui existe dans pratiquement tous les environnements (C/C++, Python, Matlab, Octave, Java...)

 

Exemple de script Matlab pour envoyer des données (donc créer l'URL) :

  
clc; clear all; close all;

monurl='http://www.mmi.iutmulhouse.uha.fr/einsert.php?id=0007&dt=2017-10-16%2019:28:26&nc=33&st=77
&var1=145003&var2=10&var3=11&var18=0.77&var19=4.7&var20=747.74';   
localfile='monfichier.txt';
urlwrite(monurl, localfile);

% ... il faut bien fabriquer la chaine de caractères contenue dans la variable monurl

 

Exemple de script Python pour envoyer des données (donc créer l'URL) :

import urllib.request

monurl='http://www.mmi.iutmulhouse.uha.fr/einsert.php?id=0007&dt=2017-10-16%2019:28:26&nc=33&st=77
&var1=145003&var2=10&var3=11&var18=0.77&var19=4.7&var20=747.74'; 
xdp = urllib.request.urlopen(monurl)
print(xdp.read())

# ... il faut bien fabriquer la chaine de caractères contenue dans la variable monurl

 

Exemple de script Octave pour envoyer des données (donc créer l'URL) :

monurl='http://www.mmi.iutmulhouse.uha.fr/einsert.php?id=0007&dt=2017-10-16%2019:28:26&nc=33&st=77 
&var1=145003&var2=10&var3=11&var18=0.77&var19=4.7&var20=747.74';
urlread(monurl);
% ... il faut bien fabriquer la chaine de caractères contenue dans la variable monurl

 

Remarques

• la création de l'URL se fait avec de simples opérations sur des chaînes de caractères (concaténation, etc.)
• le langage de programmation implémenté sur l'objet connecté n'a pas d'importance (peut être du Python, du C/C++, du Java...)
• attention, le caractère espace est proscrit dans les URL, il doit être encodé ou remplacé par %20 (dans l'instant dt)
• dans le cas où l'objet connecté est un client Arduino, se référer au site EthernetClient sur le site de Arduino ou à ces articles en Français "Arduino et Ethernet : client" et "librairie Ethernet, pour se connecter à internet" (Attention, il faut veiller à mettre des retours chariot à la fin des URL)

 

Aide pour récupérer automatiquement des données CSV

Il est possible de récupérer et télécharger les données CSV à partir de divers environnement de calcul ou de programmation avec quelques lignes de code. La première ligne sert à générer le fichier CSV qui sera enregistré sur le serveur et la seconde permet de le télécharger.

Pour générer le fichier CSV, il faut transmettre au script serveur eread.php (donc fournir dans l'URL) les 3 paramètres suivants :

• idd : l'identifiant de l'objet connecté
• mm : le numéro du mois
• yyyy : l'année

 

Les exemples ci-dessous sont tous faits pour récupérer toutes les données déjà transmises par l'objet connecté avec l'identifiant 2 (idd=2) durant le mois de juillet (mm=7) en 2021 (yyyy=2021).

 

Exemple d'URL pour récupérer des données (de l'objet connecté avec 2 comme identifiant) :

http://www.mmi.iutmulhouse.uha.fr/eread.php?idd=2&mm=07&yyyy=2021

 

Script Matlab :

 
clc; clear all; close all;

urlwrite('http://www.mmi.iutmulhouse.uha.fr/eread.php?idd=2&mm=07&yyyy=2021', 'localfile.csv');
urlwrite('http://www.mmi.iutmulhouse.uha.fr/edata.csv', 'localfile.csv'); 
% ...

 

Script Python 3 :

import urllib.request

xdp = urllib.request.urlopen('http://www.mmi.iutmulhouse.uha.fr/eread.php?idd=2&mm=07&yyyy=2021')
print(xdp.read())
xdp = urllib.request.urlopen('http://www.mmi.iutmulhouse.uha.fr/edata.csv')
print(xdp.read())
# ...

 

Script Octave :

alldata=urlread("http://www.mmi.iutmulhouse.uha.fr/eread.php?idd=2&mm=07&yyyy=2021");
alldata=urlread("http://www.mmi.iutmulhouse.uha.fr/edata.csv");
% ...

 

Accès via d'autres environnements

Dans d'autres environnements comme Java on utilisera les classes URL ou URLReader et la méthode openStream(...) et Mathematica dispose de URLRead(...)

 

Pour transmettre et récupérer des données CSV, côté client dans l'environnement de calcul et de programmation, il faudra toujours une fonction pour accéder au Web et fabriquer les URL (chaînes de caractères). Puis, selon les cas :

• pour transmettre des données, il faut utiliser dans l'URL le script serveur einsert.php et fournir les paramètres (après le caractère ? en les séparant par le caractère & ;
• pour récupérer des données, il faut d'abord utiliser dans l'URL le script serveur eread.php en fournissant les paramètres puis télécharger le fichier CSV (toujours le même lien http://www.mmi.iutmulhouse.uha.fr/edata.csv

 

Structure des données CSV

Les données sont exportées de la base de données au format CSV (comma-separated values) dans l'ordre des instants du serveur. Chaque ligne correspond à un enregistrement où les données sont séparées par le caractère "; " et il y a dans l'ordre :

1. numéro de la ligne de mesure,
2. instant de mesure de l'objet connecté,
3. instant de mesure du serveur,
4. instant de mesure du serveur au format Unix Time Stamp (uts) en secondes et à 4 chiffres après la virgule
   (since midnight, Jan 1, 1970, UTC) exemple : 2026-02-19 20:08:25.7819 1771528105.7819
5. compteur interne de l'objet connecté (nc),
6. status de l'objet connecté (st),
7. identifiant de l'objet connecté (id),
8. valeurs numériques transmises par l'objet connecté (var1 à var20).

 

Pour aller en haut

 

Explications sur la base de données SQL

Côté serveur, les données sont gérées par une base de données SQL. Le code source SQL ci-dessous donne la structure complète de la table qui contient les mesures et les données des objets connectés :

-- --------------------------------------------------------
--
-- Version du serveur SQL: 5.1.73
--
-- Structure de la table mesure_e
--
CREATE TABLE IF NOT EXISTS mesure_e (
  id bigint(20) unsigned NOT NULL AUTO_INCREMENT,
  datec datetime NOT NULL,
  dates datetime NOT NULL,
  uts double DEFAULT NULL,
  nc int(11) DEFAULT NULL,
  st tinyint(1) DEFAULT NULL,
  id int(20) NOT NULL,
  val1 float NOT NULL,
  val2 float DEFAULT NULL,
  val3 float DEFAULT NULL,
  val4 float DEFAULT NULL,
  val5 float DEFAULT NULL,
  val6 float DEFAULT NULL,
  val7 float DEFAULT NULL,
  val8 float DEFAULT NULL,
  val9 float DEFAULT NULL,
  val10 float DEFAULT NULL,
  val11 float DEFAULT NULL,
  val12 float DEFAULT NULL,
  val13 float DEFAULT NULL,
  val14 float DEFAULT NULL,
  val15 float DEFAULT NULL,
  val16 float DEFAULT NULL,
  val17 float DEFAULT NULL,
  val18 float DEFAULT NULL,
  val19 float DEFAULT NULL,
  val20 float DEFAULT NULL,
  msg text,
  PRIMARY KEY (mes_id)
) ENGINE=MyISAM  DEFAULT CHARSET=utf8; 

 

 

Envoi de données par un formulaire

Formulaire pour IoT id=2.

 

Pour aller en haut



 

A2EB - Analyse Energétique et Environnementale des Bâtiments