spip
/
statistiques
14
0
Fork 2
Code Issues 9 Pull Requests Releases Wiki Activity
Browse Source

Le calcul des données de visites, et son moyen de les récupérer en CSV est modifié. 

## Sur le calcul :

On génère un tableau en deux parties :

- une entrée "meta" contient des informations sur les caractéristiques des données calculées / envoyées. Notamment, on retourne l'objet, l'id_objet, la durée et l'unité de la durée qui était désiré. On transmet également des informations calculées en conséquence, tel que la date de début et fin des données désirées (start_date, end_date), et la date de la première donnée dans cette plage (first_date). Enfin une clé 'columns' indique les colonnes et labels des colonnes associés retournées.
- une entrée "data" contient un tableau des données retournées ; (notamment la date et le nombre de visite associées).

Le tableau de données ne retourne plus les dates manquantes : s'il n'y a pas de visite pour une des journées, cette date sera vide. Cela simplifie grandement les calculs ici (mais cela les reporte(ra) côté javascript)

## Sur l'obtention des données :

- On ne passe plus par le système "transmettre", mais par des squelettes à la racine (statistiques.csv.html et statistiques.json.html) qui vérifient soit une autorisation, soit une authentification faible (ce qu'il y avait avant justement). Cette authentification faible peut servir à des crons (je suppose) pour collecter régulièrement les données. Le fichier CSV retourne le même contenu qu'avant (au dates manquantes près), mais le fichier JSON quant à lui retourne l'ensemble du tableau calculé (meta et data donc).
pull/4/head
Matthieu Marcillaud 2 years ago
parent
9eeb500914
commit
0dab56becb
5 changed files with 145 additions and 95 deletions
Whitespace
Show all changes Ignore whitespace when comparing lines Ignore changes in amount of whitespace Ignore changes in whitespace at EOL
Split View
Diff Options
Show Stats Download Patch File Download Diff File
  1. 182
      inc/stats_visites_to_array.php
  2. 10
      prive/transmettre/statistiques.html
  3. 22
      statistiques.csv.html
  4. 19
      statistiques.json.html
  5. 7
      statistiques.json_fonctions.php

182
inc/stats_visites_to_array.php
Unescape View File

@ -16,105 +16,117 @@ if (!defined('_ECRIRE_INC_VERSION')) {
}
include_spip('inc/statistiques');
// moyenne glissante sur 30 jours
define('MOYENNE_GLISSANTE_JOUR', 30);
// moyenne glissante sur 12 mois
define('MOYENNE_GLISSANTE_MOIS', 12);
function inc_stats_visites_to_array_dist($unite, $duree, $id_article, $options = array()) {
/**
* Retourne les statistiques globales ou d'un objet pour une durée donnée
*
* @param string $unite jour | mois | annee
* @param ?int $duree Combien de jours | mois | annee on prend…
* @param string $objet
* @param string $id_objet
* @return array [date => nb visites]
*/
function inc_stats_visites_to_array_dist($unite, ?int $duree = null, ?string $objet = null, ?int $id_objet = null) {
$now = time();
if (!in_array($unite, array('jour', 'mois'))) {
$unite = 'jour';
if (!in_array($unite, array('jour', 'mois', 'annee', 'day', 'month', 'year'))) {
$unite = 'day';
}
if (in_array($unite, ['jour', 'day'])) {
$format_sql = '%Y-%m-%d';
$format = 'Y-m-d';
$unite = 'day';
$duration = 'D';
} elseif (in_array($unite, ['mois', 'month'])) {
$format_sql = '%Y-%m';
$format = 'Y-m';
$unite = 'month';
$duration = 'M';
} else {
$format_sql = '%Y';
$format = 'Y';
$unite = 'year';
$duration = 'Y';
}
if ($duree and $duree < 0) {
$duree = null;
}
$serveur = '';
$serveur = '';
$table = "spip_visites";
$where = [];
$order = "date";
$where = array();
$currentDate = (new \DateTime())->format($format);
$startDate = null;
$endDate = $currentDate;
if ($duree) {
$where[] = sql_date_proche($order, -$duree, 'day', $serveur);
$where[] = sql_date_proche($order, -$duree, $unite, $serveur);
// sql_date_proche utilise une comparaison stricte. On soustrait 1 jour...
$startDate = (new \DateTime())->sub(new \DateInterval('P' . ($duree - 1) . $duration))->format($format);
}
if ($id_article) {
$table = "spip_visites_articles";
$where[] = "id_article=" . intval($id_article);
if ($objet and $id_objet) {
if ($objet === 'article') {
$table = "spip_visites_articles";
$where[] = "id_article=" . intval($id_objet);
} else {
// plugin stats objets ?
$trouver_table = charger_fonction('trouver_table', 'base');
if ($trouver_table('spip_visites_objets')) {
$table = "spip_visites_objets";
$where[] = "objet=" . table_objet($objet);
$where[] = "id_objet=" . intval($id_objet);
} else {
throw new \Exception('Table spip_visisites_objets not found. You need a plugin for stats outside articles.');
}
}
}
$where = implode(" AND ", $where);
$format = ($unite == 'jour' ? '%Y-%m-%d' : '%Y-%m-01');
$res = sql_select("SUM(visites) AS v, DATE_FORMAT($order,'$format') AS d", $table, $where, "d", "d", "", '',
$serveur);
$format = str_replace('%', '', $format);
$periode = ($unite == 'jour' ? 24 * 3600 : 365 * 24 * 3600 / 12);
$step = intval(round($periode * 1.1, 0));
$glisse = constant('MOYENNE_GLISSANTE_' . strtoupper($unite));
moyenne_glissante();
$data = array();
$r = sql_fetch($res, $serveur);
if (!$r) {
$r = array('d' => date($format, $now), 'v' => 0);
}
do {
$data[$r['d']] = array('visites' => $r['v'], 'moyenne' => moyenne_glissante($r['v'], $glisse));
$last = $r['d'];
// donnee suivante
$r = sql_fetch($res, $serveur);
// si la derniere n'est pas la date courante, l'ajouter
if (!$r and $last != date($format, $now)) {
$r = array('d' => date($format, $now), 'v' => 0);
}
// completer les trous manquants si besoin
if ($r) {
$next = strtotime($last);
$current = strtotime($r['d']);
while (($next += $step) < $current and $d = date($format, $next)) {
if (!isset($data[$d])) {
$data[$d] = array('visites' => 0, 'moyenne' => moyenne_glissante(0, $glisse));
}
$last = $d;
$next = strtotime($last);
}
}
} while ($r);
// projection pour la derniere barre :
// mesure courante
// + moyenne au pro rata du temps qui reste
$moyenne = end($data);
$moyenne = prev($data);
$moyenne = ($moyenne and isset($moyenne['moyenne'])) ? $moyenne['moyenne'] : 0;
$data[$last]['moyenne'] = $moyenne;
// temps restant
$remaining = strtotime(date($format, strtotime(date($format, $now)) + $step)) - $now;
$prorata = $remaining / $periode;
// projection
$data[$last]['prevision'] = $data[$last]['visites'] + intval(round($moyenne * $prorata));
/*
* Compter les fichiers en attente de depouillement dans tmp/visites/
* pour affiner la prediction.
* A activer dans le mes_options si l'hebergement tient le coup en cas de gros pics de traffic
*/
if (!$id_article and defined('_STATS_COMPTE_EN_ATTENTE') AND _STATS_COMPTE_EN_ATTENTE){
// eviter un depassement memoire en mesurant un echantillon pour commencer
$n = count(glob(_DIR_RACINE . "tmp/visites/0*"));
if ($n < 10000) {
$n = count(glob(_DIR_RACINE . "tmp/visites/*"));
} else {
$n += count(glob(_DIR_RACINE . "tmp/visites/4*"));
$n += count(glob(_DIR_RACINE . "tmp/visites/8*"));
$n += count(glob(_DIR_RACINE . "tmp/visites/c*"));
$n = 4 * $n;
}
$data[$last]['prevision'] += $n;
$firstDateStat = sql_getfetsel("date", $table, $where, "", "date", "0,1");
if ($firstDateStat) {
$firstDate = (new \DateTime($firstDateStat))->format($format);
} else {
$firstDate = null;
}
return $data;
$data = sql_allfetsel(
"DATE_FORMAT($order,'$format_sql') AS formatted_date, SUM(visites) AS visites",
$table, $where,
"formatted_date",
"formatted_date",
"",
'',
$serveur
);
$data = array_map(function($d) {
$d['date'] = $d['formatted_date'];
unset($d['formatted_date']);
return $d;
}, $data);
return [
'meta' => [
'unite' => $unite,
'duree' => $duree,
'objet' => $objet,
'id_objet' => $id_objet,
'format_date' => $format,
'start_date' => $startDate ?? $firstDate,
'end_date' => $endDate,
'first_date' => $firstDate,
'columns' => [
'date' => _T('public:date'),
'visites' => _L('Visites'),
],
],
'data' => array_values($data),
];
return array_values($data);
}

10
prive/transmettre/statistiques.html
Unescape View File

@ -1,10 +0,0 @@
<BOUCLE0(AUTEURS){tout}{id_auteur=#ENV{id}}{lang_select}><?php
if ([(#ID_AUTEUR|securiser_acces{#ENV{cle},transmettre,#ENV{op}, #ENV{args}}|?{1,0})]) {
?><B_statsj><:date|trim{':'}|trim:>,<:statistiques:info_visites|trim{':'}|trim:>
<BOUCLE_statsj(DATA){source stats_visites,jour,#ENV{duree,90},#ENV{id_article}}>[(#CLE|affdate{'Y-m-d'})],[(#VALEUR{visites})]
</BOUCLE_statsj>
<?php
} else {
include_spip('inc/minipres');
echo minipres();
}?></BOUCLE0>

22
statistiques.csv.html
Unescape View File

@ -0,0 +1,22 @@
<?php
include_spip('inc/autoriser');
if (
autoriser('voirstats')
or (
$id_auteur = intval(#ENV{id,0})
and autoriser('ecrire', '', '', $id_auteur)
and [(#ENV{id,0}|securiser_acces{#ENV{cle}, voirstats, #ENV{op}, #ENV{args}}|?{1,0})]
)
) {
?>
#CACHE{0}
#HTTP_HEADER{Content-Type: text/csv; charset=#CHARSET}
#HTTP_HEADER{Content-Disposition: attachment; filename=statistiques_#ENV{objet}_#ENV{id_objet}_#ENV{duree,90}.csv}
<B_statsj><:date|trim{':'}|trim:>,<:statistiques:info_visites|trim{':'}|trim:>
<BOUCLE_statsj(DATA){source stats_visites,jour,#ENV{duree},#ENV{objet},#ENV{id_objet}}{datapath data}>[(#VALEUR{date}|affdate{'Y-m-d'})],[(#VALEUR{visites})]
</BOUCLE_statsj>
<?php
} else {
include_spip('inc/minipres');
echo minipres();
}?>

19
statistiques.json.html
Unescape View File

@ -0,0 +1,19 @@
<?php
include_spip('inc/autoriser');
if (
autoriser('voirstats')
or (
$id_auteur = intval(#ENV{id,0})
and autoriser('ecrire', '', '', $id_auteur)
and [(#ENV{id,0}|securiser_acces{#ENV{cle}, voirstats, #ENV{op}, #ENV{args}}|?{1,0})]
)
) {
?>
#CACHE{0}
#HTTP_HEADER{Content-Type: text/javascript; charset=#CHARSET}
[(#ENV{unite,jour}|transmettre_statistiques_json{#ENV{duree},#ENV{objet},#ENV{id_objet}})]
<?php
} else {
include_spip('inc/minipres');
echo minipres();
}?>

7
statistiques.json_fonctions.php
Unescape View File

@ -0,0 +1,7 @@
<?php
function transmettre_statistiques_json(string $unite, ?int $duree = null, ?string $objet = null, ?int $id_objet = null) {
$visites = charger_fonction('stats_visites_to_array', 'inc');
$stats = $visites($unite, $duree, $objet, $id_objet);
return json_encode($stats, JSON_PRETTY_PRINT);
}
Write Preview
Loading…
Cancel
Save