This function returns an unsigned integer from a 64-bit Linux platform. It does return the signed integer from other 32-bit platforms even a 64-bit Windows one.

The reason is because the two constants PHP_INT_SIZE and PHP_INT_MAX have different values on the 64-bit Linux platform.

Letztendlich kann man also von keinem echten Problem mit Mint selber sprechen. Da Shaun Inman offensichtlich recht viele Leute um Hilfe gefragt haben hat er ein kleines Script geschrieben, dass die Prüfsummen korrigiert. Danach arbeitet Mint wieder wie gewohnt

Verwandte Artikel:

1. Eagle: Probleme mit Lib beheben
2. Arduino + EthernetShield + Shaun Inman’s Mint + LCD-Display = ZipfelMint
3. Zahlendreher und ihre Folgen und andere Probleme

While you are watching this you have already increased the Number of Today’s unique visitors on my little device. Thanks!

The ingedirents

• Aduino
• Arduino ethernet shield
• Some wires
• A little breadboard
• A LiquidCristal Display for 2,95€
• Shaun Inman’s Mint
• A little pepper for Mint

Putting everything together

First i attached the EthernetShield. Then I hooked up the LCD-Display, which was quite a challenge for me! I found it a little confusing. Luckily there’s a great LCD-Tutorial at Arduino.cc which was a great help for me.

It tourned out, that my LCD was slightly different and that I had to use differnet ports then the ports in the Tutorial, because some of theme were already taken by the Ethernet Shield.

The Code

First I wrote a little Pepper (thats an Addon) for Mint that returns Visitors/Page Impression for Today/Week/Month and packs that into a very simple format. An example response of the Pepper looks like that:

<71|168|694|1549|2317|5201>

Its just a string limited by < and > which contains a few numbers delimited by |

Last week then i managed to fix my initial problems with the example code for the Ethernet Library. So I was pretty sure, that the part of getting data from Mint would be the easy part of this project. After pointing my modified version of the example code to the URL with the stats on my blog nothing happened.

So – what to do? Google it! I found a post at the official Arduino Forum, that the Arduino Library is not able to connect to Lighttpd. That was like a slap in my face. I do not want to modify the Ethernet library. I’m just a poor Webdeveloper without any expertise in C++. So I decided to take the pragmatic way and used a proxy instead.

If you’re own website uses Apache you may find this unnecessary and point your Arduino directly to you’re Server.

Notice, that you would have to slightly modify the Code in the line with the Get-Request.

The rest of the Sourcecode was pretty straightforward. I used the serial console to debug and finally I ended up with a big mess of code that worked well. After some minutes of refactoring I even understood, what the code was doing exactly.

The result

Whats next

Currently I am waiting for a little real time clock, which I will attach to this device. Then I will box it into a nice case and consider the hardware part as finished..

Luckily the device is quite generic and I plan to implement a little clock – that fetches its time over NTP and a display for the current load of our Servers at YiGG.

I might also decide to add a little nice WebInterface for the device.

Source-Code

Like always I put the source code at the end. I hope that it explains itself. If not – please don’t hesitate to ask! You are free to use it and modify it under the terms and conditions of the Creative Commons License. And last but not least – please tell me if you have build something similar or derive something from my work!

/*
  ZipfelMint - A little device that shows Vistor Statistics for the website

 @author Robert Curth <http://www.zipfelmaus.com/
 @see http://www.arduino.cc/en/Tutorial/LiquidCrystal
 */

#include <Ethernet.h>
#include <LiquidCrystal.h>

int RS = 9;
int E = 3;
int D4 = 2;
int D5 = 8;
int D6 = 4;
int D7 = 5;
LiquidCrystal lcd(RS, E, D4, D5, D6, D7 ); // Initializing Liquid Cristal display

byte mac[] = { 0xDE, 0xAD, 0xBE, 0xEF, 0xFE, 0xED };
byte ip[] = { 192, 168, 178, 25 };
byte gateway[] = { 192, 168, 178, 1 };
byte server[] = { 217,237,151,51 }; // Change that to a http-proxy of your choice

// Variables for the Visitors.
char dayUnique[7];
char dayTotal[7];
char weekUnique[7];
char weekTotal[7];
char monthUnique[7];
char monthTotal[7];

boolean hasStats = false; // Until this is true default text will be displayed

void setup()
{
  Serial.begin(9600);
  lcd.begin(16, 2);
  Ethernet.begin(mac, ip, gateway);
  delay(1000);
}

void loop()
{
  updateVisitStats();
  if(hasStats)
  {
    printStats();
  }
  else
  {
    printDefaultText();
  }
}

/**
 * Update the stats from mint
 */
void updateVisitStats()
{
  Client client(server, 80);
  if (client.connect())
  {
    sendRequest(client);
    Serial.println("Connected");
  }
  else
  {
    Serial.println("connection failed");
    return;
  }

  extractMintData(client);
  client.stop();
}

/**
 * Send the request to the Server
 */
void sendRequest(Client client)
{
  client.println("GET http://www.zipfelmaus.com/mint/pepper/garrettmurray/ego_helper/stats.php HTTP/1.0");
  client.println("host: www.zipfelmaus.com");
  client.println("user-agent: Arduino-ZipfelMint");
  client.println();
}

/**
 * Extract the data and set the variables
 */
void extractMintData(Client client)
{
  char currentValue[7];
  boolean dataFlag = false; // True if data has started
  boolean endFlag = false; // True if end is reached
  int j = 0; //Number of dataset
  int i=0;

  while(client.connected() && false == endFlag)
  {
    char c = client.read();
    if(c == '<') // Start of data
    {
      dataFlag = true;
      hasStats=true;
    }
    else if(dataFlag && c == '>') // End of data
    {
      setStatValue(j, currentValue);
      endFlag = true;
    }
    else if(dataFlag && c == '|') // Next dataset
    {
      setStatValue(j++, currentValue);
      char currentValue[7];
      i=0;
    }
    else if(dataFlag) // Data
    {
      currentValue[i++] = c;
    }
  }
}

/**
 * Set a single stat value depending on the position in the string returned by mint
 * @param integer position
 * @param string value
 */
void setStatValue(int position, char value[])
{
  switch(position){
  case 0:
    for(int i=0; i<7; i++)
    {
      dayUnique[i] = value[i];
    }
    return;
  case 1:
    for(int i=0; i<7; i++)
    {
      dayTotal[i] = value[i];
    }
    return;
  case 2:
    for(int i=0; i<7; i++)
    {
      weekUnique[i] = value[i];
    }
    return;
  case 3:
    for(int i=0; i<7; i++)
    {
      weekTotal[i] = value[i];
    }
    return;
  case 4:
    for(int i=0; i<7; i++)
    {
      monthUnique[i] = value[i];
    }
    return;
  case 5:
    for(int i=0; i<7; i++)
    {
      monthTotal[i] = value[i];
    }
    return;
  }
}

/**
 * Print the different statistical values in a predefined sequence
 */
void printStats()
{
    printStat("Day (unique)", dayUnique);
    printStat("Day (hits)", dayTotal);
    printStat("Week (unique)", weekUnique);
    printStat("Week (hits)", weekTotal);
    printStat("Month (unique)", monthUnique);
    printStat("Month (hits)", monthTotal);
}

/**
 * Print a single statistical value
 * @param string Label of the stat eg Today(Unique)
 * @param strin Visits (only numbers will be printed)
 */
void printStat(char label[], char visits[])
{
  lcd.begin(16, 2);
  lcd.print(label);
  lcd.setCursor(0,1);

  for(int i = 0; i < 7; i++)
  {
    if(47 < visits[i] && 58 > visits[i]) // If char is a number ..
    {
      lcd.print(visits[i]);
    }
  }
  delay(1000);
}

/**
 * Print a default text
 */
void printDefaultText()
{
    lcd.setCursor(0,0);
    lcd.print("Mint-Stats for");
    lcd.setCursor(0,1);
    lcd.print("zipfelmaus.com");
    delay(2000);
}

Verwandte Artikel:

1. Arduino Ethernet Shield. Issues with Lighttpd and/or router. How to get the example code running.
2. I proudly present: Die Arduino Lichtorgel
3. Notiz: Probleme nach Wechsel des Providers mit Mint beheben

Woopra – Java und Eyecandy

Mein Favorit zur Zeit ist Woopra. Woopra ist seit einigen Monaten in der Beta-Phase und hat inzwischen 50.000 Benutzer freigeschaltet. Zu diesem glücklichen Kreis gehöre auch ich. Der Tracking-Service unterscheidet sich in erster Linie dadurch von der Konkurrenz, dass die Ergebnisse mithilfe einer JAVA-Desktop-Applikation visualisiert werden.

Anfänglich hat Woopra ein bisschen gekränkelt und hatte einige Beta-typische Bugs. Während meiner ersten persönlichen Testrunde vor wenigen Monaten musste man z.B. einige kleiner Modifikationen vornehmen, damit das gute Stück überhaupt unter Mac OS X zum laufen zu bewegen war.

Inzwischen hat sich Woopra aber gemausert. Neben neuen Ansichten der Statistik haben die Macher auch ein sehr gutes WordPress-Plugin veröffentlicht. Positiv fällt  die Darstellung der Statistiken direkt aus WordPress heraus auf und dass ich als Schreiberling vom Tracking ausgeschlossen bin.

Sympatisch darüber hinaus ist die von Hubert Streitenberger erstellte Iphone-Woopra-Webapp auf Basis des WordPress-Plugins. Ich kann hierfür nur tausend Dank sagen, ich weiß das es garantiert einige Stunden gedauert hat und man ihn nicht genug für seinen Einsatz loben kann.

Kurrios finde ich den Ansatz von Woopra das Trackingpixel auszuliefern. Hierfür kriegt jeder Client einen eigen virtuellen Domainname, der vom Javascript transparent aufgerufen wird. Eine Konfiguration des Tracking-Codes entfällt dadurch völlig. (Bei mir hat das Zählpixel zum Beispiel die Url http://web2.0du.de.woopra-ns.com/visit/…)

Mint – Selbstgehostet, flexibel und teuer

Meine zweite Alternative ist Mint, das nette Trackingskript von Shaun Inman. Mint installert man einfach selber auf seinem PHP fähigen Webspace, trägt die Zugangsdaten für seine MySQL-Datenbank in einer Konfigurationsdatei ein und schon beginnt das gute Programm zu tracken.

Mint ist out of the box sehr schlank gehalten und bietet nur die allerwichtigsten Informationen. Dafür lässt sich Mint allerdings mit Plugins (die lustigerweiser Pepper genannt werden) erweitern, wobei es dann aber trotzdem alles auf einer Seite darstellt.

Auch für Mint gibt es ein Iphone-Plugin, äh Pepper.

Für den Informationsfluss auf dem heimischen Desktop sorgt Mint, mit seperat erhältlichen Widgets.

Nachteil an Mint ist allerdings, dass Shaun einem 30 US-Dollar pro Lizenz abzwackt, die das Skript aber auch unfraglich wert ist.

Positiv sind auch Plugins, die Feedburner-frei die Zugriffe auf den eigenen RSS-Feed tarcken und auch die Zugriffe von Crawlern kann man ohne direkten Zugriff auf die Webserver-Logs analysieren.

Nachreilig ist, dass bei Mint die Datenbank schnell anwächst und das Script ab 30 Megabyte beginnt aufzuräumen. Alte Informationen gehen so verloren und das Script wird ein paar Millisekunden langsamer.

Obwohl Mint zwar schnell ist, ist es trotzdem ein zweites PHP-Script, was während einem Seitenaufruf laufen muss. Für Slashdot definitiv nicht zu gebrauchen. (Ok – mein VServer auch nicht, aber das steht hier nicht zur Debatte

Etracker Web Controlling – Datenschutzkonform und performant

Der dritte Kandidat, den ich in Betracht ziehe ist Etracker. Etracker ist ein deutscher Tracking-Anbieter, der zu seinen Kunden z.B. T-Online und BMW zählt und bei Seiten bis zu 10.000 PIs im Monat seine Dienste kostenlos anbietet. Der Zählpixel von Etracker lädt sehr schnell und man findet sehr übersichtliche Statistiken in seinem Dashboard vor, auch wenn das ganze vom EyeCandy-Faktor sicher nicht mit Woopra mithält.

Wer mehr als 10.000 Pis hat kann für einen bezahlbaren Preis größere Pakete buchen (ab 1,11€ im Monat). Schade ist, dass auch bei den bezahlten Paketen viele Funktionen nicht einsehbar sind. Wenn ich für 1,11€ im Monat nicht sehen, welche Seiten von mir am häufigsten besucht wurden, schreckt das ziemlich ab, zumal andere Anbieter das kostenlos können.

Trotzdem es spricht auch vieles für die Firma. Positiv fällt mir an Etracker auf, das die Jungs kontinuirlich an ihrem Produkt arbeiten und der Service Monat für Monat besser wird. Etracker bietet eine sehr gute Dokumentation zur Integration des Zählpixels an, das man auch ohne Javascript einbinden kann.

Der Hauptgrund der für Etracker spricht ist allerdings, dass Etracker im Einklang mit dem Bundes Datenschutz Gestz trackt und man seinen Besuchern einen Opt-Out-Link anbieten kann, der sie von der Erfassung ausschließt. Da mir Datenschutz wichtig ist und ich als private Person auch keine Serverlogs haben muss und sie deaktiviert habe, möchte ich auch eine Tracking-Lösung die die Daten für mich und nicht in erster Linie für sich erfasst.

Das ist im übrigen auch der Grund warum Google, die Datenranke für mich privat No-Go ist. Ich will mich nicht in den Reigen wilder Verschwörungstheorien einreihen, allerdings halte ich eine komplette Netzabdeckung von Google-Analytics für wenig erstrebenswert.

Was meint ihr? Datenschutz, selbst gehostet oder Eye-Candy? Wie spioniert ihr eure Besucher aus?

Verwandte Artikel:

1. Woopra ist mir zu bedenklich
2. Langsam nährt sich das Eichhörnchen
3. Notiz: Probleme nach Wechsel des Providers mit Mint beheben

Nebenbei habe ich nach einer geeigneten Möglichkeit gesucht meine Besucher auszuspionieren und mich am Ende doch wieder nur für Mint entschieden. Und das aus folgenden Gründen:

• Mint ist hübsch
• Ich mag das Dashboardwidget
• Eure Daten landen nicht bei einem externen Dienstleister
• Ein DNS-Lookup weniger = mehr Geschwindigkeit für euch

Natürlich dürft ihr euch im Gegenzug auch gerne selber die Statistiken von web2.0du.de anschauen. Habe ich schon erwähnt das Mint hübsch ist?

Neben diesem Schnickschnack habe ich auch nach einem passendem CDN, für die ganzen bunten Bildchen gesucht und bin fürs erste bei CacheFly gelandet. Ich war mit der Performance beim ersten Seitenaufruf allerdings nicht besonders zufrieden: da es recht lange dauert bis Cachefly die erste Antwort zurück liefert, werde ich beim ersten Seitenaufruf das CSS direkt im Quellcode der Seite ausliefern und mit einem kleinen Javascript von Cachefly in den Browsercache befördern. Wie das geht (es ist wirklich nicht spektakulär) wird es hier demnächst zu lesen geben.

Ansonsten wünsche ich der Leserschaft noch einen schönen Donnerstag.

Verwandte Artikel:

1. Notiz: Probleme nach Wechsel des Providers mit Mint beheben
2. Der erste Schnee in diesem Jahr
3. Womit spioniert man am besten seine Besucher aus?