ADC

Verbesserung der Clickstream-Analyse in AWS mit NetScaler

Kunden greifen zunehmend über verschiedene Anwendungen wie mobile Apps, SaaS-Apps usw. auf die Unternehmensprodukte zu. Daher können Anwendungen zu einer Landmine von Kundenerlebnisdaten werden. Um das Kundenverhalten online zu verfolgen, bilden kundenorientierte Unternehmen datengesteuerte Profile für jeden ihrer Kunden, die diese Kundenverhaltensdaten verwenden.

Ein Clickstream ist eine Sequenz oder ein Stream von Ereignissen, die Benutzeraktionen (Klicks) auf einer Website oder einer mobilen Anwendung darstellen. Der Umfang von Clickstream reicht jedoch über Klicks hinaus. Es umfasst Produktsuchen, Impressionen, Käufe und solche Ereignisse, die für das Unternehmen von Relevanz sein könnten. Das bloße Sammeln und Speichern der Kundenerlebnisdaten ist nicht von großem Wert. Es ist notwendig, die hochkomplexen Daten zur richtigen Zeit nahtlos an die richtigen Anbieter zu verteilen. Unternehmen können Wert aus den Daten ableiten und schnell bewusste Entscheidungen treffen, um ihre Strategien zu verbessern. Daher nutzen Unternehmen zunehmend Clickstream Analytics, um Einblicke in die Customer Experience Journey der Apps zu erhalten.

Dieses Dokument vermittelt Ihnen ein gutes Verständnis darüber, warum Clickstream-Daten von größter Bedeutung sind, wie sie gesammelt, gespeichert, verteilt und in aussagekräftige und umsetzbare Analysen umgewandelt werden.

NetScaler lässt sich in die NetScaler Console integrieren und bietet AWS-Services wie Amazon Kinesis Data Firehose einen Mehrwert, um Unternehmen mit der erstklassigen Analyselösung auszustatten, die sich um die Clickstreams der Benutzer dreht.

Diese NetScaler-Lösung hilft Ihnen, komplexe Geschäftsprobleme effizient und extrem einfach zu lösen. NetScaler und AWS Kinesis helfen dabei, die Probleme mit dem schlecht konzipierten Workflow zu erfassen. NetScaler Console hilft bei der Erfassung von Problemen im Zusammenhang mit der Web-App und der Netzwerkleistung, indem relevante Filter angewendet werden. Die Kombination von NetScaler mit NetScaler Console und AWS Kinesis hilft Ihnen, den enormen Zustrom von Clickstream-Daten in jeder Phase zu verwalten und zu analysieren. Diese Lösung ist hochverfügbar, skalierbar, robust und stellt sicher, dass die Lieferung kontinuierlich und sicher ist. So können Sie umsetzbare Erkenntnisse ableiten.

Warum entscheiden sich Unternehmen für Clickstream-Analytics?

Unternehmen entscheiden sich für Clickstream in erster Linie, um zu verstehen, wie Benutzer mit der Anwendung interagieren, und um Einblicke in die Verbesserung der Ziele der Anwendung zu erhalten. Clickstream Analytics ist ein Anwendungsfall zum Abrufen von Informationen, der das Verhalten, die Navigationsgewohnheiten Ihres Benutzers usw. verfolgt. Clickstream-Analytics gibt Ihnen Informationen zu:

  • Auf welchen Link klicken Ihre Kunden öfter und zu welchem Zeitpunkt.
  • Wo war der Besucher, bevor er meine Website erreichte?
  • Wie viel Zeit hat der Besucher auf jeder Seite verbracht?
  • Wann und wo hat der Besucher im Webbrowser auf die Schaltfläche “Zurück” geklickt?
  • Welche Artikel hat der Besucher zu seinem Warenkorb hinzugefügt (oder daraus entfernt)?
  • Von welcher Seite hat der Besucher meine Website verlassen?

Analysedienst zur Verwaltung von Clickstream-Daten mit Amazon Kinesis

Sie können Amazon Kinesis verwenden, um Clickstream Analytics durchzuführen. Amazon Kinesis ermöglicht Clickstream-Analysen mit den folgenden Services:

Mit Amazon Kinesis können Sie Ihre riesigen Datensätze in jedem Maßstab sammeln und analysieren. AWS Kinesis kann Daten aus verschiedenen Quellen verarbeiten, wie zum Beispiel:

  • Mobile und Webanwendungen (z. B. Gaming, E-Commerce)
  • IoT-Geräte
  • Anwendungen für soziale Netzwerke
  • Dienstleistungen des Finanzhandels
  • Geospatiale Dienste

Wie NetScaler Clickstream-Analysen ermöglicht

Die NetScaler-Lösung sammelt und liefert Informationen über die Aktivitäten der Benutzer, wie z. B. besuchte Websites, verbrauchte Bandbreite und Navigationsfluss, auf sichere Weise. Unternehmen analysieren diesen hohen Durchsatz und die kontinuierlichen Clickstream-Daten, um die Wirksamkeit der folgenden Punkte zu bestätigen:

  • Site-Layout
  • Marketingkampagnen
  • Neue Anwendungsfunktionen

Clickstream-Analysen mit NetScaler Logical View

Da NetScaler in der Lage ist, einen robusten Netzwerkschutz für Unternehmensumgebungen bereitzustellen, werden die Serverkosten um ein Vielfaches reduziert, indem rechenintensive Aufgaben ausgelagert und Sitzungen mit diesen Daten ausgeführt werden. Dadurch können Unternehmen Ereignisse in Echtzeit mit hoher Verfügbarkeit, Sicherheit und geringer Latenz immer identifizieren.

Informationen zur Konfiguration finden Sie unter Konfigurieren der NetScaler-Lösung für Clickstream Analytics.

Wie NetScaler und NetScaler Console die AWS-Umgebung ergänzen

Das folgende Diagramm veranschaulicht den End-to-End-Benutzerworkflow zur Durchführung von Clickstream-Analysen in der AWS-Infrastruktur. Dieses Diagramm hilft Ihnen, die folgenden Prozesse zu verstehen:

  • Wie der Benutzer mit NetScaler interagiert
  • Wie NetScaler Benutzeraktionen erfasst und Clickstream-Daten generiert
  • Wie die Clickstream-Daten an AWS-Services geliefert werden (Amazon Kinesis)
  • Wie Amazon Kinesis die Datenprotokolle verarbeitet und speichert, um aussagekräftige Clickstream Analytics zu erstellen

Clickstream-Architektur

Der NetScaler lässt sich nahtlos in die AWS-Umgebung und die NetScaler Console integrieren, sodass Unternehmen mit variablem Volumen und unterschiedlicher Art der Clickstream-Daten kompatibel sind. Es bietet Dienste zum einfachen Laden und Analysieren von Streaming-Wissen. Sie können auch benutzerdefinierte Streaming-Wissensanwendungen für spezielle Wünsche erstellen.

Amazon Kinesis

Die AWS-Umgebung verfügt über verschiedene Services, die Analysen der von NetScaler erfassten Benutzerereignisse, Protokolle und Metriken durchführen. Die Daten können Website-Clickstreams, Finanztransaktionen, Social-Media-Feeds, IT-Protokolle und Ereignisse zur Standortverfolgung sein.

  • Amazon Kinesis Data Streams führen Analysen in Szenarien durch, die skalierbares und dauerhaftes Echtzeit-Datenstreaming beinhalten, das kontinuierlich GB an Daten pro Sekunde aus mehreren Quellen erfassen kann.
  • Amazon Kinesis Data Analytics kann für Szenarien mit geringerer Latenz zwischen der Sitzungsgenerierung verwendet werden, da das Aggregieren verschiedener Datensätze weniger Zeit benötigt.
  • Amazon Kinesis Agent für Microsoft Windows sammelt, analysiert, filtert und streamt Eingabedaten in Kinesis-Datenströme.
  • Sobald die Daten in der Cloud verfügbar sind, können Sie die genaue Datenpipeline implementieren, um die gewünschten Ergebnisse zu erhalten. Sie können diese Informationen beispielsweise in Amazon Quick Sight verwenden, einem Visualisierungstool, das zum Erstellen von Dashboards verwendet wird.

Das AWS Kinesis-Dashboard bietet folgende Angebote:

  • Zeigt Probleme mit der Benutzeroberfläche von Web-Apps
  • Visualisierungen von Metriken zur Webnutzung, wie Ereignisse pro Stunde, Besucherzahl und Referenzen in nahezu Echtzeit.
  • Sitzungsweise Analyse

AWS Kinesis-Dashboard

NetScaler Console-Analysen

Durch die Verwendung von NetScaler Console mit NetScaler erhalten Sie eine zentrale Ansicht aller Geschäftsumgebungen. Die von NetScaler erfassten Protokolle werden in die NetScaler Console eingespeist, die Ihre einzelnen Anwendungen als eine Einheit behandelt. Sie können wertvolle Erkenntnisse gewinnen und Probleme mit den folgenden ADM-Funktionen effektiv beheben:

  • Intelligente Analytik
  • Web-Transaktionsanalyse
  • Erkennung von Anomalien
  • Leistungs- und Netzwerkprobleme

Das folgende ADM-Service-Dashboard hilft Ihnen dabei, wertvolle Erkenntnisse zu gewinnen, um die Probleme effektiv zu beheben.

NetScaler Console-App-Aktivitätsanalyse

Wie NetScaler Console mit Clickstream-Analysen korreliert

Clickstream-Analysedaten können mit ADM-Analysen korreliert werden, um die Anwendungsleistung zu beschreiben, vorherzusagen und zu verbessern.

Weitere Informationen zur NetScaler Console finden Sie unter NetScaler Console %20is%20a%20centralized%20management%20solution. &text=Sie%20können%20ADM%20verwenden%20aus%20eine%20Single%2C%20Unified%20Console.)

Zum Beispiel bemerkt eine Organisation, die ihre Protokolle analysiert, dass die meisten Benutzer ihre Websites verlassen. Um jedoch die Ursache für dieses Benutzerverhalten zu finden, müssen sie herausfinden, welcher Teil ihrer Anwendung schlecht funktioniert. Mit Clickstream-Analysedaten und ADM-Analysen können Sie die folgenden Erkenntnisse ableiten, um den Grund für das Verlassen einer Website durch Benutzer zu analysieren:

  • Wird der Benutzer aufgrund von Latenzzeiten, 5xx-Fehlern abgebrochen?
  • Gibt es SSL-Handshake-Fehler?
  • Gibt es einen Teil der Anwendung, der Leistungs- oder Netzwerkprobleme aufweist?
  • Gibt es einen 404-Fehler oder die Ladezeit der Seite dauert ewig, um zu antworten, und so weiter.
  • Stehen Kunden vor Anomalien der Serverantwort?

Der NetScaler Console Service bietet Web Insights, mit denen IT-Administratoren Probleme mithilfe der folgenden Funktionen schneller lösen können:

  • Bietet eine integrierte Überwachung aller Webanwendungen in Echtzeit, die vom NetScaler bereitgestellt werden.
  • Verschaffen Sie sich einen ganzheitlichen Überblick über die Anwendungsleistung zu Zeit, Latenz und das Verhalten des üblichen Benutzers durch Observability-Tools (z. B. globales Service-Graph).
  • Führen Sie intelligente Analysen durch, um Anomalien der Serverantwort zu verstehen.
  • SSL-Erkenntnisse tragen zur Behebung von 5xx- und 4xx-Fehlern bei.
  • So führen Sie Aufzeichnungen aller Websitzungen, die Folgendes beinhalten:
    • Detaillierte Protokolle jeder Web-Transaktion
    • Suchfunktion, um relevante Logs zu finden
    • Möglichkeit, einen ADC-zu-Endbenutzer im Vergleich zu isolieren ADC-zu-Server-Problem

Arten von Daten, die von ADC für Clickstream-Analytics exportiert werden

NetScaler erfasst die verschiedenen Quellen, aus denen verschiedene Datenformen generiert werden. Diese lauten wie folgt:

  • Webserver-Protokolle

    Die Webserver-Protokollierungsfunktion sendet Protokolle von HTTP- und HTTPS-Anfragen zum Speichern und Abrufen an ein Clientsystem. Diese Protokolle enthalten eine große Menge an Daten, die schwer zu verstehen und daraus sinnvoll sind. Analytische Tools helfen dabei, sie zu verstehen und daraus einen Mehrwert zu schaffen. Weitere Informationen zur Konfiguration finden Sie im Abschnitt Konfiguration der Webprotokollierung in diesem Dokument.

  • Syslogs

    Die primäre Verwendung von Syslogs ist für das Systemmanagement. Die proaktive Syslog-Überwachung zahlt sich aus, da die Ausfallzeiten von Servern und anderen Geräten in Ihrer Infrastruktur erheblich reduziert werden. Syslog identifiziert kritische Netzwerkprobleme und meldet sie proaktiv.

  • Zugriff auf Protokolle

    Die Zugriffsprotokolle speichern Informationen über Ereignisse, die auf Ihrem Webserver aufgetreten sind. Wenn beispielsweise jemand Ihre Website besucht, wird ein Protokoll aufgezeichnet und gespeichert, um dem Webserver-Administrator Informationen wie die IP-Adresse des Besuchers, welche Seiten er angeschaut hat, Statuscodes und verwendeten Browser zur Verfügung zu stellen. Der Zugriff auf Protokolle kann überwältigend sein, wenn es an angemessenen Kenntnissen mangelt, um sie zu verstehen. Sie können Ihr System so programmieren, dass es integriert ist mit:

    • NetScaler für eine nahtlose Bereitstellung
    • Kinesis für umsetzbare Erkenntnisse, die für Unternehmen nützlich sind
  • Auditprotokolle

    Mit der Audit-Logging-Funktion können Sie die NetScaler-Status und Statusinformationen protokollieren, die von verschiedenen Modulen im Kernel und in den Daemons auf Benutzerebene gesammelt wurden.

  • Fehler-Logs

    Die Fehlerprotokolldatei ist eine Hilfe für Administratoren, um weitere Informationen zu einem bestimmten Fehler bereitzustellen, der auf dem Webserver aufgetreten ist.

Konfigurieren Sie die NetScaler-Lösung für Clickstream Analytics

Die Webserver-Protokollierungsfunktion ermöglicht es Ihnen, Protokolle von HTTP- und HTTPS-Anfragen zur Speicherung und Abruf an ein Clientsystem zu senden.

Um den NetScaler für die Webserver-Protokollierung zu konfigurieren, müssen Sie:

  • Web-Logging-Funktion aktivieren
  • Konfigurieren Sie die Größe des Puffers, um die Protokolleinträge vorübergehend zu speichern, da der Web-Log-Server auf dem NetScaler läuft.

So konfigurieren Sie die Webserver-Protokollierung mit der CLI:

  1. Aktivieren Sie die Webserver-Protokollierungsfunktion.

    enable ns feature WL
    <!--NeedCopy-->
    
  2. [Optional] Ändern/konfigurieren Sie die Puffergröße zum Speichern der protokollierten Informationen.

    set ns weblogparam -bufferSizeMB 60
    <!--NeedCopy-->
    
  3. Installieren Sie den NetScaler Web Logging (NSWL) Client. Weitere Informationen finden Sie unter Installieren des NetScaler Web Logging (NSWL) -Clients

  4. Installieren Sie den NSWL-Client unter Windows, indem Sie die folgenden Vorgänge auf dem System ausführen, auf das Sie das Paket heruntergeladen haben.

    1. Extrahieren und kopieren Sie die< release number > Datei nswl_win–.zip< build number > aus dem Paket auf ein Windows-System, auf dem Sie den NSWL-Client installieren möchten.

    2. Entpacken Sie die Datei auf dem Windows-System in einem Verzeichnis (genannt < NSWL-HOME>). Bin, Samples und andere Verzeichnisse werden extrahiert.

    3. Führen Sie an der Eingabeaufforderung den folgenden Befehl aus dem < NSWL-HOME > Verzeichnis\ bin aus:

    nswl -install -f < path of the log.conf file >\log.conf
    <!--NeedCopy-->
    

    Hinweis:

    Um den NSWL-Client zu deinstallieren, führen Sie an der Eingabeaufforderung den folgenden Befehl aus dem < NSWL-HOME > Verzeichnis\ bin aus:

    nswl -remove
    <!--NeedCopy-->
    
  5. Konfigurieren Sie nach der Installation des NSWL-Clients den NSWL-Client mit der ausführbaren NSWL-Datei. Diese Konfigurationen werden in der NSWL-Client-Konfigurationsdatei (log.conf) gespeichert.

    Führen Sie die folgenden Befehle aus dem Verzeichnis aus, in dem sich die ausführbare NSWL-Datei befindet:

    \ns\bin
    <!--NeedCopy-->
    
  6. Fügen Sie in der NSWL-Client-Konfigurationsdatei (log.conf) die NetScaler-IP-Adresse (NSIP) hinzu, von der der NSWL-Client Protokolle sammelt, indem Sie in der Befehlszeile des Clientsystems Folgendes ausführen:

    nswl -addns -f < Path to the configuration(log.conf) file >\log.conf
    <!--NeedCopy-->
    
  7. Geben Sie den NSIP (IP-Adresse), den Benutzernamen als nsroot und das Kennwort der NetScaler-Appliance als “Instanz-ID/Ihr eingestelltes Kennwort” ein, damit:

    • NSWL-Client stellt eine Verbindung zum ADC her, nachdem Sie die NetScaler-IP-Adresse (NSIP) zur NSWL-Konfigurationsdatei hinzugefügt haben
    • ADC puffert die HTTP- und HTTPS-Anforderungsprotokolleinträge, bevor er sie an den Client sendet.
    • Der Client kann die Einträge filtern (indem er die log.conf-Datei ändert), bevor er sie speichert.

Hinweis

Ändern Sie das Standardkennwort für NetScaler und fahren Sie dann mit der Konfiguration fort. Geben Sie den folgenden Befehl ein, um das Kennwort zu ändern:

set system user nsroot -password <your password>
<!--NeedCopy-->

Konfigurieren des Amazon Kinesis-Agenten

Führen Sie die folgenden Schritte in der AWS-Webkonsole aus, um den Amazon Kinesis-Agent zu konfigurieren:

  1. Erstellen Sie eine Konfigurationsdatei (appsettings.json) und stellen Sie sie bereit. Konfigurationsdateien definieren Gruppen von Quellen, Senken und Pipes, die Quellen mit Senken verbinden, zusammen mit optionalen Transformationen.

    Das folgende Beispiel ist eine vollständige appsettings.json Konfigurationsdatei, die den Kinesis Agent so konfiguriert, dass Windows-Anwendungsprotokollereignisse an Kinesis Data Firehose streamen.

    {
    "Sources": [
        {
            "Id": "NSWLog",
            "SourceType": "DirectorySource",
            "Directory": "C:\Users\Administrator\Downloads\nswl_win-13.0-52.24\bin",
            "FileNameFilter": "*.log"
            "RecordParser": "TimeStamp",
            "TimestampFormat": "yyyy-MM-dddd HH:mm:ss.ffff", //Optional parameter required only by the timestamp record parser
            "TimeZoneKind": "UTC", //Local or UTC
            "SkipLines": 0 //Skip a number of lines at the beginning of each file
        }
        ],
    "Sinks": [
        {
            "Id": "ApplicationLogKinesisFirehoseSink",
            "SinkType": "KinesisFirehose",
            "StreamName": "Delivery-ik-logs",
            "AccessKey": "Your Access Key",
            "SecretKey": "YourSecretKey",
            "Region": "ap-south-1"
        }  
        ],
    "Pipes": [
        {
        "Id": "ApplicationLogSourceToApplicationLogKinesisFirehoseSink",
        "SourceRef": "ApplicationLogSource",
        "SinkRef": "ApplicationLogKinesisFirehoseSink"
        }
        ],
    "Telemetrics":
        {
        "off": "true"
        }
    }
    <!--NeedCopy-->
    
  2. Richten Sie einen Kinesis Agent für Datenquellen ein, um Daten zu sammeln und diese kontinuierlich an Amazon Kinesis Firehose/Kinesis Data Analytics zu senden. Weitere Informationen finden Sie unter Erste Schritte mit Amazon Kinesis Agent für Microsoft Windows.
  3. Erstellen Sie mit Amazon Kinesis Firehoseeinen End-to-End-Daten-Delivery-Stream. Der Lieferdatenstrom überträgt Ihre Daten vom Agenten an das Ziel. Das Ziel umfasst Amazon Kinesis Analytics, Amazon Redshift, Amazon Elasticsearch-Service und Amazon S3. Wählen Sie für die Quelle Direct PUT oder andere Quellen aus, um einen Kinesis Data Firehose-Bereitstellungsstream zu erstellen.
  4. Verarbeiten Sie die eingehenden Protokolldaten mithilfe von SQL-Abfragen in Amazon Kinesis Analytics.
  5. Laden Sie verarbeitete Daten von Kinesis Analytics in Amazon Elasticsearch Service, um die Daten zu indizieren.
  6. Analysieren und visualisieren Sie die verarbeiteten Daten mit Visualisierungstools wie Kibana und AWS QuickInsight Services.

Referenzen