Blog

Blog2018-07-18T15:55:15+02:00

Blog.

QuinScape – Das Beste für „Sie“.

#girlsday im Rahmen der Berufswelterkundung. Um dem Fachkräftemangel entgegenzuwirken und das Interesse der Frauen für die unterschiedlichen Berufe in der Informatik zu gewinnen, engagierte sich QuinScape in diesem Jahr mit der Organisation eines #girlsday. Einen Tag lang wurden junge Frauen von Mitarbeitern begleitet, um in die Welt der IT eintauchen zu können und sowohl QuinScape als auch die IT-Branche näher kennenzulernen. Die Berufsfindung ist früher oder später ein wichtiges Thema für alle Schülerinnen und Schüler, die auf das Ende ihrer Schullaufbahn zusteuern. Vor allem junge Frauen sollen motiviert werden, technische und naturwissenschaftliche Berufszweige zu wählen. Gerade in der IT-Branche werden händeringend [...]

Talend? Das ist doch so ein Open-Source ETL Tool, oder?

Diese Frage wurde mir in den letzten Jahren immer wieder auf Konferenzen und Fachveranstaltungen gestellt. Gerade „alte Hasen“ im Business Intelligence Umfeld sind häufig der Meinung, Talend sei ein Open-Source ETL Tool. Insofern möchte ich diese falsche Vorstellung ausräumen und grob herausarbeiten, was Talend eigentlich ist und leistet. Im Kern ist an dem Vorurteil tatsächlich ein Funken Wahrheit dran. Zu Beginn, vor mittlerweile 14 Jahren, ist Talend tatsächlich entstanden als Open-Source ETL Werkzeug. In der Zwischenzeit hat sich hieraus aber eine gewaltige Plattform entwickelt, hinter der eine börsennotierte Firma mit einer Marktkapitalisierung von deutlich über 1 Mrd. US$ steht. Die Vorstellung [...]

Metadaten zur dynamischen Datenintegration – Salesforce Instanzen in Rekordzeit anbinden

Sie wollen Metadaten aus einer Salesforce Instanz sammeln und diese Daten für Ihre Integration nutzen? Die folgende dynamische Lösung versetzt Sie in die Lage, flexibel und effizient die Integration Ihrer Cloud durchzuführen. Neue Features können einfach und schnell in die Lösung integriert werden.   Was sind Metadaten? Was sind Metadaten überhaupt? Christian Schneider, Teamleiter für den Bereich Data & Analytics, hat einen sehr spannenden Blogbeitrag über das Thema Metadaten verfasst. Gerne können Sie diesen Artikel über den nachfolgenden Link aufrufen. https://www.quinscape.de/allgemein/blog/metadaten-warum-sie-daten-ueber-ihre-daten-benoetigen/ Für unseren konkreten Fall sammeln wir alle Informationen über  die vorhandenen Tabellen und Felder aus Salesforce und speichern diese [...]

05.06.2019|Kategorien: Blog, Data & Analytics|Schlagwörter: , , , , , , , |

Rekursive Hashmap, warum nicht?

Parent-Child-Hierarchien und deren Relationen miteinander verknüpft darzustellen und diese am besten auch noch dynamisch, nach ihrem Vorkommen zusammenzubauen, ist meist keine erfreuliche Aufgabe. Wir haben in diesem Artikel eine Lösung ausgearbeitet und beispielhaft in Talend umgesetzt. Zuerst klären wir einmal die Begrifflichkeiten: Was ist eine Hashmap? Laut Definition von Talend ist eine Hashmap eine Möglichkeit, Daten direkt in den Speicher zu schreiben und vorzuhalten, um die Daten von dort performant auszulesen, sie zu bearbeiten oder sie zu verändern. Was ist eigentlich Rekursion? Unter dem Begriff Rekursion versteht man den Aufruf einer Funktion, die einen Teil der Arbeit ermittelt und sich [...]

22.05.2019|Kategorien: Blog, Data & Analytics|Schlagwörter: , , , , , |

JasperReports IO – Unternehmensreporting auf einem neuen Level

Geht es um das unternehmensweite Reporting, so führt meist kein Weg an TIBCO Jaspersoft vorbei. Dieses auf Java basierende Open-Source-Berichtswerkzeug ist eine optimale Lösung, um Entscheidern, Mitarbeitern oder Kunden, Zahlen und Fakten in ansprechender Weise zu präsentieren. Der Fokus dieser Lösung liegt dabei auf der Integration von Berichten in die bestehende Applikationslandschaft. Durch den quelloffenen Ansatz lässt sich Jaspersoft einfach an individuelle Wünsche anpassen und erfreut sich einer großen Community. Kleiner Service – flexibel und skalierbar Nun geht TIBCO einen Schritt weiter und führt mit JasperReports IO ein Werkzeug ein, das den aktuellen Trends in der Softwareentwicklung folgt. Die früher [...]

07.05.2019|Kategorien: Blog, Data & Analytics|Schlagwörter: , , , , |

Datenvirtualisierung: Wie Sie Brücken zwischen Ihren Dateninseln bauen können

Daten verteilen sich zunehmend auf verschiedentliche Systeme, Cloud und Social Media erschaffen immer neue Dateninseln. Wo früher einzelne, ausgewählten Datenbanken und vielleicht eine Handvoll Excel-Dateien genutzt wurden, ist ein wahrer Zoo aus unterschiedlichsten Datenquellen entstanden. Zudem kommen immer wieder auch neue Formate und Technologien wie bpsw. Webservices mit JSON-Daten hinzu. Dagegen steht die Anforderung, Daten aus diesen Systemen immer schneller für Auswertungen in einem Gesamtkontext zur Verfügung zu haben. Dies bringt so manche BI-Abteilung ins Schwitzen. Eine mögliche Lösung für diesen Gegensatz ist die Datenvirtualisierung. Welche Probleme sie löst und welche Möglichkeiten sie schafft, beschreiben wir im nachfolgenden Artikel. Die [...]

20.03.2019|Kategorien: Blog|Schlagwörter: , , , |

Stitch + Talend = EL + T?

Talend wird vielfach als ETL- oder auch ELT-Werkzeug im Bereich von Business Intelligence Lösungen eingesetzt. ETL steht dabei für Extrahieren, Transformieren und Laden. Mit dem Zukauf von Stitch, einem reinen EL-Werkzeug in der Cloud, stellt sich die Frage: Ist Stitch und Talend die Kombination von EL und T? Talend und Stitch Talend ist kein reines ELT/ETL-Werkzeug sondern adressiert als Plattform viele weitergehende Themen wie z. B. die Echtzeit-Datenintegration, die Datenvorverarbeitung im Self Service (Data Preparation), Master Data Management (MDM) oder Big Data (u.a. den Umgang mit semistrukturierten und unstrukturierten Daten). Insgesamt positioniert sich Talend als vollumfängliche, moderne Datenintegrationsplattform. Dennoch bleibt [...]

04.03.2019|Kategorien: Blog|Schlagwörter: , , , |

Data Warehouse Modernisierung

Im Rahmen der Tagung der Deutschen Data Vault User Group (DDVUG e.V.) habe ich an einem Kundenbeispiel illustriert, wie und warum wir ein Data Warehouse auf Basis von Data Vault modernisiert haben. Einige übergreifende Aspekte hiervon möchte ich nachfolgend allgemeiner zusammenfassen.   Warum Data Warehouse Modernisierung? Das Data Warehouse (DWH) ist das zentrale Datenlager eines Unternehmens. Ein einer Zeit von „Daten als Öl“ oder „Daten als vierter Produktionsfaktor“ liegt auf der Hand, dass das DWH zum zentralen Organ eines Unternehmens wird und an Wichtigkeit gewinnt. Dennoch sind viele DWHs in die Jahre gekommen und werden den Anforderungen von heute nicht [...]

Automatisiertes Maschinelles Lernen – der heilige Gral?

Maschinelles Lernen ist auf dem Siegeszug. Speziell für die Erkennung von Mustern in Daten ist Maschinelles Lernen das Mittel der Wahl, konkret zum Beispiel eingesetzt bei der Betrugserkennung, der Bilderkennung, im Bereich der vorausschauenden Maschinenwartung oder der Prognose von Zugverspätungen. Hinter dem Maschinellen Lernen befindet sich ein ganzer Werkzeugkasten von Algorithmen, die jeweils mit sogenannten Hyperparametern genauer eingestellt werden können. Beim gängigen „k-Nearest Neighbours“ kann so zum Beispiel die Anzahl der in Betracht gezogenen Nachbarn „k“ eingestellt werden, bei einem Neuronalen Netzwerk u.a. die gesamte Architektur des Netzes. Eine wichtige Aufgabe eines Data Scientists besteht darin, für das jeweilige Problem [...]

19.02.2019|Kategorien: Data & Analytics|

QuinScape GmbH