Sie sind hier: Startseite » Markt » Unternehmen

Offener Standard für Data Lakes werden

Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud: Das Delta Lake Projekt wird an die Linux Foundation übergeben
Das zunehmende Engagement der Community zeigt die Begeisterung für Open Source und fördert branchenweite Innovationen für datengesteuerte Initiativen

Die Linux Foundation, die gemeinnützige Organisation, die Masseninnovationen durch Open Source ermöglicht, gab bekannt, dass sie Delta Lake hosten wird, ein Projekt, das sich auf die Verbesserung der Zuverlässigkeit, Qualität und Leistung von Data Lakes konzentriert. Delta Lake wurde von Tausenden von Organisationen übernommen und verfügt über ein florierendes Ökosystem von Unterstützern, darunter Intel, Alibaba und Booz Allen Hamilton. Um die Akzeptanz und die Beiträge zur Weiterentwicklung weiter zu steigern, wird Delta Lake zu einem Linux Foundation-Projekt und einem offenen Governance-Modell.

Jedes Unternehmen strebt danach, durch Data Science, Machine Learning und Analytics mehr Werte aus Daten zu ziehen, aber sie werden massiv durch die mangelnde Datensicherheit in den Data Lakes behindert. Delta Lake löst Herausforderungen bei der Datenzuverlässigkeit, indem es die Transaktionen ACID-konform macht und gleichzeitiges Lesen und Schreiben ermöglicht. Seine Fähigkeit zur Durchsetzung von Schemas trägt dazu bei, dass der Data Lake frei von korrupten und nicht konformen Daten ist. Seit seiner Einführung im Oktober 2017 wurde Delta Lake von über 4.000 Unternehmen angenommen und verarbeitet jeden Monat über zwei Exabyte an Daten.

"Delta Lake unter das neutrale Haus der Linux Foundation zu bringen, wird der vom Projekt abhängigen Open-Source-Community helfen, die Technologie zu entwickeln, die sich mit der Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud befasst", sagte Michael Dolan, VP of Strategic Programs bei der Linux Foundation. "Die Linux Foundation unterstützt Open-Source-Communities dabei, ein offenes Governance-Modell zu nutzen, um einen weitgefächerten Beitrag der Industrie und die Konsensbildung zu ermöglichen, was den Stand der Technik für Datenspeicherung und -zuverlässigkeit verbessern wird."

Die Mitbegründer von Databricks sind die ursprünglichen Entwickler des Open-Source-Projekts Apache Spark, der Unified Analytics-Plattform, die sich zum Standard für die groß angelegte Datenverarbeitung entwickelt hat. Der CEO und Mitbegründer von Databricks, Ali Ghodsi, zeigt sich begeistert, diese Reise mit dem Delta Lake Projekt erneut zu unternehmen. "Unser Team hat weiterhin Open-Source-Projekte entwickelt und unterstützt, weil wir wissen, dass dies der schnellste und umfassendste Weg zur Innovation ist. Um die Datenherausforderungen von Unternehmen zu bewältigen, wollen wir sicherstellen, dass dieses Projekt Open Source in der wahrsten Form ist. Durch die Stärke der Linux Foundation Community und die Beiträge sind wir zuversichtlich, dass Delta Lake schnell zum Standard für die Datenspeicherung in Data Lakes werden wird."

Delta Lake wird über ein offenes Governance-Modell verfügen, das die Beteiligung und den technischen Fortschritt fördert und einen Rahmen für eine langfristige Betreuung durch ein Ökosystem bietet, das in den Erfolg von Delta Lake investiert hat. Obwohl Delta Lake ursprünglich für die Zusammenarbeit mit Apache Spark konzipiert war, hat es eine florierende Community entwickelt, die Unterstützung für andere Open-Source-Datensysteme bietet. (Linux Foundation: ra)

eingetragen: 17.10.19
Newsletterlauf: 28.11.19

Linux Foundation: Kontakt und Steckbrief

Der Informationsanbieter hat seinen Kontakt leider noch nicht freigeschaltet.

Meldungen: Unternehmen

Zukunftsfähige digitale Lösungen
conet steigert mit einer klaren Unternehmensstruktur und einer modernen Markenidentität seine Leistungsfähigkeit, Kundenorientierung und Zukunftsfähigkeit als Full-Service-IT-Dienstleisterin. Für das Bonner IT-Unternehmen ist damit die wesentliche Phase seiner marktorientierten Transformation entlang des Strategieprogramms "HORIZON28" auch nach außen sichtbar erfolgreich abgeschlossen. Im Ergebnis richtet sich conet noch gezielter auf aktuelle Marktanforderungen und die konkreten Kundenbedürfnisse in zentralen Digitalisierungsthemen von heute und morgen im öffentlichen Sektor, in der Verteidigungsbranche und in Unternehmen aus den Bereichen Automotive, Finance & Insurance, Energy & Utilities sowie Manufacturing aus.
KI im Enterprise-Maßstab
Vast Data hat ihre Partnerschaft mit Google Cloud erweitert. In deren Rahmen können Kunden das Vast AI Operating System (AI OS) vollständig als Managed Service bereitstellen und einen einheitlichen globalen Namensraum über hybride Umgebungen hinweg implementieren. Mithilfe des Vast DataSpace können Unternehmen Cluster nahtlos miteinander verbinden, die in Google Cloud und an On-Premises-Standorten laufen. Das macht komplexe Migrationen überflüssig und die Daten sind unmittelbar verfügbar, wo auch immer Unternehmen ihre KI betreiben.
Plug-and-Play-Bereitstellung
Der neue "Pax8 Agent Store" tritt als agentenbasierte KI-Plattform für MSPs an. Er bietet Partnern, die kleine und mittelständische Unternehmen (KMU) betreuen, Orientierung und Lösungen bei der KI-Implementierung. Über branchenspezifische, schematische und skalierbare Agenten sollen sie das Wachstum beschleunigen, neue Einnahmequellen erschließen und agentenbasierte KI auf Enterprise-Niveau für KMU-Kunden praktikabel und nutzbar machen.
Wahlfreiheit für Private-Cloud-Deployments
Broadcom kündigt ein offenes, erweiterbares Ökosystem für VMware Cloud Foundation (VCF) an, das Unternehmen beim Aufbau, bei der Vernetzung, beim Schutz und bei der Erweiterung moderner Private Clouds unterstützt. Damit stellt Broadcom eine Private-Cloud-Plattform bereit, die über alle Infrastrukturschichten hinweg offen und anpassbar ist. Kunden können die Rechenzentrums- und Edge-Hardware ihrer Wahl, offene Netzwerkparadigmen sowie Open-Source-Technologien in On-Premises- und gehosteten Private-Cloud-Umgebungen einsetzen. Zudem erhalten VCF-Partner zusätzlichen Spielraum für Innovationen.
Neue Commvault-Cloud-Unity-Plattform
Commvault hat im Rahmen ihrer diesjährigen SHIFT-Veranstaltung neue Lösungen für eine Transformation der Recovery vorgestellt. Die Innovationen sind Teil der neuen Commvault-Cloud-Unity-Plattform und sollen die saubere, vollständige und automatisierte Wiederherstellung von Daten neu definieren.
Energiekrise für Rechenzentren spitzt sich zu
Die unter dem Dach von eco - Verband der Internetwirtschaft e.V. gegründete Allianz zur Stärkung digitaler Infrastrukturen kritisiert die verfehlte Standortpolitik der Bundesregierung. Insbesondere der vom Wirtschaftsausschuss abgelehnte Bundesratsvorschlag zur Vergabe von Netzanschlüssen, als auch die gestrige Vereinbarung des Koalitionsausschusses für einen Industriestrompreis, in der Rechenzentrenbetreiber explizit nicht erwähnt werden, gefährden aus Sicht des Verbands die Rechenzentrenbranche in Deutschland.
Cloud-Plattform für Kanzleimanagement
Die Legal Software-Sparte von Wolters Kluwer Legal & Regulatory wurde in der aktuellen "Vendor Selection Matrix" von Research In Action als führender Anbieter von SaaS-Lösungen für Software-Kanzleimanagement in Mitteleuropa für das Jahr 2026 ausgezeichnet. Kleos, die fortschrittliche, webbasierte -Software des Unternehmens, erhielt die höchste Gesamtbewertung. Damit wurde ihre Position als führende Cloud-basierte Software-Plattform für Kanzleimanagement in der Region bestätigt.
Meilenstein für den Rechenzentrumsbau
Delta, Anbieterin von Energie- und intelligenten, nachhaltigen Lösungen, und Siemens Smart Infrastructure haben eine globale Partnerschaft geschlossen, um vorgefertigte, modulare Energielösungen zu liefern, die die Bereitstellung von Rechenzentrumsinfrastruktur beschleunigen und gleichzeitig die CAPEX deutlich reduzieren. Die Kooperation verschafft Hyperscalern und Colocation-Anbietern einen strategischen Vorteil im wettbewerbsintensiven KI- und Cloud Computing-Markt - mit höchster Leistungsfähigkeit, Energieeffizienz und Zuverlässigkeit.
Datenresilienz und KI-Innovationen
Cohesity, Unternehmen für KI-gestützte Datensicherheit, hat ihre Partnerschaften mit Microsoft und Amazon Web Services, Inc. (AWS) erweitert. Gemeinsam mit Microsoft kann Cohesity ab sofort Unternehmen noch besser dabei unterstützen, ihre Widerstandsfähigkeit zu stärken, die Daten-Wiederherstellung zu beschleunigen und das Potenzial generativer KI in großem Maßstab zu erschließen. Ziel der Partnerschaft mit AWS ist es, mit Hilfe von KI Daten hochskaliert zu schützen, wiederherzustellen und nutzen zu können.
Souveräne Cloud-Services aus Deutschland
Die q.beyond AG hat das C5:2020-Testat des Bundesamts für Sicherheit in der Informationstechnik (BSI) erhalten. Mittelständische Unternehmen haben damit die Bestätigung, dass die Cloud-Services von q.beyond die hohen Anforderungen des BSI an Sicherheit, Datenschutz, Verfügbarkeit und Compliance erfüllen.

SD-WAN und moderne Sicherheitsfunktionen Vereinheitlichung von Multi-Cloud-Umgebungen

Fachbeiträge: Hintergrund

Künstliche Intelligenz in der Cloud
Die Giganten der Tech-Branche planen in diesem Jahr mehr als 300 Milliarden US-Dollar auszugeben, um im KI-Wettrüsten wettbewerbsfähig zu bleiben. Allein Amazon hat über 100 Milliarden US-Dollar angekündigt, während Microsoft, Alphabet und Meta jeweils weitere Dutzende Milliarden für den Bau riesiger Rechenzentren, den Ausbau von GPU-Clustern und die Sicherung ihrer Dominanz im Bereich der Cloud-basierten KI ausgeben wollen. Investitionen in dieser Größenordnung sorgen für Schlagzeilen und viele Unternehmen, die selbst dabei sind, ihre KI-Strategie zu planen, sehen sich gezwungen, ihrerseits hohe Budgets einzuplanen. Für die meisten Unternehmen ist es jedoch weder praktikabel noch notwendig, den Plänen der Hyperscaler zu folgen. IT-Führungskräfte fragen sich deshalb zurecht, was für den Einsatz der KI im Unternehmen tatsächlich benötigt wird.
Tape hat ausgedient, Public Cloud ist verzichtbar
Zwei in der Datensicherung eingesetzte Technologien stehen derzeit bei vielen Unternehmen und Behörden auf dem Prüfstand. Bei Tape sind mit der Einführung von LTO-10 die Verbindungen zu Vorgängergenerationen komplett abgeschnitten worden, was eine vollständige Migration aller Systeme und Daten notwendig macht. Die Public Cloud entpuppt sich in vielen Fällen als wesentlich teurer als angenommen und zudem bestimmen rechtlichen Bedenken hinsichtlich Datenschutz und Datenhoheit die Diskussion.

Fachbeiträge: Grundlagen

Beispiel für die 3-2-1-Backup-Regel
Die 3-2-1-Backup-Regel ist ein einfacher, aber wirkungsvoller Ansatz zur Datensicherung. Diese Strategie gewährleistet, dass Daten unter nahezu allen Umständen sicher und wiederherstellbar sind. Sie minimiert Risiken und maximiert die Ausfallsicherheit, indem mehrere Kopien der Daten an verschiedenen Orten aufbewahrt werden. Interessant wird das Thema jedoch, wenn Cloud-Ressourcen bzw. Cloud-Tools mieteinbezogen werden.
Cloud-Repatriierung richtig planen
Lange galt die Cloud als Endpunkt der IT-Modernisierung. Doch mit dem Aufkommen rechenintensiver KI-Workloads, neuen regulatorischen Pflichten und intransparenten Kostenmodellen stellt sich für viele Unternehmen die Frage neu: Welche Workloads gehören wirklich in die Cloud und welche besser zurück ins eigene Rechenzentrum? Dieser Leitfaden gibt Orientierung für die Rückverlagerung geschäftskritischer Anwendungen.

IT Security

Hochkarätige Keynotes und Impulse
Am 04. und 05. März 2026 wird die Allianz Arena München zum Treffpunkt der Cybersicherheitsbranche: Ftapi veranstaltet zum zweiten Mal die CPT - Connect. Protect. Transform. Das Event geht über die klassische IT-Security-Konferenz hinaus: Es bringt führende Köpfe aus Politik, Wirtschaft und Wissenschaft zusammen, um die Zukunft der Cybersicherheit als gesamtgesellschaftliche Aufgabe zu gestalten.
Sichere Einführung von KI
Zscaler übernimmt die Pionierin von KI-Sicherheit SPLX und baut damit sein Serviceportfolio um die Absicherung von KI-Anwendungen aus. Die "Zscaler Zero Trust Exchange"-Plattform wird um Shift-Left KI Asset Discovery, automatisiertes Red Teaming und Governance erweitert, so dass Unternehmen ihre KI-Investitionen von der Entwicklung bis zur Bereitstellung sichern können.

IT Security - Angriffe & Lecks

Vorgehensweise von Shai-Hulud V2
Sysdig, Unternehmen für Echtzeit-Cloud-Sicherheit, warnt vor einer neuen Version des Shai-Hulud-Wurms (auch als Sha1-Hulud bezeichnet), der am 24. November 2025 beobachtet wurde. Er verbreitet sich derzeit über verseuchte NPM-Pakete im Internet. Bislang sind über 800 Pakete betroffen, und Zugangsdaten für über 25.000 GitHub-Repositories wurden weitergegeben. Das Ausmaß und der Umfang der Auswirkungen auf die Opfer, die diese neue Version des Wurms mit sich bringt, übertrifft die vorherige Version, da er eine Vielzahl neuer Methoden einsetzt.
Cybercrime-Netzwerk aufgedeckt
Check Point Software Technologies hat mithilfe ihres External Risk Management Teams ein weit verzweigtes Cybercrime-Netzwerk aufgedeckt. Dieses verwandelt legitime Werbeplattformen in Einfallstore für Cyber-Angriffe. Der unter dem Codenamen Payroll Pirates bekannte Zusammenschluss zielt seit Mitte 2023 auf Gehaltsabrechnungs- und Finanzsysteme ab, um Zugangsdaten zu stehlen und Gehaltszahlungen umzuleiten.

IT Security - Fachbeiträge

Sicherheitsvorfälle in Software-Lieferketten
Die jüngsten Attacken auf Software-Lieferketten zeigen, wie anfällig und eng verflochten die digitale Infrastruktur geworden ist. Der Vorfall rund um den Wurm Shai-Hulud im npm-Ökosystem, dem Fundament vieler moderner Web- und Unternehmensanwendungen, führte bereits zur Kompromittierung von über 500 Paketen. Die Schadsoftware sammelte Cloud-Zugangsdaten aus AWS-, GCP- und Azure-Umgebungen sowie GitHub-Zugriffs-Tokens und verbreitete sich eigenständig, indem sie infizierten Code in weitere Module einschleuste.
Infrastruktur als Erfolgsfaktor für KI
Die EU schreitet mit der Umsetzung des AI Act sowie einer umfassenderen Strategie zur Förderung und Bereitstellung von KI- und Cloud-Infrastrukturen in den Mitgliedstaaten voran. Doch Unternehmen stehen zunehmend unter Druck. Ihre Infrastrukturen müssen mit den wachsenden betrieblichen Anforderungen, geopolitischen Spannungen und erweiterten regulatorischen Vorgaben Schritt halten. Zwar will die EU damit die Wettbewerbsfähigkeit stärken und den administrativen Aufwand verringern, doch ihr Erfolg hängt maßgeblich davon ab, wie die angestrebte Harmonisierung in der Praxis umgesetzt wird.

IT Security - Tipps / Hintergrund / Wissen

Dynamische Umgehungstechniken
Im Jahr 2025 prägten vor allem die Kombination aus KI, sich kontinuierlich weiterentwickelnden Phishing-as-a-Service (PhaaS)-Kits und immer ausgefeilteren Techniken zur Verbreitung von Phishing und zur Umgehung von Sicherheitsmaßnahmen die Phishing-Landschaft. Die Threat-Analysten von Barracuda gingen beispielsweise noch vor einem Jahr davon aus, dass PhaaS-Kits bis Ende 2025 für die Hälfte aller Angriffe mit dem Ziel, Anmeldedaten zu stehlen, genutzt werden. Der tatsächliche Anteil liegt nun bei etwas über 50 Prozent. Darüber hinaus hat sich die Anzahl der Phishing-Kits im Jahr 2025 verdoppelt.
Stärkere "wurmartige" Ausbreitung
Als die erste Welle der Shai-Hulud-Kampagne im Jahr 2025 bekannt wurde, entwickelte sich der Vorfall rasch zu einem der schwerwiegendsten Angriffe im gesamten JavaScript-Ökosystem. Die Sicherheitsforscher von JFrog gehörten zu den ersten, die den Angriff umfassend analysierten und dabei aufdeckten, dass Hunderte von npm-Paketen kompromittiert worden waren. Ein selbstreplizierender Wurm stahl Zugangsdaten, erbeutete Cloud-Token und veröffentlichte manipulierte Paketversionen automatisiert erneut.