Sie sind hier: Startseite » Markt » Unternehmen

Offener Standard für Data Lakes werden


Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud: Das Delta Lake Projekt wird an die Linux Foundation übergeben
Das zunehmende Engagement der Community zeigt die Begeisterung für Open Source und fördert branchenweite Innovationen für datengesteuerte Initiativen


Die Linux Foundation, die gemeinnützige Organisation, die Masseninnovationen durch Open Source ermöglicht, gab bekannt, dass sie Delta Lake hosten wird, ein Projekt, das sich auf die Verbesserung der Zuverlässigkeit, Qualität und Leistung von Data Lakes konzentriert. Delta Lake wurde von Tausenden von Organisationen übernommen und verfügt über ein florierendes Ökosystem von Unterstützern, darunter Intel, Alibaba und Booz Allen Hamilton. Um die Akzeptanz und die Beiträge zur Weiterentwicklung weiter zu steigern, wird Delta Lake zu einem Linux Foundation-Projekt und einem offenen Governance-Modell.

Jedes Unternehmen strebt danach, durch Data Science, Machine Learning und Analytics mehr Werte aus Daten zu ziehen, aber sie werden massiv durch die mangelnde Datensicherheit in den Data Lakes behindert. Delta Lake löst Herausforderungen bei der Datenzuverlässigkeit, indem es die Transaktionen ACID-konform macht und gleichzeitiges Lesen und Schreiben ermöglicht. Seine Fähigkeit zur Durchsetzung von Schemas trägt dazu bei, dass der Data Lake frei von korrupten und nicht konformen Daten ist. Seit seiner Einführung im Oktober 2017 wurde Delta Lake von über 4.000 Unternehmen angenommen und verarbeitet jeden Monat über zwei Exabyte an Daten.

"Delta Lake unter das neutrale Haus der Linux Foundation zu bringen, wird der vom Projekt abhängigen Open-Source-Community helfen, die Technologie zu entwickeln, die sich mit der Speicherung und Verarbeitung großer Datenmengen sowohl vor Ort als auch in der Cloud befasst", sagte Michael Dolan, VP of Strategic Programs bei der Linux Foundation. "Die Linux Foundation unterstützt Open-Source-Communities dabei, ein offenes Governance-Modell zu nutzen, um einen weitgefächerten Beitrag der Industrie und die Konsensbildung zu ermöglichen, was den Stand der Technik für Datenspeicherung und -zuverlässigkeit verbessern wird."

Die Mitbegründer von Databricks sind die ursprünglichen Entwickler des Open-Source-Projekts Apache Spark, der Unified Analytics-Plattform, die sich zum Standard für die groß angelegte Datenverarbeitung entwickelt hat. Der CEO und Mitbegründer von Databricks, Ali Ghodsi, zeigt sich begeistert, diese Reise mit dem Delta Lake Projekt erneut zu unternehmen. "Unser Team hat weiterhin Open-Source-Projekte entwickelt und unterstützt, weil wir wissen, dass dies der schnellste und umfassendste Weg zur Innovation ist. Um die Datenherausforderungen von Unternehmen zu bewältigen, wollen wir sicherstellen, dass dieses Projekt Open Source in der wahrsten Form ist. Durch die Stärke der Linux Foundation Community und die Beiträge sind wir zuversichtlich, dass Delta Lake schnell zum Standard für die Datenspeicherung in Data Lakes werden wird."

Delta Lake wird über ein offenes Governance-Modell verfügen, das die Beteiligung und den technischen Fortschritt fördert und einen Rahmen für eine langfristige Betreuung durch ein Ökosystem bietet, das in den Erfolg von Delta Lake investiert hat. Obwohl Delta Lake ursprünglich für die Zusammenarbeit mit Apache Spark konzipiert war, hat es eine florierende Community entwickelt, die Unterstützung für andere Open-Source-Datensysteme bietet. (Linux Foundation: ra)

eingetragen: 17.10.19
Newsletterlauf: 28.11.19

Linux Foundation: Kontakt und Steckbrief

Der Informationsanbieter hat seinen Kontakt leider noch nicht freigeschaltet.


Kostenloser PMK-Verlags-Newsletter
Ihr PMK-Verlags-Newsletter hier >>>>>>


Meldungen: Unternehmen

  • Strategische Partnerschaften mit SAP

    Onapsis, Unternehmen im Bereich Cybersicherheit und Compliance von SAP-Anwendungen, feiert 15 Jahre Marktführerschaft im Bereich SAP-Security mit mehreren Produktinnovationen, der Stärkung der strategischen Partnerschaft mit SAP, der Ernennung neuer Vorstandsmitglieder sowie wichtiger SAP Threat Research.

  • Filesharing und Filemanagement

    Collabora Online, eine Open-Source-Office-Suites für digitale Zusammenarbeit, und OpenCloud, Open-Source-Lösung für sicheres Filemanagement und Filesharing, geben ihre strategische Partnerschaft bekannt. Im Rahmen der Zusammenarbeit wird Collabora Online nahtlos in OpenCloud integriert. Die Lösung bietet so umfassende Möglichkeiten für kollaboratives Arbeiten in Dokumenten und ein einfaches, sicheres und DSGVO-konformes Dateimanagement

  • Einblicke in die IT-Sourcing-Trends

    Stefanini, Anbieterin von Technologielösungen und zuverlässiger Innovationspartner, wird in der "2024 German IT Sourcing Study" von Whitelane Research als "ExceptionalPerformer" in der Kategorie "Workplace Services" aufgeführt. Diese prestigeträchtige Auszeichnung unterstreicht die konsequente Ausrichtung von Stefanini auf die Bereitstellung innovativer, skalierbarer und kundenorientierter Arbeitsplatzlösungen, die auf die besonderen Bedürfnisse deutscher Unternehmen zugeschnitten sind.

  • Mehr Basismodelle und Entwickler-Tools

    Alibaba Cloud, das Kompetenzzentrum der Alibaba Group für Digitalisierung, hat auf dem diesjährigen Developer Summit eine Reihe von Neuheiten vorgestellt, mit deren Hilfe Entwickler auf der ganzen Welt innovative KI-Anwendungen effizienter verwirklichen können. Zu den Neuheiten gehören eine erweiterte Suite von Large Language Models (LLMs) und Tools für die KI-Entwicklung, verbesserte Cloud-Infrastrukturen sowie Support-Programme.

  • Herausragende Digitalisierung

    Nomios Germany wurde für ihren innovativen Ansatz im Bereich Managed Services mit dem Deutschen Excellence Award ausgezeichnet. Die unter der Schirmherrschaft der Bundesministerin a.D. Brigitte Zypries stehende Auszeichnung würdigt herausragende Digitalisierungslösungen deutscher Unternehmen.

  • 2024 erfolgreiches Jahr für Haufe X360

    Haufe X360 konnte auch im Jahr 2024 ihre Position als der Anbieterin einer Cloud-basierten Business Management Plattform für KMU wieder deutlich ausbauen. Das Unternehmen wächst weiter nachhaltig in den verschiedensten Bereichen. An die Entwicklung im kommenden Jahr hat man hohe Erwartungen - trotz der angespannten Weltwirtschaft. So konnte Haufe X360 2024 ganze 43 Prozent Mitarbeiterwachstum verzeichnen, Neueinstellungen gab es vor allem bei der Produktentwicklung und im Support. Damit will man sicherstellen, dass die Business-Management-Plattform stetig weiter optimiert und ausgebaut werden kann - sowohl bei den Funktionalitäten als auch bei branchenspezifischen Anpassungen und der Integration von anderen Softwareanbietern. "Durch seine offene Software-Architektur und das Hosting in der Cloud ist unser System extrem flexibel und anpassbar. Das waren auch Gründe dafür, dass wir uns über die Auszeichnung als ERP des Jahres freuen durften", erklärt Christian Zöhrlaut, Chief Product Officer bei Haufe X360. "Dadurch, dass wir jetzt personell noch besser aufgestellt sind, können wir den bereits hohen gewohnten Standard nicht nur halten, sondern uns kontinuierlich steigern und noch genauer auf die Bedürfnisse unserer Kunden eingehen."

  • Schwerpunkt auf Identitätssicherheit

    Omada, Anbieterin von Identity Governance and Administration (IGA), hat die Integration ihrer "Cloud-IGA" mit Microsoft Entra AI angekündigt. Durch die Partnerschaft mit Microsoft und die Nutzung von Semantic Kernel hat Omada KI-Assistenten mit Schwerpunkt auf Identitätssicherheit entwickelt, die die Automatisierung vorantreiben, die Entscheidungsfindung verbessern und hochgradig personalisierte und kontextbezogene Benutzererfahrungen bieten.

  • FRA02 einen Maßstab für Nachhaltigkeit

    maincubes, Entwicklerin und Betreiberin von Rechenzentren in Europa und Teil des DTCP-Portfolios, gibt bekannt, dass ihrneu errichtetes Rechenzentrum FRA02 in Frankfurt dem EU-Taxonomiestandard entspricht. Dieser Meilenstein unterstreicht das Engagement von maincubes für hohe Umweltverantwortung, regulatorische Compliance und die Schaffung eines langfristigen Mehrwerts für Investoren und Kunden.

  • Zusammenarbeit mit Google Cloud

    Infosys eröffnet ein Google Cloud Center of Excellence. Dieses wird von Infosys Topaz betrieben. Ziel ist es, KI-Innovationen in Unternehmen zu fördern. Das Center wird als Katalysator für Co-Creation dienen und unterstützt Organisationen dabei, die Kraft generativer KI zu nutzen, um transformatives Wachstum zu erzielen.

  • Cloud-Projekte gelingen, wenn man zusammenarbeitet

    Nutanix, Spezialistin für hybrides Multicloud-Computing, hat die Multicloud Experts Community ("MC Experts") in der EMEA-Region gegründet. Mit seiner Initiative will das Unternehmen eine Plattform für Cloud-Experten schaffen, auf der sie Wissen und Ressourcen bündeln und gleichzeitig auf Kollegen und Spezialisten zurückgreifen können, um Kunden in einer zunehmend komplexen Multicloud-Welt erfolgreich zu machen.

Wir verwenden Cookies um unsere Website zu optimieren und Ihnen das bestmögliche Online-Erlebnis zu bieten. Mit dem Klick auf "Alle akzeptieren" erklären Sie sich damit einverstanden. Erweiterte Einstellungen