广州神秘顾客研究

应酬大数据的挑战近在眉睫，咱们奈何存储、管束、治理和使用大数据，从未像当今这么要紧。东说念主工智能的跳动可能会成为 2024 年的驱能源，但淌若您的大数据失控，AI又能奈何呢。

在新的一年里，大数据会给咱们带来什么?这谁也说不准，因为当年的事实解说改日很难预测。对于大数据预测，咱们向业界众人请问。

数据库提供商 Percona 的本领据说念者 Dave Stokes 说，东说念主们对向量数据库的兴味会激增。不外，这不会一直不竭。

“向量数据库将成为许多东说念主诡计的热点新畛域，但几年后最终会被相关数据库所取代。”Stokes预测说，“每隔 10 年摆布，就会有一种‘新’数据库本领被声称为相关数据库的赶走者，而开导东说念主员在加入这一枚举后才会重新发现，相关模子特地活泼，相关数据库供应商不错冒失地将新本领应用到我方的居品中。”

不同数据孤岛的存在一直是数据工程师的心头之痛。不外，据 Hammerspace 市集营销高档副Molly Presley称，跟着聚集式数据编排的发展，2024 年将带来一线期许。

“企业将开动从‘存储和复制’转向数据编排(data orchestration)的寰宇，”Presley说。“在东说念主工智能跳动的推动下，当今仍是有了坚定的器具来分析数据并建议可行的视力。但是，文献存储基础架构并莫得跟上这些跳动的法子。与那些试图通过将文献副本从一个场地转移到另一个场地来管束存储孤岛和散播式环境的处置决策不同，数据编排不错匡助企业将数据从不同的孤岛和位置整合到一个单一的定名空间中，并在数据最有价值的时期和地点自动放弃数据，使其更易于分析和得出视力。”

咱们存储的大部分数据皆短长结构化数据。MinIO 合资创举东说念主兼首席践诺官 Anand Babu "AB" Periasamy 示意，跟着数据的堆积，管束数据将成为一项着实的挑战，但 2024 年将带来管束数据的新形状。

“2024年，跟着东说念主工智能应用的速即发展，咱们将看到着实的非结构化数据(音频、视频、会议纪录、会谈、演示文稿)的爆炸式增长。从东说念主工智能的角度来看，这些现实具有很强的‘可学习性’，将其收罗到东说念主工智能数据湖中将大大提高通盘企业的智能智商，但同期也会带来专有的挑战，”Periasamy 说。“在保持数十 PB 的性能方面存在彰着的挑战。传统的 SAN/NAS 处置决策经常无法处置这些问题，它们需要具备当代高性能对象存储的属性。这即是为什么大多数 AI/ML 本领(如 OpenAI、Anthropic、Kubeflow)皆使用对象存储的原因，亦然为什么大多数数据库皆转向以对象存储为中心的原因。”

凭据 Forrester 的数据，企业管束的非结构化数据将在 2024 年翻一番，这为东说念主工智能开辟了潜在的利润丰厚的新遴选。

“全球数据和分析决策者示意，他们组织管束的数据中独一 27% 短长结构化数据。”跟着企业为客户和职工推出更多对话式体验，生成式东说念主工智能将使这一比例翻番。企业将不甘人后地存储、分析和息争这些多数的非结构化数据。这一趋势将体当今数据管说念畛域，2024 年新建数据管说念的 80% 将用于非结构化数据的吸收、处理和存储。

此役，火箭首发后卫杰伦-格林末节没有获得出场机会，被教练组DNP。

Faction， Inc.本领和运营副总裁Jeff Heller说，2024年，全球许多企业将实施数据优先架构，以简化数据管束策略。

“公司正在阅历范式滚动;他们要么遴选一个云，要么遴选一个架构来激昂他们的需求，”Heller说，“2024年，企业将需要有筹商什么样的云最合乎他们，以充分应用他们的数据。基于短期规划而非恒久增长作念出的决策将导致数据锁定。数据需要准确且可造访，以便实时作念出决策。对于企业来说，数据管束正变得越来越复杂。高效的数据管束策略至关浩瀚。企业将转向大略从通盘云的首选位置造访单一数据集的处置决策，以确保数据的准确性并提高收尾。”

数据管说念商店 Matillion 的首席居品官 Ciaran Dynes 示意，东说念主工智能改换正在波及生活的方方面面，包括大数据管束。

“在当年的十年里，数据工程师的变装发生了寰宇永远的变化。”Dynes说，改日 12 个月将是科技公司简化数据工程师生活的一年。市集上将出现各式器具，这些器具将被集成到现存平台中，以便将生成式东说念主工智能添加到现存数据管说念中，并大略在里面部署这些模子，这么用户就不错像使用 ChatGPT 同样与这些模子进行实时交互。岂论市集上出现什么样的器具，来岁皆会出现对数据工程师的巨大需求，他们需要接收再培训以掌捏指示工程、奈何微调这些模子以及奈何大幅提高坐褥率。来岁，数据工程师的生活将变得愈加意旨。

Snowflake 居品管束总监Jeff Hollan认为，到 2024 年，您将愈加喜欢数据工程师。

“好多东说念主皆在指摘东说念主工智能改换将取代数据工程师的变装。”Hollan 说，“事实并非如斯，神秘顾客访问事实上，他们的数据专科常识将比以往任何时候皆愈加剧大，只所以新的和不同的边幅责任良友。为了跟上握住变化的场合，数据工程师需要了解生成式AI奈何增涨价值。数据工程师确立和管束的数据管说念也许将是企业与大型谈话模子蚁集以开释价值的第一个场地。数据工程师将是了解奈何使用模子并将其插入数据管说念以自动索要价值的东说念主。他们还需要监督和息争东说念主工智能责任。”

当你的数据由第三方在云霄管束时，你可能会以为我方的数据失去了适度。Ngrok公司首席本领Peter Shafton预测，2024年将是你开动夺回数据适度权的一年。

“2024年的数据管束将彰着转向更高的可造访性和适度性，”Shafton说。当年十年间，东说念主们纷繁涌向基于云的数据处置决策，而当今，钟摆又开动摆向更多的自我管束。这种滚动背后有两个原因：躲避和资本效益。数据显露的不竭胁迫和对更严格造访适度的需求，使企业对饱胀依赖外部云平台持严慎气派。此外，云数据存储和处理资本的不可预测性也促使企业寻求更具可预测性和资本效益的处置决策。这种趋势还收获于可造访和用户友好型数据管束器具的激增，这些器具经常源自 Uber、Netflix 和 Airbnb 等科技巨头率先推出的开源处置决策。

几年来，“数据智能”(data intelligence)一词握住发展壮大，指的是企业为其数据提供的各式数据管束器具。Nasuni公司首席创新官Jim Liddle说，改日12个月将是这一倡导的成败环节期。

“许多公司存储多数数据，只是是因为他们不知说念数据中包含了什么，或者他们是否需要这些数据。”Liddle 说，“数据是否准确和最新?是否正确分类并可‘搜索’?是否合规?是否包含个东说念主身份信息(PII)、受保护健康信息(PHI)或其他敏锐信息?是否按需提供或归档?在改日一年中，通盘公司皆将被动接收东说念主工智能对数据质地、治理、造访和存储的条件，然后才略鼓吹数字化转型或校慎重营，从而获取理念念的竞争上风。”

Coalesce 公司首席践诺官兼合资创举东说念主 Armon Petrossian 示意，淌若不可保持数据的质地和完好意思性，那么你就不错与 2024 年的 GenAI 操办说重逢了。

“2024年，跟着数据从有价值的财富演变为茂密发展的企业的人命线，本领畛域将见证一场变革性的滚动，”他说。“淡薄数据质地、完好意思性和数据血统的组织将濒临挑战，不仅要作念出理智的决策，还要充分发达生成式东说念主工智能、LLM和ML应用形状及用例的后劲。跟着时期的推移，我预测，跟着新一年的到来，那些淡薄构建坚定的数据基础和策略的组织将发现，在快速发展的科技行业中保持当先地位越来越具有挑战性。那些无法得当并优先辩论数据基础的企业将难以卓绝竞争敌手，致使可能在这个竞争强烈的环境中濒临生涯风险。”

数据血统组成了不竭的挑战。Altair 云计较首席工程师 Yeshwant Mummaneni 预测，2024 年，区块链将成为救星。

“跟着AI/ML模子在环节决策中饰演环节变装，岂论是受到东说念主类监督如故在饱胀自主的边幅下，模子的可追溯性/开首变得至关浩瀚，”Mummaneni说。“区块链的基础本领使得纪录的不可点窜性、数字身份、签名和考据成为可能，并应用密码学终了这一规划，这将成为企业AI提供防点窜模子开首的环节方面。”

SAS公司的高档分析居品司理Spiros Potamitis示意，合成数据将是2024年另一项茂密发展的数据趋势。

“跟着企业濒临更严格的监管，跨国分享敏锐数据变得更具挑战性，合成数据将得到平凡应用。”Potamitis说，“合成数据不错高精度地捕捉原始数据源的统计属性，从而克服监管防碍，为企业带来创新。”

ALTR 首席践诺官James Beecham认为，天然您的大数据存储库看上去是正确的，但 2024 年将是数据治理“左移”的一年。

“企业将在数据旅程的早期阶段，即云数据仓库左侧实施数据治理和安全措施，这不仅不错保护敏锐信息，还不错提高所收罗数据的全体质地，”Beecham说。“跟着数据躲避和安全方面礼貌的加多，优先辩论数据治理和安全的企业将更好地顺从这些礼貌。在2024年，瞻望将有越来越多的公司优先良善左移数据治理和安全——使他们大略启动坚定的数据造访治理和云数据仓库和Lakehouse中的数据安全功能，并将其推广到源系统中的数据。”

Denodo 首席践诺官 Angel Viña 说，2023 年，数据网格(Data Mesh)在其他本领趋势眼前有点退居二线(群众的眼神在GenAI)，但在 2024 年，数据网格的上风将变得格外彰着，阻拦淡薄。

“2024年将是数据网格崛起的改换点，它顺应了数据的内在散播式特色，”Viña说。“在数据网格中，IT的变装滚动为为数据畛域的责任提供基础，即在通盘企业中创建和分发数据居品。改换点是东说念主们理会到，数据居品应与其他居品同样被视为同等浩瀚的居品……在以数据为中心的期间，只是对数据进行包装是不够的;企业需要进步通盘终局用户体验。”

作家：Alex Woodie广州神秘顾客研究