{"id":175556,"date":"2024-05-22T17:57:47","date_gmt":"2024-05-22T15:57:47","guid":{"rendered":"https:\/\/nuevoitsitio1.wpenginepowered.com\/co\/sin-categoria\/la-ia-generativa-induce-a-grandes-cambios-en-los-centros-de-datos\/"},"modified":"2024-05-22T17:57:47","modified_gmt":"2024-05-22T15:57:47","slug":"la-ia-generativa-induce-a-grandes-cambios-en-los-centros-de-datos","status":"publish","type":"post","link":"https:\/\/www.itsitio.com\/co\/inteligencia-artificial\/la-ia-generativa-induce-a-grandes-cambios-en-los-centros-de-datos\/","title":{"rendered":"La IA generativa induce a grandes cambios en los centros de datos"},"content":{"rendered":"<p>Gracias a que la Inteligencia Artificial (IA) requiere mayor procesamiento, m\u00e1s energ\u00eda y mayor poder tecnol\u00f3gico, se convierte en un verdadero reto para los centros de datos que para responder a estos requerimientos tendr\u00e1n que cambiar para siempre mientras siguen en su lucha por ser m\u00e1s eficientes, limpios y responsables con sus recursos y su entorno.<\/p>\n<p>Esta situaci\u00f3n se hace cada vez m\u00e1s intensa si miramos la perspectiva de los negocios. El uso intensivo de IA que arranca con peque\u00f1os y b\u00e1sicos bots que responden a los usuarios en sus dudas cotidianas de servicio, tambi\u00e9n est\u00e1 presente en las inmensas aplicaciones de anal\u00edtica que buscan respuestas complejas a temas de ingenier\u00eda, bilog\u00eda, qu\u00edmica y finanzas.<\/p>\n<p>Pero m\u00e1s all\u00e1 de estas aplicaciones, la IA Generativa, exige a\u00fan mayores recursos tanto de datos como de procesamiento para obtener resultados con audio y video por lo que hoy, toda esta cadena de valor requiere y exige nuevas soluciones cada vez m\u00e1s veloces y proactivas.<\/p>\n<p>Es por esto que, para lograr los potenciales requeridos, todos acuden a los centros de datos para exprimir al m\u00e1ximo las capacidades de la IA a un costo equitativo para todos los negocios. Por esto mismo los cambios en los centros de datos pasaron de ser necesarios a urgentes para atender tanta demanda, que adem\u00e1s d\u00eda por d\u00eda seguir\u00e1 creciendo de manera casi exponencial.<\/p>\n<p>De acuerdo con un estudio de Gartner para la firma\u00a0<strong>Daon<\/strong>, empresa de investigaciones, se ponen estos datos en consideraci\u00f3n: \u00a0De 2023 a 2026, los modelos basados en soluciones de IA Generativa pasar\u00e1n del 1% a m\u00e1s del 60%, desplazando a modelos monomodales de IA.<\/p>\n<p>De igual forma Gartner asegura que las ofertas de AIaaS (Inteligencia Artificial como Servicio) est\u00e1n creciendo en demanda. Esto incluye soluciones como AI TRiSM (Gesti\u00f3n de Confianza, Riesgo y Seguridad), gesti\u00f3n de alucinaciones, detectores de procedencia, IA responsable e IA sostenible.<\/p>\n<h4><span style=\\\"color: #000080\\\">Los Centros de Datos se transforman<\/span><\/h4>\n<p>Recientemente hablamos con Jonathan Jew, Secretario del Comit\u00e9 de Ingenier\u00eda TR-42 de la Telecommunications Industry Association, TIA. Jew nos ayudar\u00e1 a entender hacia d\u00f3nde se dirigen los centros de datos frente a la creciente demanda de recursos generada por la Inteligencia Artificial, IA.<\/p>\n<p>De hecho, es importante resaltar que, desde la pandemia los centros de datos han comenzado a adaptarse a nuevas tareas y funcionalidades. Sin embargo, el auge de la Inteligencia Artificial, IA, implica que estos deben reforzar elementos claves de sus infraestructuras para responder a la nueva demanda.<\/p>\n<p><b>J<\/b>onathan Jew explica que \u201cLa IA es la pr\u00f3xima revoluci\u00f3n. Todo lo que hacemos, y esto es muy emocionante, va a exigir una mayor demanda para los centros de datos. Por ejemplo, algunos usuarios de centros de estaban buscando mayor espacio para\u00a0<i>colocation<\/i>\u00a0y eso conduce tambi\u00e9n a buscar m\u00e1s energ\u00eda y capacidad de enfriamiento. Estamos en consumos de 30 KW por gabinete cuando, en el pasado, el consumo promedio era de 8KW\u201d.<\/p>\n<h4><span style=\\\"color: #000080\\\">Las GPU requieren m\u00e1s recursos<\/span><\/h4>\n<p>Otro punto que est\u00e1 cambiando es la manera como se construyen los centros de datos. De hecho, las redes de servidores con GPU, o unidades de procesamiento de gr\u00e1ficos que pueden realizar c\u00e1lculos matem\u00e1ticos a alta velocidad, exigen formas m\u00e1s eficientes de conectividad a la red y de alimentaci\u00f3n energ\u00e9tica con el fin de obtener todo su potencial.<\/p>\n<p>En el campo de los centros de datos de hyperscale, se busca crear grandes cl\u00fasteres de GPU, a menudo con 64K o m\u00e1s GPU. Esto les permite adaptarse con mayor versatilidad a todas las variantes de cargas de trabajo de entrenamiento de IA generativa (genAI).<\/p>\n<p>El tama\u00f1o de estos grandes modelos de transformadores y los conjuntos de datos pueden necesitar miles de GPU para complementarse. Por lo tanto, proporcionar conectividad de red sin bloqueo (Fully Non-Blocking) entre las GPU podr\u00eda ser un dise\u00f1o excesivo.<\/p>\n<p>As\u00ed, comprender la partici\u00f3n del modelo y los patrones de tr\u00e1fico para las cargas de trabajo de entrenamiento de GenAI optimiza la topolog\u00eda de red. De paso, permite el uso eficiente de los conmutadores Infiniband y Ethernet b\u00e1sicos para las estructuras de GPU.<\/p>\n<p>Adicionalmente, los centros de datos requieren mayor velocidad de conectividad. De acuerdo con Jew, los centros de datos requieren mayor conectividad para las redes con GPU. Por esta raz\u00f3n se est\u00e1n usando fibras \u00f3pticas multimodo, para mejorar la velocidad. Ahora estamos con 8,6 TB de velocidad, pero muchos de nuestros clientes est\u00e1n buscando el punto de conectividad dentro de los centros de datos con fibra \u00f3ptica mono modo.<\/p>\n<h3><span style=\\\"color: #000080\\\"><strong>M\u00e1s energ\u00eda, enfriamiento y fibra para el centro de datos<\/strong><\/span><\/h3>\n<p>Frente al uso de recursos como energ\u00eda y enfriamiento, Jew aclara que \u201cLos sistemas de energ\u00eda y enfriamiento tambi\u00e9n deben ajustarse a los servidores. Si se construye un centro de datos desde cero, se debe pensar en darle soporte a una alta densidad. As\u00ed que, si se quieren tener tres o cuatro servidores con GPU en un gabinete, se requieren entre 30 y 40 KW en ese gabinete. Esta cifra es solo para arrancar, no sabemos hasta d\u00f3nde llegar\u00e1, pero es un buen n\u00famero para arrancar.\u201d<\/p>\n<p>Igualmente, es necesario mejorar la conectividad basada en fibra \u00f3ptica. La fibra \u00f3ptica proporciona una alta velocidad de transmisi\u00f3n y baja latencia, lo que permite un procesamiento r\u00e1pido y eficiente de los datos necesarios para la inteligencia artificial.<\/p>\n<p>De acuerdo con Jonathan Jew, \u201cen los centros de datos se est\u00e1 pasando de la transmisi\u00f3n multimodo a la transmisi\u00f3n monomodo a trav\u00e9s de las redes de fibra \u00f3ptica, con esto se obtendr\u00e1 una velocidad m\u00e1s alta\u201d.<\/p>\n<p>De esta forma, se calcula que los centros de datos atender\u00e1n de forma m\u00e1s confiable y oportuna los incrementos considerables en demanda de procesamiento en los pr\u00f3ximos a\u00f1os, pero la verdad, la historia lo dir\u00e1.<\/p>\n<p>Para desglosar este tema de tendencia, el experto ofrecer\u00e1 en exclusiva para Colombia una charla en el marco del evento BICSI ICT SUMMIT COLOMBIA 2024, que se realizar\u00e1 el 28 y 29 de mayo en el Centro de Convenciones \u00c1gora en Bogot\u00e1, cuyo registro ya est\u00e1 abierto en este\u00a0<b><a id=\\\"OWAec8c3604-6476-8083-e977-ae5ab748b400\\\" href=\\\"https:\/\/latamred.com\/ictsummitcolombia24\/\\\" target=\\\"_blank\\\" rel=\\\"noopener noreferrer\\\" data-auth=\\\"NotApplicable\\\" data-loopstyle=\\\"linkonly\\\" data-linkindex=\\\"5\\\"> v\u00ednculo.<\/a><\/b><\/p>\n","protected":false},"excerpt":{"rendered":"<p>Gracias a que la Inteligencia Artificial (IA) requiere mayor procesamiento, m&aacute;s energ&iacute;a y mayor poder tecnol&oacute;gico, se convierte en un verdadero reto para los centros de datos que para responder a estos requerimientos tendr&aacute;n que cambiar para siempre mientras siguen en su lucha por ser m&aacute;s eficientes, limpios y responsables con sus recursos y su entorno. Esta situaci&oacute;n se hace cada vez m&aacute;s intensa si miramos la perspectiva de los negocios. El uso intensivo de IA que arranca con peque&ntilde;os y b&aacute;sicos bots que responden a los usuarios en sus dudas cotidianas de servicio, tambi&eacute;n est&aacute; presente en las inmensas aplicaciones de anal&iacute;tica que buscan respuestas complejas a temas de ingenier&iacute;a, bilog&iacute;a, qu&iacute;mica y finanzas. Pero m&aacute;s all&aacute; de estas aplicaciones, la IA Generativa, exige a&uacute;n mayores recursos tanto de datos como de procesamiento para obtener resultados con audio y video por lo que hoy, toda esta cadena de valor requiere y exige nuevas soluciones cada vez m&aacute;s veloces y proactivas. Es por esto que, para lograr los potenciales requeridos, todos acuden a los centros de datos para exprimir al m&aacute;ximo las capacidades de la IA a un costo equitativo para todos los negocios. Por esto mismo los cambios en los centros de datos pasaron de ser necesarios a urgentes para atender tanta demanda, que adem&aacute;s d&iacute;a por d&iacute;a seguir&aacute; creciendo de manera casi exponencial. De acuerdo con un estudio de Gartner para la firma&nbsp;Daon, empresa de investigaciones, se ponen estos datos en consideraci&oacute;n: &nbsp;De 2023 a 2026, los modelos basados en soluciones de IA Generativa pasar&aacute;n del 1% a m&aacute;s del 60%, desplazando a modelos monomodales de IA. De igual forma Gartner asegura que las ofertas de AIaaS (Inteligencia Artificial como Servicio) est&aacute;n creciendo en demanda. Esto incluye soluciones como AI TRiSM (Gesti&oacute;n de Confianza, Riesgo y Seguridad), gesti&oacute;n de alucinaciones, detectores de procedencia, IA responsable e IA sostenible. Los Centros de Datos se transforman Recientemente hablamos con Jonathan Jew, Secretario del Comit&eacute; de Ingenier&iacute;a TR-42 de la Telecommunications Industry Association, TIA. Jew nos ayudar&aacute; a entender hacia d&oacute;nde se dirigen los centros de datos frente a la creciente demanda de recursos generada por la Inteligencia Artificial, IA. De hecho, es importante resaltar que, desde la pandemia los centros de datos han comenzado a adaptarse a nuevas tareas y funcionalidades. Sin embargo, el auge de la Inteligencia Artificial, IA, implica que estos deben reforzar elementos claves de sus infraestructuras para responder a la nueva demanda. Jonathan Jew explica que &ldquo;La IA es la pr&oacute;xima revoluci&oacute;n. Todo lo que hacemos, y esto es muy emocionante, va a exigir una mayor demanda para los centros de datos. Por ejemplo, algunos usuarios de centros de estaban buscando mayor espacio para&nbsp;colocation&nbsp;y eso conduce tambi&eacute;n a buscar m&aacute;s energ&iacute;a y capacidad de enfriamiento. Estamos en consumos de 30 KW por gabinete cuando, en el pasado, el consumo promedio era de 8KW&rdquo;. Las GPU requieren m&aacute;s recursos Otro punto que est&aacute; cambiando es la manera como se construyen los centros de datos. De hecho, las redes de servidores con GPU, o unidades de procesamiento de gr&aacute;ficos que pueden realizar c&aacute;lculos matem&aacute;ticos a alta velocidad, exigen formas m&aacute;s eficientes de conectividad a la red y de alimentaci&oacute;n energ&eacute;tica con el fin de obtener todo su potencial. En el campo de los centros de datos de hyperscale, se busca crear grandes cl&uacute;steres de GPU, a menudo con 64K o m&aacute;s GPU. Esto les permite adaptarse con mayor versatilidad a todas las variantes de cargas de trabajo de entrenamiento de IA generativa (genAI). El tama&ntilde;o de estos grandes modelos de transformadores y los conjuntos de datos pueden necesitar miles de GPU para complementarse. Por lo tanto, proporcionar conectividad de red sin bloqueo (Fully Non-Blocking) entre las GPU podr&iacute;a ser un dise&ntilde;o excesivo. As&iacute;, comprender la partici&oacute;n del modelo y los patrones de tr&aacute;fico para las cargas de trabajo de entrenamiento de GenAI optimiza la topolog&iacute;a de red. De paso, permite el uso eficiente de los conmutadores Infiniband y Ethernet b&aacute;sicos para las estructuras de GPU. Adicionalmente, los centros de datos requieren mayor velocidad de conectividad. De acuerdo con Jew, los centros de datos requieren mayor conectividad para las redes con GPU. Por esta raz&oacute;n se est&aacute;n usando fibras &oacute;pticas multimodo, para mejorar la velocidad. Ahora estamos con 8,6 TB de velocidad, pero muchos de nuestros clientes est&aacute;n buscando el punto de conectividad dentro de los centros de datos con fibra &oacute;ptica mono modo. M&aacute;s energ&iacute;a, enfriamiento y fibra para el centro de datos Frente al uso de recursos como energ&iacute;a y enfriamiento, Jew aclara que &ldquo;Los sistemas de energ&iacute;a y enfriamiento tambi&eacute;n deben ajustarse a los servidores. Si se construye un centro de datos desde cero, se debe pensar en darle soporte a una alta densidad. As&iacute; que, si se quieren tener tres o cuatro servidores con GPU en un gabinete, se requieren entre 30 y 40 KW en ese gabinete. Esta cifra es solo para arrancar, no sabemos hasta d&oacute;nde llegar&aacute;, pero es un buen n&uacute;mero para arrancar.&rdquo; Igualmente, es necesario mejorar la conectividad basada en fibra &oacute;ptica. La fibra &oacute;ptica proporciona una alta velocidad de transmisi&oacute;n y baja latencia, lo que permite un procesamiento r&aacute;pido y eficiente de los datos necesarios para la inteligencia artificial. De acuerdo con Jonathan Jew, &ldquo;en los centros de datos se est&aacute; pasando de la transmisi&oacute;n multimodo a la transmisi&oacute;n monomodo a trav&eacute;s de las redes de fibra &oacute;ptica, con esto se obtendr&aacute; una velocidad m&aacute;s alta&rdquo;. De esta forma, se calcula que los centros de datos atender&aacute;n de forma m&aacute;s confiable y oportuna los incrementos considerables en demanda de procesamiento en los pr&oacute;ximos a&ntilde;os, pero la verdad, la historia lo dir&aacute;. Para desglosar este tema de tendencia, el experto ofrecer&aacute; en exclusiva para Colombia una charla en el marco del evento BICSI ICT SUMMIT COLOMBIA 2024, que se realizar&aacute; el 28 y 29 de mayo en el Centro de Convenciones &Aacute;gora en Bogot&aacute;, cuyo registro ya est&aacute; abierto en este&nbsp; v&iacute;nculo.<\/p>\n","protected":false},"author":233,"featured_media":175557,"comment_status":"closed","ping_status":"closed","sticky":false,"template":"","format":"standard","meta":{"site-sidebar-layout":"default","site-content-layout":"","ast-site-content-layout":"default","site-content-style":"default","site-sidebar-style":"default","ast-global-header-display":"","ast-banner-title-visibility":"","ast-main-header-display":"","ast-hfb-above-header-display":"","ast-hfb-below-header-display":"","ast-hfb-mobile-header-display":"","site-post-title":"","ast-breadcrumbs-content":"","ast-featured-img":"","footer-sml-layout":"","ast-disable-related-posts":"","theme-transparent-header-meta":"","adv-header-id-meta":"","stick-header-meta":"","header-above-stick-meta":"","header-main-stick-meta":"","header-below-stick-meta":"","astra-migrate-meta-layouts":"default","ast-page-background-enabled":"default","ast-page-background-meta":{"desktop":{"background-color":"var(--ast-global-color-4)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"ast-content-background-meta":{"desktop":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"tablet":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""},"mobile":{"background-color":"var(--ast-global-color-5)","background-image":"","background-repeat":"repeat","background-position":"center center","background-size":"auto","background-attachment":"scroll","background-type":"","background-media":"","overlay-type":"","overlay-color":"","overlay-opacity":"","overlay-gradient":""}},"footnotes":""},"categories":[17],"tags":[149,150],"class_list":["post-175556","post","type-post","status-publish","format-standard","has-post-thumbnail","hentry","category-inteligencia-artificial","tag-daon","tag-jonathan-jew"],"_links":{"self":[{"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/posts\/175556","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/users\/233"}],"replies":[{"embeddable":true,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/comments?post=175556"}],"version-history":[{"count":0,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/posts\/175556\/revisions"}],"wp:featuredmedia":[{"embeddable":true,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/media\/175557"}],"wp:attachment":[{"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/media?parent=175556"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/categories?post=175556"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/www.itsitio.com\/co\/wp-json\/wp\/v2\/tags?post=175556"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}