{"id":123674,"date":"2023-06-28T16:24:19","date_gmt":"2023-06-28T19:24:19","guid":{"rendered":"https:\/\/fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/"},"modified":"2023-07-26T15:48:23","modified_gmt":"2023-07-26T18:48:23","slug":"machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao","status":"publish","type":"post","link":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/","title":{"rendered":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o"},"content":{"rendered":"

<\/p>\n

Desafios do Gerenciamento de Modelos em Produ\u00e7\u00e3o<\/h2>\n

O gerenciamento de modelos de aprendizado de m\u00e1quina em produ\u00e7\u00e3o apresenta diversos desafios que precisam ser abordados para garantir o sucesso e efici\u00eancia dessa atividade. Alguns desses desafios incluem:<\/p>\n

Monitoramento constante<\/a><\/h3>\n

\u00c9 essencial monitorar os modelos em produ\u00e7\u00e3o para garantir que eles estejam funcionando corretamente e fornecendo resultados precisos. O monitoramento constante permite identificar desvios de desempenho e tomar medidas corretivas.<\/p>\n

Gerenciamento de recursos<\/a><\/h3>\n

Os modelos de aprendizado de m\u00e1quina podem ser recursos intensivos, exigindo poder computacional significativo para serem executados. Gerenciar de forma eficiente esses recursos \u00e9 essencial para otimizar a utiliza\u00e7\u00e3o dos servidores e garantir uma boa performance do modelo.<\/p>\n

Versionamento e rastreamento<\/a><\/h3>\n

\u00c0 medida que os modelos s\u00e3o atualizados e evoluem, \u00e9 importante ter um sistema de versionamento e rastreamento adequado para garantir que se possa voltar a vers\u00f5es anteriores, caso seja necess\u00e1rio. Isso \u00e9 especialmente importante em casos onde um modelo em produ\u00e7\u00e3o precisa ser revertido para uma vers\u00e3o anterior devido a problemas de desempenho ou outros fatores.<\/p>\n

Implanta\u00e7\u00e3o e escalabilidade<\/a><\/h3>\n

Implementar um novo modelo em produ\u00e7\u00e3o e garantir sua escalabilidade \u00e9 um desafio complexo. \u00c9 necess\u00e1rio garantir que o modelo esteja pronto para atender grandes volumes de dados e usu\u00e1rios sem comprometer sua performance. Al\u00e9m disso, \u00e9 preciso considerar a infraestrutura necess\u00e1ria para implantar o modelo em um ambiente de produ\u00e7\u00e3o.<\/p>\n

Integra\u00e7\u00e3o com sistemas existentes<\/a><\/h3>\n

Muitas vezes, os modelos de aprendizado de m\u00e1quina precisam ser integrados a sistemas existentes em uma empresa. Isso envolve garantir a compatibilidade dos dados e formatos de entrada\/sa\u00edda, al\u00e9m de sincronizar adequadamente as atualiza\u00e7\u00f5es e altera\u00e7\u00f5es nos modelos com o restante do sistema.<\/p>\n

Solucion\u00e7\u00f5es de Machine Learning Ops para o Gerenciamento de Modelos em Produ\u00e7\u00e3o<\/h2>\n

Machine Learning Ops (MLOps) \u00e9 uma abordagem que visa solucionar os desafios mencionados acima e simplificar o gerenciamento de modelos de aprendizado de m\u00e1quina em produ\u00e7\u00e3o. Algumas solu\u00e7\u00f5es e pr\u00e1ticas que podem ser adotadas incluem:<\/p>\n

Automa\u00e7\u00e3o do processo de treinamento e implanta\u00e7\u00e3o<\/h3>\n

Utilizar solu\u00e7\u00f5es que permitem automatizar todo o processo de treinamento e implanta\u00e7\u00e3o de modelos, desde a coleta de dados at\u00e9 a avalia\u00e7\u00e3o do desempenho em produ\u00e7\u00e3o. Isso ajuda a reduzir erros e economizar tempo, al\u00e9m de garantir a rastreabilidade de todas as etapas do processo.<\/p>\n

Monitoramento em tempo real<\/h3>\n

Utilizar ferramentas de monitoramento em tempo real para acompanhar o desempenho dos modelos em produ\u00e7\u00e3o e detectar quaisquer anomalias ou desvios. Com essa abordagem, \u00e9 poss\u00edvel identificar problemas rapidamente e tomar medidas para corrigi-los antes que afetem a qualidade dos resultados.<\/p>\n

Gerenciamento centralizado de modelos<\/h3>\n

Implementar um sistema centralizado para gerenciar todos os modelos em produ\u00e7\u00e3o, permitindo um controle mais eficiente e f\u00e1cil rastreamento das vers\u00f5es dos modelos. Um sistema centralizado facilita tamb\u00e9m a colabora\u00e7\u00e3o entre as equipes envolvidas no desenvolvimento e gerenciamento dos modelos.<\/p>\n

Integra\u00e7\u00e3o com ferramentas de DevOps<\/h3>\n

Integrar as pr\u00e1ticas e ferramentas de MLOps com solu\u00e7\u00f5es e pr\u00e1ticas existentes de DevOps \u00e9 essencial para garantir uma abordagem unificada para o gerenciamento de modelos em produ\u00e7\u00e3o. Isso inclui utilizar ferramentas de controle de vers\u00e3o, automa\u00e7\u00e3o de implanta\u00e7\u00e3o e testes automatizados para garantir a qualidade e consist\u00eancia dos modelos.<\/p>\n

Padroniza\u00e7\u00e3o dos processos<\/h3>\n

Estabelecer padr\u00f5es e melhores pr\u00e1ticas para o gerenciamento de modelos em produ\u00e7\u00e3o, incluindo a defini\u00e7\u00e3o de fluxos de trabalho, documenta\u00e7\u00e3o adequada e procedimentos de suporte. Isso ajuda a garantir que todas as etapas sejam seguidas corretamente, garantindo a consist\u00eancia e confiabilidade dos modelos em produ\u00e7\u00e3o.<\/p>\n

Em resumo, o gerenciamento de modelos de aprendizado de m\u00e1quina em produ\u00e7\u00e3o apresenta desafios espec\u00edficos que podem ser superados com a ado\u00e7\u00e3o de pr\u00e1ticas e solu\u00e7\u00f5es de Machine Learning Ops. Automatizar o processo de treinamento e implanta\u00e7\u00e3o, monitorar em tempo real, padronizar os processos e integrar ferramentas com DevOps s\u00e3o algumas das a\u00e7\u00f5es que podem ser tomadas para simplificar e melhorar o gerenciamento desses modelos. Com uma abordagem robusta de MLOps, as empresas podem garantir um gerenciamento eficiente e um desempenho de modelo consistente em produ\u00e7\u00e3o.<\/p>\n

Desenvolva a sua carreira hoje mesmo! Conhe\u00e7a a Awari<\/a>.<\/p>\n

A Awari \u00e9 uma plataforma de ensino completa que conta com mentorias individuais, cursos com aulas ao vivo e suporte de carreira para voc\u00ea dar seu pr\u00f3ximo passo profissional. Quer aprender mais sobre as t\u00e9cnicas necess\u00e1rias para se tornar um profissional de relev\u00e2ncia e sucesso?<\/p>\n

Conhe\u00e7a nossos cursos<\/a> e desenvolva compet\u00eancias essenciais com jornada personalizada, para desenvolver e evoluir seu curr\u00edculo, o seu pessoal e materiais complementares desenvolvidos por especialistas no mercado!<\/p>\n

<\/body><\/p>\n","protected":false},"excerpt":{"rendered":"

Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deployment and integration, discover the solutions and best practices for efficient model management. Simplify your machine learning operations and ensure consistent performance with MLOps. (167 characters)<\/p>\n","protected":false},"author":9,"featured_media":0,"comment_status":"open","ping_status":"open","sticky":false,"template":"","format":[186],"meta":{"inline_featured_image":false,"footnotes":""},"categories":[229],"tags":[],"trilha":[],"class_list":["post-123674","post","type-post","status-publish","format-standard","hentry","category-skills","format-artigos"],"acf":[],"yoast_head":"\nMachine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil<\/title>\n<meta name=\"description\" content=\"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...\" \/>\n<meta name=\"robots\" content=\"noindex, follow, max-snippet:-1, max-image-preview:large, max-video-preview:-1\" \/>\n<meta property=\"og:locale\" content=\"pt_BR\" \/>\n<meta property=\"og:type\" content=\"article\" \/>\n<meta property=\"og:title\" content=\"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil\" \/>\n<meta property=\"og:description\" content=\"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...\" \/>\n<meta property=\"og:url\" content=\"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/\" \/>\n<meta property=\"og:site_name\" content=\"Fluency.io Brasil\" \/>\n<meta property=\"article:published_time\" content=\"2023-06-28T19:24:19+00:00\" \/>\n<meta property=\"article:modified_time\" content=\"2023-07-26T18:48:23+00:00\" \/>\n<meta name=\"twitter:card\" content=\"summary_large_image\" \/>\n<meta name=\"twitter:label1\" content=\"Escrito por\" \/>\n\t<meta name=\"twitter:data1\" content=\"kaue\" \/>\n\t<meta name=\"twitter:label2\" content=\"Est. tempo de leitura\" \/>\n\t<meta name=\"twitter:data2\" content=\"4 minutos\" \/>\n<script type=\"application\/ld+json\" class=\"yoast-schema-graph\">{\"@context\":\"https:\\\/\\\/schema.org\",\"@graph\":[{\"@type\":\"Article\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/#article\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/\"},\"author\":{\"name\":\"kaue\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/#\\\/schema\\\/person\\\/7b3b2b50ba17b7f2ad0cce0a40bfa00a\"},\"headline\":\"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o\",\"datePublished\":\"2023-06-28T19:24:19+00:00\",\"dateModified\":\"2023-07-26T18:48:23+00:00\",\"mainEntityOfPage\":{\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/\"},\"wordCount\":811,\"commentCount\":0,\"articleSection\":[\"Skills\"],\"inLanguage\":\"pt-BR\",\"potentialAction\":[{\"@type\":\"CommentAction\",\"name\":\"Comment\",\"target\":[\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/#respond\"]}]},{\"@type\":\"WebPage\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/\",\"url\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/\",\"name\":\"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil\",\"isPartOf\":{\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/#website\"},\"datePublished\":\"2023-06-28T19:24:19+00:00\",\"dateModified\":\"2023-07-26T18:48:23+00:00\",\"author\":{\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/#\\\/schema\\\/person\\\/7b3b2b50ba17b7f2ad0cce0a40bfa00a\"},\"description\":\"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...\",\"breadcrumb\":{\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/#breadcrumb\"},\"inLanguage\":\"pt-BR\",\"potentialAction\":[{\"@type\":\"ReadAction\",\"target\":[\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/\"]}]},{\"@type\":\"BreadcrumbList\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/blog\\\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\\\/#breadcrumb\",\"itemListElement\":[{\"@type\":\"ListItem\",\"position\":1,\"name\":\"In\u00edcio\",\"item\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/\"},{\"@type\":\"ListItem\",\"position\":2,\"name\":\"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o\"}]},{\"@type\":\"WebSite\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/#website\",\"url\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/\",\"name\":\"Fluency.io Brasil\",\"description\":\"\",\"potentialAction\":[{\"@type\":\"SearchAction\",\"target\":{\"@type\":\"EntryPoint\",\"urlTemplate\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/?s={search_term_string}\"},\"query-input\":{\"@type\":\"PropertyValueSpecification\",\"valueRequired\":true,\"valueName\":\"search_term_string\"}}],\"inLanguage\":\"pt-BR\"},{\"@type\":\"Person\",\"@id\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/#\\\/schema\\\/person\\\/7b3b2b50ba17b7f2ad0cce0a40bfa00a\",\"name\":\"kaue\",\"image\":{\"@type\":\"ImageObject\",\"inLanguage\":\"pt-BR\",\"@id\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g\",\"url\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g\",\"contentUrl\":\"https:\\\/\\\/secure.gravatar.com\\\/avatar\\\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g\",\"caption\":\"kaue\"},\"url\":\"https:\\\/\\\/homolog.fluency.io\\\/br\\\/author\\\/kaue\\\/\"}]}<\/script>\n<!-- \/ Yoast SEO plugin. -->","yoast_head_json":{"title":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil","description":"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...","robots":{"index":"noindex","follow":"follow","max-snippet":"max-snippet:-1","max-image-preview":"max-image-preview:large","max-video-preview":"max-video-preview:-1"},"og_locale":"pt_BR","og_type":"article","og_title":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil","og_description":"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...","og_url":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/","og_site_name":"Fluency.io Brasil","article_published_time":"2023-06-28T19:24:19+00:00","article_modified_time":"2023-07-26T18:48:23+00:00","twitter_card":"summary_large_image","twitter_misc":{"Escrito por":"kaue","Est. tempo de leitura":"4 minutos"},"schema":{"@context":"https:\/\/schema.org","@graph":[{"@type":"Article","@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/#article","isPartOf":{"@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/"},"author":{"name":"kaue","@id":"https:\/\/homolog.fluency.io\/br\/#\/schema\/person\/7b3b2b50ba17b7f2ad0cce0a40bfa00a"},"headline":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o","datePublished":"2023-06-28T19:24:19+00:00","dateModified":"2023-07-26T18:48:23+00:00","mainEntityOfPage":{"@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/"},"wordCount":811,"commentCount":0,"articleSection":["Skills"],"inLanguage":"pt-BR","potentialAction":[{"@type":"CommentAction","name":"Comment","target":["https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/#respond"]}]},{"@type":"WebPage","@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/","url":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/","name":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o - Fluency.io Brasil","isPartOf":{"@id":"https:\/\/homolog.fluency.io\/br\/#website"},"datePublished":"2023-06-28T19:24:19+00:00","dateModified":"2023-07-26T18:48:23+00:00","author":{"@id":"https:\/\/homolog.fluency.io\/br\/#\/schema\/person\/7b3b2b50ba17b7f2ad0cce0a40bfa00a"},"description":"Learn how to successfully manage machine learning models in production with machine learning ops (MLOps). From monitoring and resource management to deploy...","breadcrumb":{"@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/#breadcrumb"},"inLanguage":"pt-BR","potentialAction":[{"@type":"ReadAction","target":["https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/"]}]},{"@type":"BreadcrumbList","@id":"https:\/\/homolog.fluency.io\/br\/blog\/machine-learning-ops-gerenciamento-de-modelos-de-aprendizado-de-maquina-em-producao\/#breadcrumb","itemListElement":[{"@type":"ListItem","position":1,"name":"In\u00edcio","item":"https:\/\/homolog.fluency.io\/br\/"},{"@type":"ListItem","position":2,"name":"Machine Learning Ops: Gerenciamento de Modelos de Aprendizado de M\u00e1quina em Produ\u00e7\u00e3o"}]},{"@type":"WebSite","@id":"https:\/\/homolog.fluency.io\/br\/#website","url":"https:\/\/homolog.fluency.io\/br\/","name":"Fluency.io Brasil","description":"","potentialAction":[{"@type":"SearchAction","target":{"@type":"EntryPoint","urlTemplate":"https:\/\/homolog.fluency.io\/br\/?s={search_term_string}"},"query-input":{"@type":"PropertyValueSpecification","valueRequired":true,"valueName":"search_term_string"}}],"inLanguage":"pt-BR"},{"@type":"Person","@id":"https:\/\/homolog.fluency.io\/br\/#\/schema\/person\/7b3b2b50ba17b7f2ad0cce0a40bfa00a","name":"kaue","image":{"@type":"ImageObject","inLanguage":"pt-BR","@id":"https:\/\/secure.gravatar.com\/avatar\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g","url":"https:\/\/secure.gravatar.com\/avatar\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g","contentUrl":"https:\/\/secure.gravatar.com\/avatar\/bdd3958fa53019cfd8f789c0a49a730e7ba40a1d20cb42c9ced7646285842479?s=96&d=mm&r=g","caption":"kaue"},"url":"https:\/\/homolog.fluency.io\/br\/author\/kaue\/"}]}},"_links":{"self":[{"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/posts\/123674","targetHints":{"allow":["GET"]}}],"collection":[{"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/posts"}],"about":[{"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/types\/post"}],"author":[{"embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/users\/9"}],"replies":[{"embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/comments?post=123674"}],"version-history":[{"count":0,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/posts\/123674\/revisions"}],"wp:attachment":[{"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/media?parent=123674"}],"wp:term":[{"taxonomy":"category","embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/categories?post=123674"},{"taxonomy":"post_tag","embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/tags?post=123674"},{"taxonomy":"format","embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/format?post=123674"},{"taxonomy":"trilha","embeddable":true,"href":"https:\/\/homolog.fluency.io\/br\/wp-json\/wp\/v2\/trilha?post=123674"}],"curies":[{"name":"wp","href":"https:\/\/api.w.org\/{rel}","templated":true}]}}