Notas de lançamento de Snowflake ML Python¶

Novos recursos¶

Novos recursos da Feature Store:

• Suporte à agregação baseada em blocos usando uma nova API Feature para computação correta de recursos de série temporal eficiente e pontual usando blocos pré-calculados.

Novos recursos de registro do modelo:

• Os modelos SentenceTransformer agora oferecem suporte à inferência automática de assinatura. Ao registrar um modelo SentenceTransformer, sample_input_data é opcional. A assinatura é inferida automaticamente da dimensão de incorporação do modelo quando os dados de entrada de amostra não são fornecidos. Os métodos encode, encode_query, encode_document, encode_queries e encode_documents são compatíveis.

  import sentence_transformers
  from snowflake.ml.registry import Registry
  
  # Create model
  model = sentence_transformers.SentenceTransformer("all-MiniLM-L6-v2")
  
  # Log model without sample_input_data - signature is auto-inferred
  registry = Registry(session)
  mv = registry.log_model(
      model=model,
      model_name="my_sentence_transformer",
      version_name="v1",
  )
  
  # Run inference with auto-inferred signature (input: "text", output: "output")
  import pandas as pd
  result = mv.run(pd.DataFrame({"text": ["Hello world"]}))
  

  Copy

Novos recursos¶

Novos recursos de trabalhos ML:

• Os trabalhos de ML agora oferecem suporte a Python 3.11 e Python 3.12. Os trabalhos selecionam automaticamente um ambiente de tempo de execução que corresponde à versão do Python do cliente.

Correções de bugs¶

Correções de bugs no registro do modelo:

• Saída vazia nos modelos de classificação de token do HuggingFace (reconhecimento de entidade nomeada) não causam mais falhas.

Correções de bugs do serviço de modelos:

• Os status de contêineres agora são relatados corretamente e não devem ficar em branco.

Novos recursos¶

Novos recursos de registro do modelo:

• Agora é possível registrar remotamente um modelo de pipeline de transformador usando um trabalho do Snowpark Container Services (SPCS).

  # create reference to the model
  model = huggingface.TransformersPipeline(
      model="TinyLlama/TinyLlama-1.1B-Chat-v1.0",
      task="text-generation",
  )
  
  # Remotely log the model, a SPCS job will run async and log the model
  mv = registry.log_model(
      model=model,
      model_name="tinyllama_remote_log",
      target_platforms=["SNOWPARK_CONTAINER_SERVICES"],
      signatures=openai_signatures.OPENAI_CHAT_SIGNATURE,
  )
  

  Copy

Mudanças de comportamento¶

Mudanças no comportamento dos trabalhos de ML:

• O comportamento do parâmetro additional_payloads está sendo alterado. Use o argumento imports para declarar dependências adicionais, como arquivos ZIP e módulos Python. Diretórios locais e arquivos Python são compactados automaticamente, e o layout interno é determinado pelo caminho de importação especificado. O caminho de importação se aplica somente a diretórios locais, arquivos Python e arquivos Python preparados; ele não tem efeito sobre outros tipos de importação. Ao referenciar arquivos em uma área de preparação, somente arquivos individuais são permitidos, não diretórios.

Mudanças no comportamento do rastreamento de experimentos:

• ExperimentTracking agora é uma classe singleton.

Correções de bugs¶

Correções de bugs do rastreamento de experimentos:

• Quando o limite de tamanho de metadados de execução é atingido em log_metrics ou log_params, agora é emitido um aviso em vez de gerar uma exceção.

Correções de bugs no registro do modelo:

• ModelVersion.run agora gera um ValueError se o modelo é somente SPCS e service_name não é fornecido.

Novos recursos em versão preliminar¶

• O método create_service agora aceita o argumento booliano autocapture para indicar se os dados de inferência são capturados automaticamente.

Novos recursos da versão¶

Novos recursos de registro do modelo:

• A nova classe snowflake.ml.model.models.huggingface.TransformersPipeline visa a substituir snowflake.ml.model.models.huggingface_pipeline.HuggingfacePipelineModel, embora a classe mais antiga ainda não esteja obsoleta. A nova classe reconhece assinaturas de modelo de tarefas comuns para que você não precise especificá-las manualmente. As tarefas compatíveis no momento são:

  • fill-mask

  • question-answering

  • summarization

  • table-question-answering

  • text2text-generation

  • text-classification (alias sentiment-analysis)

  • text-generation

  • token-classification (alias ner)

  • translation

  • translation_xx_to_yy

  • zero-shot-classification (permite registrar modelos sem os carregar na memória)

• A API list_services agora mostra um ponto de extremidade interno que pode ser chamado de outro nó ou notebook do SPCS sem integração de aplicativos empresariais. Ela também indica se a captura automática é habilitada para cada serviço.

Novos recursos DataConnector:

• O novo método to_huggingface_dataset converte os dados do Snowflake em conjuntos de dados HuggingFace. Oferece suporte a Dataset (streaming=False) na memória e IterableDataset (streaming=True) de streaming.

Avisos de descontinuação¶

• A classe snowflake.ml.model.models.huggingface_pipeline.HuggingfacePipelineModel foi descontinuada e será removido em uma versão futura.