Instructions to use Felipe2231/aurorax37 with libraries, inference providers, notebooks, and local apps. Follow these links to get started.
- Libraries
- Transformers
How to use Felipe2231/aurorax37 with Transformers:
# Use a pipeline as a high-level helper from transformers import pipeline pipe = pipeline("text-generation", model="Felipe2231/aurorax37")# Load model directly from transformers import AutoModel model = AutoModel.from_pretrained("Felipe2231/aurorax37", dtype="auto") - Notebooks
- Google Colab
- Kaggle
- Local Apps
- vLLM
How to use Felipe2231/aurorax37 with vLLM:
Install from pip and serve model
# Install vLLM from pip: pip install vllm # Start the vLLM server: vllm serve "Felipe2231/aurorax37" # Call the server using curl (OpenAI-compatible API): curl -X POST "http://localhost:8000/v1/completions" \ -H "Content-Type: application/json" \ --data '{ "model": "Felipe2231/aurorax37", "prompt": "Once upon a time,", "max_tokens": 512, "temperature": 0.5 }'Use Docker
docker model run hf.co/Felipe2231/aurorax37
- SGLang
How to use Felipe2231/aurorax37 with SGLang:
Install from pip and serve model
# Install SGLang from pip: pip install sglang # Start the SGLang server: python3 -m sglang.launch_server \ --model-path "Felipe2231/aurorax37" \ --host 0.0.0.0 \ --port 30000 # Call the server using curl (OpenAI-compatible API): curl -X POST "http://localhost:30000/v1/completions" \ -H "Content-Type: application/json" \ --data '{ "model": "Felipe2231/aurorax37", "prompt": "Once upon a time,", "max_tokens": 512, "temperature": 0.5 }'Use Docker images
docker run --gpus all \ --shm-size 32g \ -p 30000:30000 \ -v ~/.cache/huggingface:/root/.cache/huggingface \ --env "HF_TOKEN=<secret>" \ --ipc=host \ lmsysorg/sglang:latest \ python3 -m sglang.launch_server \ --model-path "Felipe2231/aurorax37" \ --host 0.0.0.0 \ --port 30000 # Call the server using curl (OpenAI-compatible API): curl -X POST "http://localhost:30000/v1/completions" \ -H "Content-Type: application/json" \ --data '{ "model": "Felipe2231/aurorax37", "prompt": "Once upon a time,", "max_tokens": 512, "temperature": 0.5 }' - Docker Model Runner
How to use Felipe2231/aurorax37 with Docker Model Runner:
docker model run hf.co/Felipe2231/aurorax37
Modelo aurorax37
Este é o modelo aurorax37, desenvolvido por Felipe Marcos de Abreu Aquino (Felipe2231).
Descrição Geral
O aurorax37 é um modelo de linguagem de grande escala (LLM) focado em tarefas de Geração de Texto em Português. Ele foi treinado para ser uma ferramenta versátil para diversas aplicações, como:
- Geração de conteúdo criativo.
- Resumo de textos.
- Resposta a perguntas.
- Assistência em codificação (se aplicável).
Como Usar
Para utilizar este modelo com a biblioteca transformers do Hugging Face, você pode seguir o exemplo abaixo:
from transformers import AutoModelForCausalLM, AutoTokenizer
model_id = "Felipe2231/aurorax37"
# Carregar o tokenizer e o modelo
tokenizer = AutoTokenizer.from_pretrained(model_id)
model = AutoModelForCausalLM.from_pretrained(model_id)
# Definir o prompt
prompt = "O que é inteligência artificial e como ela funciona?"
# Tokenizar o prompt
input_ids = tokenizer.encode(prompt, return_tensors="pt")
# Gerar a resposta
output = model.generate(input_ids, max_length=200, num_return_sequences=1)
# Decodificar e imprimir o resultado
print(tokenizer.decode(output[0], skip_special_tokens=True))
Limitações e Viés
Como todo modelo de linguagem, o aurorax37 pode apresentar vieses nos dados de treinamento. É importante que os usuários testem e avaliem o modelo para o seu caso de uso específico.
Licença
Este modelo está licenciado sob a Licença MIT. Por favor, consulte o arquivo LICENSE para mais detalhes.
Contato
Para dúvidas ou colaborações, entre em contato com Felipe Marcos de Abreu Aquino.
docker model run hf.co/Felipe2231/aurorax37