Etusivu Tutki Apua
Rekisteröidy Kirjaudu sisään
marx
/
llama-recipes
1
0
Fork 0
Tiedostot Ongelmat 0 Pull-pyynnöt 0 Wiki
Selaa lähdekoodia

Reorg inference throughput folder structure (#404)

Hamid Shojanazeri 11 kuukautta sitten
vanhempi
d6eb83f6c5 367e4869ac
commit
6a7478a6aa
10 muutettua tiedostoa jossa 0 lisäystä ja 0 poistoa
Jaettu näkymä Näytä diff tilastot
  1. 0 0
      recipes/benchmarks/inference_throughput/README.md
  2. 0 0
      recipes/benchmarks/inference_throughput/on-prem/README.md
  3. 0 0
      recipes/benchmarks/inference_throughput/on-prem/vllm/chat_vllm_benchmark.py
  4. 0 0
      recipes/benchmarks/inference_throughput/on-prem/vllm/input.jsonl
  5. 0 0
      recipes/benchmarks/inference_throughput/on-prem/vllm/parameters.json
  6. 0 0
      recipes/benchmarks/inference_throughput/on-prem/vllm/pretrained_vllm_benchmark.py
  7. 0 0
      recipes/benchmarks/inference_throughput/tokenizer/special_tokens_map.json
  8. 0 0
      recipes/benchmarks/inference_throughput/tokenizer/tokenizer.json
  9. 0 0
      recipes/benchmarks/inference_throughput/tokenizer/tokenizer.model
  10. 0 0
      recipes/benchmarks/inference_throughput/tokenizer/tokenizer_config.json

recipes/benchmarks/inference/README.md → recipes/benchmarks/inference_throughput/README.md
Näytä tiedosto


recipes/benchmarks/inference/on-prem/README.md → recipes/benchmarks/inference_throughput/on-prem/README.md
Näytä tiedosto


recipes/benchmarks/inference/on-prem/vllm/chat_vllm_benchmark.py → recipes/benchmarks/inference_throughput/on-prem/vllm/chat_vllm_benchmark.py
Näytä tiedosto


recipes/benchmarks/inference/on-prem/vllm/input.jsonl → recipes/benchmarks/inference_throughput/on-prem/vllm/input.jsonl
Näytä tiedosto


recipes/benchmarks/inference/on-prem/vllm/parameters.json → recipes/benchmarks/inference_throughput/on-prem/vllm/parameters.json
Näytä tiedosto


recipes/benchmarks/inference/on-prem/vllm/pretrained_vllm_benchmark.py → recipes/benchmarks/inference_throughput/on-prem/vllm/pretrained_vllm_benchmark.py
Näytä tiedosto


recipes/benchmarks/inference/tokenizer/special_tokens_map.json → recipes/benchmarks/inference_throughput/tokenizer/special_tokens_map.json
Näytä tiedosto


recipes/benchmarks/inference/tokenizer/tokenizer.json → recipes/benchmarks/inference_throughput/tokenizer/tokenizer.json
Näytä tiedosto


recipes/benchmarks/inference/tokenizer/tokenizer.model → recipes/benchmarks/inference_throughput/tokenizer/tokenizer.model
Näytä tiedosto


recipes/benchmarks/inference/tokenizer/tokenizer_config.json → recipes/benchmarks/inference_throughput/tokenizer/tokenizer_config.json
Näytä tiedosto