Max Ryabinin 1ebd88ae7b Optimize the Falcon block for inference (#500) před 1 rokem
..
bootstrap.id 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
conftest.py 668b736031 Fix logging: do not duplicate lines, enable colors in Colab (#156) před 2 roky
server2.id 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
test_aux_functions.py 568f21dc3b Add customizable input tensors (#445) před 2 roky
test_block_exact_match.py 056f22515a Prioritize short inference, unmerge pools for long inference (#458) před 2 roky
test_cache.py 26ebbfe8f0 Support macOS (#477) před 2 roky
test_chained_calls.py 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
test_dtype.py cb3f018f9f Add LLaMA support (#323) před 2 roky
test_full_model.py a26559ff65 Fix `.generate(input_ids=...)` (#485) před 2 roky
test_optimized_layers.py 1ebd88ae7b Optimize the Falcon block for inference (#500) před 1 rokem
test_peft.py b9f0a5467f Support peft LoRA adapters (#335) před 2 roky
test_priority_pool.py 26ebbfe8f0 Support macOS (#477) před 2 roky
test_remote_sequential.py a26559ff65 Fix `.generate(input_ids=...)` (#485) před 2 roky
test_sequence_manager.py 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
test_server_stats.py 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
test_tensor_parallel.py 8c546d988a Test Llama, rebalancing, throughput eval, and all CLI scripts (#452) před 2 roky
test_utils.py b9f0a5467f Support peft LoRA adapters (#335) před 2 roky