Как преобразовать любую модель HuggingFace в формат файла gguf?

21 ноября, 2025 hifi-audio.ru 0

Hugging Face стал синонимом современных моделей машинного обучения, особенно в области обработки естественного языка. С другой стороны, формат файлов GGUF, хотя и менее известен, служит для конкретных целей, требующих преобразования

Смешивание разных моделей LLM в новую модель

18 августа, 2025 hifi-audio.ru 0

Для смешивания моделей используем mergekit.  Его установка — запустим консоль (git должен уже быть установлен): git clone https://github.com/arcee-ai/mergekit.git Создадим виртуальное окружение, чтобы небыло несовместимости с версиями модулей уже установленных в

Модель HuggingFace в GGUF

18 августа, 2025 hifi-audio.ru 0

Конвертация нейросетевой модели LLM c HuggingFace в формат GGUF. Для этого требуется установка llama.cpp: откроем консоль, в ней выполним комманду (git должен быть ранее установлен): git clone https://github.com/ggerganov/llama.cpp.git Создадим виртуальную

Python. Время time

8 апреля, 2025 hifi-audio.ru 0

Получить значение времени можно через модуль time import time Допустим, что хотим узнать время выполнения функции def f1(a,b): return a**b Запомним значение времени перед началом выполнения функции: start_time = time.time()