mirror of
https://github.com/wassname/SimPO.git
synced 2026-08-09 11:40:39 +08:00
31 KiB
31 KiB
In [ ]:
from huggingface_hub import HfApi
api = HfApi()
In [5]:
api.create_repo(
# folder_path="/workspace/checkpoints_new/llama-3-2-1b-sft",
repo_id="wassname/llama-3-2-1b-sft",
repo_type="model",
)Out [5]:
RepoUrl('https://huggingface.co/wassname/llama-3-2-1b-sft', endpoint='https://huggingface.co', repo_type='model', repo_id='wassname/llama-3-2-1b-sft')In [6]:
api.upload_folder(
folder_path="/workspace/checkpoints_new/llama-3-2-1b-sft",
repo_id="wassname/llama-3-2-1b-sft",
repo_type="model",
)Out [6]:
Upload 10 LFS files: 0%| | 0/10 [00:00<?, ?it/s] [A[A [A[A[A [A[A[A[A [A [A[A scheduler.pt: 100%|██████████| 1.06k/1.06k [00:00<00:00, 3.81kB/s] rng_state.pth: 100%|██████████| 14.2k/14.2k [00:00<00:00, 49.7kB/s] zero_pp_rank_0_mp_rank_00_model_states.pt: 100%|██████████| 76.3k/76.3k [00:00<00:00, 221kB/s] [A[A [A[A [A [A[A[A [A[A[A[A [A training_args.bin: 100%|██████████| 7.03k/7.03k [00:00<00:00, 39.2kB/s] [A [A[A[A[A [A [A[A[A [A[A [A[A[A[A [A [A[A[A [A[A[A [A[A [A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A [A[A[A[A tokenizer.json: 100%|██████████| 17.2M/17.2M [00:01<00:00, 9.38MB/s] tokenizer.json: 100%|██████████| 17.2M/17.2M [00:01<00:00, 11.4MB/s] [A[A[A[A [A [A[A training_args.bin: 100%|██████████| 7.03k/7.03k [00:00<00:00, 30.1kB/s] [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A [A[A[A[A [A[A[A[A model.safetensors: 100%|██████████| 2.47G/2.47G [01:13<00:00, 33.7MB/s] [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A [A[A model.safetensors: 100%|██████████| 2.47G/2.47G [01:18<00:00, 31.5MB/s] bf16_zero_pp_rank_0_mp_rank_00_optim_states.pt: 100%|██████████| 14.8G/14.8G [06:58<00:00, 35.5MB/s] Upload 10 LFS files: 100%|██████████| 10/10 [06:58<00:00, 41.90s/it]
CommitInfo(commit_url='https://huggingface.co/wassname/llama-3-2-1b-sft/commit/07f81f552794458685788579cc84929475422cf3', commit_message='Upload folder using huggingface_hub', commit_description='', oid='07f81f552794458685788579cc84929475422cf3', pr_url=None, repo_url=RepoUrl('https://huggingface.co/wassname/llama-3-2-1b-sft', endpoint='https://huggingface.co', repo_type='model', repo_id='wassname/llama-3-2-1b-sft'), pr_revision=None, pr_num=None)In [ ]:
|