saya menggunakan skrip rclone di google colab, tapi tidak ada progress bar yang di…
- User
saya menggunakan skrip rclone di google colab, tapi tidak ada progress bar yang di tampilkan, coba periksa dan modifikasi skrip berikut ini
- Assistant
Baik, saya bisa membantu memeriksa dan memodifikasi skrip Rclone Anda di Google Colab. Progress bar dapat ditampilkan dengan menggunakan argumen khusus atau dengan menyesuaikan output log.
Berikut adalah contoh skrip penggunaan Rclone di Google Colab dengan progress bar:
-
Instalasi Rclone:
!curl https://rclone.org/install.sh | sudo bash -
Konfigurasi Rclone:
Jika Anda belum mengonfigurasi Rclone sebelumnya, Anda dapat menggunakan perintah berikut. Ini akan meminta Anda untuk memasukkan informasi konfigurasi Anda:
!rclone config -
Skrip untuk menampilkan progress bar:
Untuk menampilkan progress bar, kita bisa menggunakan
progressdi dalam perintahrclone. Berikut adalah skrip modifikasinya:import os # Pastikan rclone terinstal !curl https://rclone.org/install.sh | sudo bash # Mount Google Drive menggunakan FUSE os.makedirs("/content/drive", exist_ok=True) # Menambahkan flag --progress untuk menampilkan progress bar !rclone mount your_remote:path/to/remote /content/drive & -v --progress # Jangan lupa ganti "your_remote:path/to/remote" dengan konfigurasi dan path AndaCatatan: Simbol
&digunakan untuk menjalankan proses mount di background, memungkinkan Anda untuk melakukan operasi lain pada Google Drive yang sudah di-mount. Tetapi dengan ini, progress bar mungkin tidak bekerja seperti yang diharapkan. Sebagai alternatif, Anda bisa menggunakan operasi copy atau sync dengan progress. -
Contoh operasi salin dengan progress:
import os # Pastikan rclone terinstal !curl https://rclone.org/install.sh | sudo bash # Konfigurasi rclone saya berasumsi sudah ada src = "your_remote:source_path" dst = "/content/destination_path" # Operasi salin dengan progress !rclone copy {src} {dst} --progressJangan lupa untuk mengganti
your_remote:source_pathdan/content/destination_pathdengan pengaturan remote dan path yang tepat.
Dengan skrip tersebut, Anda harus dapat melihat progress bar selama operasi Rclone. Jika masih ada masalah, beri tahu saya detail spesifiknya sehingga saya bisa membantu lebih lanjut.
-
- User
berikut skrip yang perlu di modif
Source = "/content/TEST.mp4" #@param {type:"string"} Destination = "barcu:DEEL" #@param {type:"string"}
import os import IPython from IPython.display import HTML, clear_output
os.environ["sourceC"] = Source os.environ["destinationC"] = Destination os.environ["progressC"] = "--progress" os.environ["transfersC"] = "--transfers "+str(Transfers) os.environ["checkersC"] = "--checkers "+str(Checkers) os.environ["bufferC"] = "--buffer-size 128M"
if Do_not_cross_filesystem_boundaries == True: os.environ["nocrossfilesystemC"] = "--one-file-system" else: os.environ["nocrossfilesystemC"] = ""
if Do_not_update_modtime_if_files_are_identical == True: os.environ["noupdatemodtimeC"] = "--no-update-modtime" else: os.environ["noupdatemodtimeC"] = ""
if Large_amount_of_files_optimization == True: os.environ["filesoptimizeC"] = "--fast-list" else: os.environ["filesoptimizeC"] = ""
if Google_Drive_optimization == True: os.environ["driveoptimizeC"] = "--drive-chunk-size 256M --drive-acknowledge-abuse --drive-keep-revision-forever" else: os.environ["driveoptimizeC"] = ""
!rclone --config=/root/.config/rclone/rclone.conf move "destinationC" checkersC noupdatemodtimeC filesoptimizeC progressC
- Assistant
Terima kasih untuk skrip yang Anda berikan. Saya akan memodifikasinya agar progress bar muncul selama transfer file menggunakan Rclone di Google Colab.
Berikut adalah skrip Rclone yang telah dimodifikasi untuk menampilkan progress bar:
Source = "/content/TEST.mp4" # @param {type:"string"} Destination = "barcu:DEEL" # @param {type:"string"} Transfers = 4 # @param {type:"integer"} Checkers = 8 # @param {type:"integer"} Do_not_cross_filesystem_boundaries = False # @param {type:"boolean"} Do_not_update_modtime_if_files_are_identical = False # @param {type:"boolean"} Large_amount_of_files_optimization = False # @param {type:"boolean"} Google_Drive_optimization = False # @param {type:"boolean"} import os # Set environment variables for Rclone os.environ["sourceC"] = Source os.environ["destinationC"] = Destination os.environ["progressC"] = "--progress" os.environ["transfersC"] = "--transfers " + str(Transfers) os.environ["checkersC"] = "--checkers " + str(Checkers) os.environ["bufferC"] = "--buffer-size 128M" # Optional flags based on parameters optional_flags = [] if Do_not_cross_filesystem_boundaries: optional_flags.append("--one-file-system") if Do_not_update_modtime_if_files_are_identical: optional_flags.append("--no-update-modtime") if Large_amount_of_files_optimization: optional_flags.append("--fast-list") if Google_Drive_optimization: optional_flags.append("--drive-chunk-size 256M") optional_flags.append("--drive-acknowledge-abuse") optional_flags.append("--drive-keep-revision-forever") # Join all optional flags optional_flags_str = ' '.join(optional_flags) # Execute Rclone command with all settings rclone_command = f"rclone --config=/root/.config/rclone/rclone.conf move \"$sourceC\" \"$destinationC\" $transfersC $checkersC $bufferC $progressC {optional_flags_str}" print(f"Executing: {rclone_command}") os.system(rclone_command)Ulasan perubahan:
- Menyetel environment variables sesuai dengan input.
sourceC,destinationC,transfersC,checkersC,bufferC, danprogressC.
- Menambahkan pengecekan boolean:
- Untuk setiap boolean flag (
Do_not_cross_filesystem_boundaries,Do_not_update_modtime_if_files_are_identical,Large_amount_of_files_optimization, danGoogle_Drive_optimization), saya menambahkan flag opsional ke dalam daftaroptional_flags.
- Untuk setiap boolean flag (
- Menggabungkan semua flag opsional menjadi satu string:
optional_flags_str = ' '.join(optional_flags)
- Membangun perintah Rclone dengan semua flag:
rclone_commandini akan berisi perintah lengkap yang siap dijalankan.
- Menjalankan perintah Rclone:
- Menggunakan
os.system(rclone_command)untuk mengeksekusi perintah.
- Menggunakan
Skript ini akan menampilkan progres bar selama proses transfer dan juga akan memungkinkan Anda mengatur berbagai parameter sesuai kebutuhan. Semoga ini membantu! Jika ada pertanyaan lebih lanjut, jangan ragu untuk bertanya.
- Menyetel environment variables sesuai dengan input.