Python
-
[Python] Selenium Little Known Tips 你可能不知道的 Selenium 技巧
There are some Selenium functions or techniques that I haven’t used before and I don’t know how to write them ...
-
[PyTorch] 使用 torch.distributed 在單機多 GPU 上進行分散式訓練
Finetune 語言模型所需要的 GPU memory 比較多，往往會需要我們能夠利用到多顆 GPU 的資源。今天這篇文章會說明 DataParallel 和 DistributedDataParallel + Dis...
-
經典 NLP 任務標籤生成：串接非官方 ChatGPT API
這篇文章紀錄我串接非官方 ChatGPT API 「試圖」取得 NLP 資訊抽取任務標籤的過程。結論是...
-
【Python 網路爬蟲】克服網站反爬蟲機制的 8 種做法
隨著公開資料使用的普及化，網站對自家資料的保護也越來越嚴謹。開發者如何在符合道德和不觸發網站擋爬機制的同時，合法取得所需的公開資訊，是當今資料技術開發人員不可或缺的技能點之一。 (I) 發送 Request 時帶上 He...
-
【Python】複製一份 conda 環境的各種方式
使用 .yml 檔案 將當前環境設置輸出為 environment.yml ，再用來創建配置一致的新環境 更新現有環境 在 environment.yml 中對 pip 安裝指令加參數 [ref] 使用 .txt 檔案 ...
-
【除錯紀錄】MAC 更新後 git 指令出現 xcrun: error
更新 Mac 到 12.3.1 後，日常使用 git 進行版控時，出現以下錯誤訊息： 解法是要安裝/升級 XCode command line tools 畫面跳出 按下「安裝」> 「同意」，等待完成就可以正常使用...
