Select Page
Stable Diffusion 核心套件更新整理

Stable Diffusion 核心套件更新整理

Stable Diffusion 最近太火紅,是好處也是壞處,好處是更新的速度超快,也代表進步的超快,壞處是每次更新,都需要工程師介入居多,複雜的設定,難懂的語言(只有工程師能懂),都阻礙著更新的進步,這邊用白話文分享如何更新關鍵資源

torch 1.13.1 -> torch 2.0.0

當你跑 run.bat 的時候會出現以下訊息,告訴你應該要申請 torch 了,升級的方法是在執行 webui.bat 的時候,加入 –reinstall-torch,觸發程式去更新 torch

也可以在 lauch.py 中修改 COMMANDLINE_ARGS 加入 –reinstall-torch

@echo off

set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=--reinstall-torch

call webui.bat

重新執行 run.bat 後就會看到開始更新了

更新 xformers

更新 xformers 與更新 torch 類似

我們一樣修改 COMMANDLINE_ARGS 加入 –reinstall-xformers ,然後重新執行 run.bat ,就會啟動更新程序

@echo off

set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=--reinstall-xformers

call webui.bat

更新後的錯誤處理方法

若是更新後啟動失敗,通常是沒 Torch 無法使用 GPU ,那就要加入指令 COMMANDLINE_ARGS=–skip-torch-cuda-test

@echo off

set PYTHON=
set GIT=
set VENV_DIR=
set COMMANDLINE_ARGS=--skip-torch-cuda-test

call webui.bat

AI-繪圖總整理-StableDiffusion – 雨 (rain.tips)

Midijourney 的創業故事

Midijourney 的創業故事

Midijourney 最近推出了V5,比較之前的模型,更多了寫實的風格,不變的是一樣好用和美,繪圖能力出色是它們最大的特點,也讓我對他們後面的創業故事非常的感興趣,員工多少人?創業動機?能賺多少錢?

Midjourney Emblem.png

創業動機,人類想像力的延伸

創辦人大衛·霍爾茨,原先他是我一直很愛用的一個工具 Leap Motion 的創辦人,後來將公司賣給了 Ultrahaptics 之後就創立了 Midijourney ,公司總共11人

  • 1創辦人
  • 8 RD
  • 1 法務
  • 1 財務

2022-2023年營收卻可以超過1億美元

技術能力的抉擇

因為創辦人之前的背景,所以覺得他要的解決人與機器間的互動問題,並且快速地推出市場,所以做了幾個關鍵性的決定

  • 不用APP,不用網頁,直接在Discord上建立機器人,也符合 AI 的特色,有一個機器人為你服務
  • 封閉技術,技術不開源,讓別人有付費的理由
  • 與對手(Stable Diffusion)相比,進入門檻很低,不用建立伺服器
  • 大模型,利用八個不同時區的夜晚差別訂價以及效能,來解決算力難題
  • 專注在改善使用者的溝通介面,不斷優化跟使用者的互動方式

商業模式-推出第一年賺1億美金

免費讓人使用,但算力慢,還要常常跟別人搶資源和公開自己的畫作,付每月的訂閱費用就有感升級,2023年初就已經累積了1000多萬的用戶,憑藉著超美的 AI 做圖

參考資料

https://www.bnext.com.tw/article/75000/midjourney-ai-davidholz

AI-繪圖總整理-StableDiffusion – 雨 (rain.tips)

推薦好用的 LoRA模型 – 無限期更新

推薦好用的 LoRA模型 – 無限期更新

Stable Diffusion LoRA 模型,讓大家都可以在大模型的基礎下,訓練自己擁有的模型,也讓大家熱於分享,所以想在這邊分享我用過和我製作的模型給大家,持續更新下去

鋼彈模型 Gundam

https://civitai.com/models/22470/gundam-rx78-2-outfit-style-rx78-2?modelVersionId=26830

這模型搭配真人或是二次元的大模型(checkpoint),都能有很好的表現,常搭配的是 Realistic Vision V2.0

開外掛拉,進階使用 Lora 的權重以及設定

開外掛拉,進階使用 Lora 的權重以及設定

Stable Diffusion Lora 超好用,已經不太需要說明,今天要來介紹一個可以讓 Lora 放開她的束縛,可以完全調整 Lora 在模型中的每一層的權重設定,為何要有分層設定,可以看看原作者的下面這張說明圖,分別在不同層插入 Lora 可以有不同的效果出現,也可以更精準的控制AI

LoRA 權重外掛

hako-mikan/sd-webui-lora-block-weight (github.com)

安裝方法,到擴充功能中,選擇從網址安裝,並且輸入 hako-mikan/sd-webui-lora-block-weight (github.com)

之後重啟系統即可看到多了 LoRA Block Weight 可以用

至於使用效果的話,我建議都試試看上面的設定,再去拿捏下手的感覺

LoRA 整合權重外掛的 UI

bbc-mc/sdweb-merge-block-weighted-gui: Merge models with separate rate for each 25 U-Net block (input, middle, output). Extension for Stable Diffusion UI by AUTOMATIC1111 (github.com)

LoRA擁有17個作用層

參考資料

TURING 用 Stable Diffusion 畫 EV 概念車

不要再說AI畫出來的圖還沒達到專業水準了,現在日本一家新創公司,都用 Stable Diffusion 來設計它們自己的電動概念車,並且將完整的過程放在 Youtube 上,從畫設計稿,到建模並且列印出來,並且還製作了動畫

專門給室內設計師用的AI繪圖-探索未來設計的無限可能

專門給室內設計師用的AI繪圖-探索未來設計的無限可能

想要裝潢自己的房間,以前要學會CAD、3D、還要有美學基礎,和知道各式各樣的配件,才能完成室內設計的艱難任務,但現在可以用 StableDiffusion + ControlNet 或是 Lora 等方法,也可以用 https://interiorai.com/ 有訓練好且專門針對室內設計用的 AI 網站來創意發想。

一個好的室內設計軟體應該要能夠

  1. AI空間規劃:這款工具可以根據用戶提供的房間尺寸和設計需求,自動生成合適的家具佈局。它可以幫助室內設計師快速評估不同的空間規劃方案,並找出最佳的解決方案。
  2. AI颜色搭配:這款工具可以根據用戶提供的颜色樣本,自動生成和推薦搭配方案。它能幫助室內設計師在短時間內找到理想的配色方案,提高設計效率。
  3. AI材質生成:這款工具可以根據用戶提供的材質樣本,自動生成高質量的材質圖像。它可以為室內設計師提供大量的材質選擇,並支持快速地將材質應用到設計中。
  4. AI風格轉換:這款工具可以將一種風格的室內設計快速轉換為另一種風格。這可以幫助室內設計師為客戶提供多種風格的設計方案,以滿足不同的品味和需求。

而 interiorai 就可以快速的滿足上述條件

簡單且快速地創造提案

提供圖片檔,選擇場景,選擇創意,馬上就可以得到些提案,之後就可以精修設計圖

各種風格和功能可以進階調整

費用,專業版本每個月29美元,約900元

參考資料

AI也會畫室內設計