Spaces:
Sleeping
Sleeping
Update app.py
Browse files
app.py
CHANGED
|
@@ -1,11 +1,14 @@
|
|
| 1 |
import gradio as gr
|
| 2 |
import asyncio
|
| 3 |
import os
|
|
|
|
|
|
|
|
|
|
|
|
|
| 4 |
from google import genai
|
| 5 |
from google.genai import types
|
| 6 |
from PIL import Image
|
| 7 |
from io import BytesIO
|
| 8 |
-
from super_image import RcanModel, ImageLoader
|
| 9 |
|
| 10 |
# Cấu hình API Key
|
| 11 |
api_key = os.getenv("GEMINI_API_KEY")
|
|
@@ -14,20 +17,43 @@ if not api_key:
|
|
| 14 |
|
| 15 |
client = genai.Client(api_key=api_key)
|
| 16 |
|
| 17 |
-
#
|
| 18 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 19 |
|
| 20 |
def upscale_image(image):
|
| 21 |
-
"""Nâng cấp độ phân giải ảnh bằng
|
| 22 |
-
|
| 23 |
-
|
| 24 |
-
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
|
| 25 |
|
| 26 |
def load_image_as_bytes(image_path):
|
| 27 |
"""Chuyển ảnh thành dữ liệu nhị phân"""
|
| 28 |
with Image.open(image_path) as img:
|
| 29 |
img = img.convert("RGB") # Đảm bảo ảnh là RGB
|
| 30 |
-
img = upscale_image(img) #
|
| 31 |
img_bytes = BytesIO()
|
| 32 |
img.save(img_bytes, format="JPEG") # Lưu ảnh vào buffer
|
| 33 |
return img_bytes.getvalue() # Lấy dữ liệu nhị phân
|
|
@@ -49,7 +75,7 @@ async def generate_image(image_bytes, text_input):
|
|
| 49 |
for part in response.candidates[0].content.parts:
|
| 50 |
if part.inline_data is not None:
|
| 51 |
img = Image.open(BytesIO(part.inline_data.data))
|
| 52 |
-
img = upscale_image(img) #
|
| 53 |
images.append(img)
|
| 54 |
return images
|
| 55 |
|
|
@@ -76,7 +102,7 @@ demo = gr.Interface(
|
|
| 76 |
gr.Slider(minimum=1, maximum=4, step=1, value=4, label="Số lượng ảnh cần tạo")
|
| 77 |
],
|
| 78 |
outputs=gr.Gallery(label="Kết quả chỉnh sửa", columns=4),
|
| 79 |
-
title="Chỉnh sửa ảnh bằng Gemini AI +
|
| 80 |
description="Upload ảnh và nhập yêu cầu chỉnh sửa. Ảnh được nâng cấp độ phân giải trước và sau khi xử lý.",
|
| 81 |
)
|
| 82 |
|
|
|
|
| 1 |
import gradio as gr
|
| 2 |
import asyncio
|
| 3 |
import os
|
| 4 |
+
import torch
|
| 5 |
+
import torch.nn as nn
|
| 6 |
+
import torch.optim as optim
|
| 7 |
+
import torchvision.transforms as transforms
|
| 8 |
from google import genai
|
| 9 |
from google.genai import types
|
| 10 |
from PIL import Image
|
| 11 |
from io import BytesIO
|
|
|
|
| 12 |
|
| 13 |
# Cấu hình API Key
|
| 14 |
api_key = os.getenv("GEMINI_API_KEY")
|
|
|
|
| 17 |
|
| 18 |
client = genai.Client(api_key=api_key)
|
| 19 |
|
| 20 |
+
# Định nghĩa mô hình SRCNN
|
| 21 |
+
class SRCNN(nn.Module):
|
| 22 |
+
def __init__(self):
|
| 23 |
+
super(SRCNN, self).__init__()
|
| 24 |
+
self.conv1 = nn.Conv2d(3, 64, kernel_size=9, padding=4)
|
| 25 |
+
self.conv2 = nn.Conv2d(64, 32, kernel_size=5, padding=2)
|
| 26 |
+
self.conv3 = nn.Conv2d(32, 3, kernel_size=5, padding=2)
|
| 27 |
+
self.relu = nn.ReLU()
|
| 28 |
+
|
| 29 |
+
def forward(self, x):
|
| 30 |
+
x = self.relu(self.conv1(x))
|
| 31 |
+
x = self.relu(self.conv2(x))
|
| 32 |
+
x = self.conv3(x)
|
| 33 |
+
return x
|
| 34 |
+
|
| 35 |
+
# Khởi tạo mô hình SRCNN
|
| 36 |
+
model = SRCNN()
|
| 37 |
+
model.load_state_dict(torch.load("srcnn.pth", map_location=torch.device('cpu')))
|
| 38 |
+
model.eval()
|
| 39 |
|
| 40 |
def upscale_image(image):
|
| 41 |
+
"""Nâng cấp độ phân giải ảnh bằng SRCNN"""
|
| 42 |
+
transform = transforms.Compose([
|
| 43 |
+
transforms.ToTensor(),
|
| 44 |
+
transforms.Lambda(lambda x: x.unsqueeze(0)) # Thêm batch dimension
|
| 45 |
+
])
|
| 46 |
+
input_tensor = transform(image)
|
| 47 |
+
with torch.no_grad():
|
| 48 |
+
output_tensor = model(input_tensor)
|
| 49 |
+
output_image = transforms.ToPILImage()(output_tensor.squeeze(0))
|
| 50 |
+
return output_image
|
| 51 |
|
| 52 |
def load_image_as_bytes(image_path):
|
| 53 |
"""Chuyển ảnh thành dữ liệu nhị phân"""
|
| 54 |
with Image.open(image_path) as img:
|
| 55 |
img = img.convert("RGB") # Đảm bảo ảnh là RGB
|
| 56 |
+
img = upscale_image(img) # SRCNN xử lý
|
| 57 |
img_bytes = BytesIO()
|
| 58 |
img.save(img_bytes, format="JPEG") # Lưu ảnh vào buffer
|
| 59 |
return img_bytes.getvalue() # Lấy dữ liệu nhị phân
|
|
|
|
| 75 |
for part in response.candidates[0].content.parts:
|
| 76 |
if part.inline_data is not None:
|
| 77 |
img = Image.open(BytesIO(part.inline_data.data))
|
| 78 |
+
img = upscale_image(img) # SRCNN sau khi nhận ảnh từ Gemini
|
| 79 |
images.append(img)
|
| 80 |
return images
|
| 81 |
|
|
|
|
| 102 |
gr.Slider(minimum=1, maximum=4, step=1, value=4, label="Số lượng ảnh cần tạo")
|
| 103 |
],
|
| 104 |
outputs=gr.Gallery(label="Kết quả chỉnh sửa", columns=4),
|
| 105 |
+
title="Chỉnh sửa ảnh bằng Gemini AI + SRCNN",
|
| 106 |
description="Upload ảnh và nhập yêu cầu chỉnh sửa. Ảnh được nâng cấp độ phân giải trước và sau khi xử lý.",
|
| 107 |
)
|
| 108 |
|