위치 좌표를 얻으려면 요청의 extra_body에 location을 true로 지정하고 location_granularity를 설정해주세요.
location을 true로 설정하면 응답에는 함수 이름이 additional_values인 tool_calls가 포함돼요.
이 함수 호출의 인자에는 추출된 값과 그 위치 좌표가 함께 포함돼요.
from PIL import Image, ImageDrawimport jsondef plot_coordinates(image_path, response): # 이미지 로드 img = Image.open(image_path) draw = ImageDraw.Draw(img) width, height = img.size # 응답 파싱 if not response.choices[0].message.tool_calls: print("No extraction result found.") return tool_call = response.choices[0].message.tool_calls[0] parsed_result = json.loads(tool_call.function.arguments) def draw_polygon(coords, color): if not coords: return # 좌표를 이미지 크기에 맞게 스케일링 scaled_coords = [(x * width, y * height) for x, y in coords] # 외곽선이 있는 다각형 그리기 draw.polygon(scaled_coords, outline=color, width=3) def traverse(data): if isinstance(data, dict): # 좌표가 존재하면 그리기 if 'coordinates' in data: draw_polygon(data['coordinates'], 'red') if 'word_coordinates' in data: for word_poly in data['word_coordinates']: draw_polygon(word_poly, 'blue') # 모든 값을 재귀적으로 순회 for value in data.values(): traverse(value) elif isinstance(data, list): for item in data: traverse(item) traverse(parsed_result) # 이미지 표시 img.show()# 사용 예시# image_path = 'document.jpg'# plot_coordinates(image_path, response)