pseudolab/MistralMED_Chat · 왜 앱이 사진을 찍지 않나요? Why does the app not take in pictures?

Pseudo Lab org Oct 21, 2023

제가 의학적인 질문을 할 때, 저는 매우 그래픽적인 사진을 찍고 전문가의 미세 조정 모델에 보여주고 싶습니다! 그래서 그래서 아마도 llava 모델을 사용하여 멀티모달 입력을 취하고 미세조정 모델에 대한 사용 입력으로 번역하는 것이 가능할 것입니다. llava에 대해 더 자세히 보십시오: https://huggingface.co/spaces/ysharma/LLaVA_v1

When I ask a medical question , i want to take a very graphic picture + show it to the expert fine tuned model !

so that's why maybe it's possible to use the llava model to take multimodal input and translate those into a use input for the fine tuned model.

see more about llava here : https://huggingface.co/spaces/ysharma/LLaVA_v1

Govind1330

Oct 22, 2023

ds

Tonic

Pseudo Lab org Oct 22, 2023

여기 lava API가 있습니다. https://huggingface.co/spaces/pseudolab/LlavaAPI 페이지의 하단으로 스크롤하여 "api로 사용"하고 그 API를 mistralmed_chat 내부에서 사용하여 의료 질문에 이미지 입력을 허용하십시오.

here is the lava API : https://huggingface.co/spaces/pseudolab/LlavaAPI please scroll down to the bottom of the page "use as api" then use that api inside the mistralmed_chat to allow for image input to the medical questions.