Snabbstart: Kom igång med GPT-4 Turbo med vision på dina bilder och videor i Azure AI Studio

  • Artikel

Viktigt!

Objekt markerade (förhandsversion) i den här artikeln är för närvarande i offentlig förhandsversion. Den här förhandsversionen tillhandahålls utan ett serviceavtal och vi rekommenderar det inte för produktionsarbetsbelastningar. Vissa funktioner kanske inte stöds eller kan vara begränsade. Mer information finns i Kompletterande villkor för användning av Microsoft Azure-förhandsversioner.

Använd den här artikeln om du vill komma igång med Azure AI Studio för att distribuera och testa MODELLEN GPT-4 Turbo med Vision.

GPT-4 Turbo med Vision och Azure AI Vision erbjuder avancerade funktioner, inklusive:

  • Optisk teckenigenkänning (OCR): Extraherar text från bilder och kombinerar den med användarens uppmaning och bild för att expandera kontexten.
  • Objekt grounding: Kompletterar GPT-4 Turbo med Vision text svar med objekt jordning och beskriver framträdande objekt i indatabilderna.
  • Videofrågor: GPT-4 Turbo with Vision kan svara på frågor genom att hämta de videorutor som är mest relevanta för användarens uppmaning.

Extra användningsavgifter kan tillkomma när du använder GPT-4 Turbo med visions- och Azure AI Vision-funktioner.

Förutsättningar

Förbereda media

Du behöver en avbildning för att slutföra avbildningens snabbstarter. Du kan använda den här exempelbilden eller någon annan bild som du har tillgänglig.

Foto av en bilolycka som kan användas för att slutföra snabbstarten.

För videomeddelanden behöver du en video som är under tre minuter lång.

Distribuera en GPT-4 Turbo med Vision-modell

  1. Logga in på Azure AI Studio och välj den hubb som du vill arbeta i.
  2. På den vänstra navigeringsmenyn väljer du AI-tjänster. Välj panelen Prova GPT-4 Turbo.
  3. På sidan gpt-4 väljer du Distribuera. I fönstret som visas väljer du din Azure OpenAI-resurs. Välj vision-preview som modellversion.
  4. Välj distribuera.
  5. Gå sedan till den nya modellens sida och välj Öppna på lekplatsen. I chattlekplatsen bör den GPT-4-distribution som du skapade väljas i listrutan Distribution .

I den här chattsessionen instruerar du assistenten att hjälpa dig att förstå bilder som du matar in.

  1. I textrutan Systemmeddelande på fliken Systemmeddelande anger du den här uppmaningen som vägleder assistenten: "You're an AI assistant that helps people find information." Du kan anpassa uppmaningen till din bild eller ditt scenario.
  2. Välj Tillämpa ändringar för att spara ändringarna.
  3. I chattsessionsfönstret väljer du knappen bifogad fil och sedan Ladda upp bild. Välj din bild.
  4. Lägg till följande fråga i chattfältet: "Describe this image"och välj sedan den högra pilikonen som ska skickas.
  5. Högerpilsikonen ersätts med en stoppknapp. Om du väljer det slutar assistenten att bearbeta din begäran. För den här snabbstarten låter du assistenten slutföra svaret.
  6. Assistenten svarar med en beskrivning av bilden.
  7. Ställ en uppföljningsfråga som rör analysen av din bild. Du kan ange, "What should I highlight about this image to my insurance company?".
  8. Du bör få ett relevant svar som liknar det som visas här: 
    When reporting the incident to your insurance company, you should highlight the following key points from the image:  

1. **Location of Damage**: Clearly state that the front end of the car, particularly the driver's side, is damaged. Mention the crumpled hood, broken front bumper, and the damaged left headlight.  

2. **Point of Impact**: Indicate that the car has collided with a guardrail, which may suggest that no other vehicles were involved in the accident.  

3. **Condition of the Car**: Note that the damage seems to be concentrated on the front end, and there is no visible damage to the windshield or rear of the car from this perspective.  

4. **License Plate Visibility**: Mention that the license plate is intact and can be used for identification purposes.  

5. **Environment**: Report that the accident occurred near a roadside with a guardrail, possibly in a rural or semi-rural area, which might help in establishing the accident location and context.  

6. **Other Observations**: If there were any other circumstances or details not visible in the image that may have contributed to the accident, such as weather conditions, road conditions, or any other relevant information, be sure to include those as well.  

Remember to be factual and descriptive, avoiding speculation about the cause of the accident, as the insurance company will conduct its own investigation.

Visa och exportera kod

När som helst i chattsessionen kan du aktivera växeln Visa rå JSON överst i chattfönstret för att se konversationen formaterad som JSON. Så här ser det ut i början av snabbstartschattsessionen:

[
	{
		"role": "system",
		"content": [
			"You are an AI assistant that helps people find information."
		]
	},
]

Rensa resurser

För att undvika onödiga Azure-kostnader bör du ta bort de resurser som du skapade i den här snabbstarten om de inte längre behövs. Om du vill hantera resurser kan du använda Azure Portal.

Nästa steg