Tuesday, May 13, 2025

 These are helpful utilities for image processing using Azure resources:

1. Vectorize images: Sample code and output follow:

Output: Vector embedding: [-1.0224609, -1.3076172,...

2. Analyze images Sample code and output follow:

Output:

Image analysis results:

Caption: 'a building with a road and trees', Confidence: 0.5844

{

  "modelVersion": "2023-10-01",

  "captionResult": {

    "text": "a building with a road and trees",

    "confidence": 0.5844066143035889

  },

  "denseCaptionsResult": {

    "values": [

      {

        "text": "a building with a road and trees",

        "confidence": 0.5844066143035889,

        "boundingBox": {

          "x": 0,

          "y": 0,

          "w": 1920,

          "h": 1080

        }

      },

      {

        "text": "a building with a roof and trees",

        "confidence": 0.5829769968986511,

        "boundingBox": {

          "x": 929,

          "y": 171,

          "w": 938,

          "h": 884

        }

      },

      {

        "text": "a tree shadow on the road",

        "confidence": 0.6864767074584961,

        "boundingBox": {

          "x": 332,

          "y": 0,

          "w": 255,

          "h": 1062

        }

      },

      {

        "text": "a top view of a building",

        "confidence": 0.7406209707260132,

        "boundingBox": {

          "x": 962,

          "y": 189,

          "w": 887,

          "h": 332

        }

      },

      {

        "text": "a blurry image of a person's arm",

        "confidence": 0.7104462385177612,

        "boundingBox": {

          "x": 1634,

          "y": 328,

          "w": 54,

          "h": 63

        }

      },

      {

        "text": "a building with a roof and a road and trees",

        "confidence": 0.5697128176689148,

        "boundingBox": {

          "x": 0,

          "y": 0,

          "w": 1890,

          "h": 1056

        }

      },

      {

        "text": "a tree in a park",

        "confidence": 0.6157793402671814,

        "boundingBox": {

          "x": 848,

          "y": 444,

          "w": 503,

          "h": 619

        }

      },

      {

        "text": "a close up of a plant",

        "confidence": 0.6476104855537415,

        "boundingBox": {

          "x": 943,

          "y": 930,

          "w": 206,

          "h": 146

        }

      },

      {

        "text": "a tree and grass field",

        "confidence": 0.5954487919807434,

        "boundingBox": {

          "x": 4,

          "y": 0,

          "w": 319,

          "h": 1070

        }

      },

      {

        "text": "a close up of a window",

        "confidence": 0.7861047387123108,

        "boundingBox": {

          "x": 1633,

          "y": 419,

          "w": 83,

          "h": 76

        }

      }

    ]

  },

  "metadata": {

    "width": 1920,

    "height": 1080

  },

  "tagsResult": {

    "values": [

      {

        "name": "outdoor",

        "confidence": 0.9880061149597168

      },

      {

        "name": "building",

        "confidence": 0.93121337890625

      },

      {

        "name": "urban design",

        "confidence": 0.9306544065475464

      },

      {

        "name": "map",

        "confidence": 0.9177150726318359

      },

      {

        "name": "aerial photography",

        "confidence": 0.8905916213989258

      },

      {

        "name": "intersection",

        "confidence": 0.8808201551437378

      },

      {

        "name": "junction",

        "confidence": 0.8713006973266602

      },

      {

        "name": "aerial",

        "confidence": 0.8662087917327881

      },

      {

        "name": "tree",

        "confidence": 0.8520137667655945

      },

      {

        "name": "infrastructure",

        "confidence": 0.8460453748703003

      },

      {

        "name": "house",

        "confidence": 0.8455849885940552

      },

      {

        "name": "suburb",

        "confidence": 0.8436774015426636

      },

      {

        "name": "transport corridor",

        "confidence": 0.841437578201294

      },

      {

        "name": "street",

        "confidence": 0.7220888137817383

      }

    ]

  },

  "objectsResult": {

    "values": [

      {

        "boundingBox": {

          "x": 961,

          "y": 18,

          "w": 941,

          "h": 1055

        },

        "tags": [

          {

            "name": "building",

            "confidence": 0.551

          }

        ]

      }

    ]

  },

  "readResult": {

    "blocks": []

  },

  "smartCropsResult": {

    "values": [

      {

        "aspectRatio": 1.96,

        "boundingBox": {

          "x": 80,

          "y": 135,

          "w": 1760,

          "h": 900

        }

      }

    ]

  },

  "peopleResult": {

    "values": [

      {

        "boundingBox": {

          "x": 1033,

          "y": 0,

          "w": 54,

          "h": 78

        },

        "confidence": 0.11555740237236023

      },

      {

        "boundingBox": {

          "x": 1706,

          "y": 0,

          "w": 38,

          "h": 28

        },

        "confidence": 0.044786710292100906

      },

      {

        "boundingBox": {

          "x": 1764,

          "y": 702,

          "w": 72,

          "h": 107

        },

        "confidence": 0.018947092816233635

      },

      {

        "boundingBox": {

          "x": 1617,

          "y": 4,

          "w": 26,

          "h": 32

        },

        "confidence": 0.01635269820690155

      },

      {

        "boundingBox": {

          "x": 1897,

          "y": 997,

          "w": 20,

          "h": 80

        },

        "confidence": 0.014565806835889816

      },

      {

        "boundingBox": {

          "x": 1174,

          "y": 264,

          "w": 65,

          "h": 138

        },

        "confidence": 0.009904739446938038

      },

      {

        "boundingBox": {

          "x": 1570,

          "y": 0,

          "w": 19,

          "h": 26

        },

        "confidence": 0.00963284820318222

      },

      {

        "boundingBox": {

          "x": 975,

          "y": 812,

          "w": 23,

          "h": 56

        },

        "confidence": 0.007403235416859388

      },

      {

        "boundingBox": {

          "x": 1892,

          "y": 256,

          "w": 25,

          "h": 89

        },

        "confidence": 0.0058165849186480045

      },

      {

        "boundingBox": {

          "x": 1730,

          "y": 1006,

          "w": 92,

          "h": 71

        },

        "confidence": 0.005636707879602909

      },

      {

        "boundingBox": {

          "x": 1003,

          "y": 0,

          "w": 49,

          "h": 28

        },

        "confidence": 0.005567244254052639

      },

      {

        "boundingBox": {

          "x": 1006,

          "y": 0,

          "w": 64,

          "h": 60

        },

        "confidence": 0.00508015975356102

      },

      {

        "boundingBox": {

          "x": 1788,

          "y": 672,

          "w": 72,

          "h": 102

        },

        "confidence": 0.004823194816708565

      },

      {

        "boundingBox": {

          "x": 1878,

          "y": 943,

          "w": 39,

          "h": 134

        },

        "confidence": 0.00384620507247746

      },

      {

        "boundingBox": {

          "x": 1063,

          "y": 249,

          "w": 49,

          "h": 126

        },

        "confidence": 0.003768299473449588

      },

      {

        "boundingBox": {

          "x": 1791,

          "y": 991,

          "w": 115,

          "h": 86

        },

        "confidence": 0.003688311204314232

      },

      {

        "boundingBox": {

          "x": 1743,

          "y": 438,

          "w": 45,

          "h": 77

        },

        "confidence": 0.0035305204801261425

      },

      {

        "boundingBox": {

          "x": 1702,

          "y": 0,

          "w": 42,

          "h": 69

        },

        "confidence": 0.0028348765335977077

      },

      {

        "boundingBox": {

          "x": 902,

          "y": 805,

          "w": 31,

          "h": 63

        },

        "confidence": 0.0027336280327290297

      },

      {

        "boundingBox": {

          "x": 1135,

          "y": 223,

          "w": 36,

          "h": 65

        },

        "confidence": 0.002365714870393276

      },

      {

        "boundingBox": {

          "x": 1068,

          "y": 203,

          "w": 76,

          "h": 164

        },

        "confidence": 0.00231865793466568

      },

      {

        "boundingBox": {

          "x": 1721,

          "y": 316,

          "w": 33,

          "h": 72

        },

        "confidence": 0.001977135194465518

      },

      {

        "boundingBox": {

          "x": 1430,

          "y": 274,

          "w": 34,

          "h": 63

        },

        "confidence": 0.0019341635052114725

      },

      {

        "boundingBox": {

          "x": 917,

          "y": 799,

          "w": 21,

          "h": 32

        },

        "confidence": 0.0017207009950652719

      },

      {

        "boundingBox": {

          "x": 1722,

          "y": 976,

          "w": 58,

          "h": 101

        },

        "confidence": 0.0017095959046855569

      },

      {

        "boundingBox": {

          "x": 1824,

          "y": 989,

          "w": 50,

          "h": 76

        },

        "confidence": 0.0014758453471586108

      },

      {

        "boundingBox": {

          "x": 1745,

          "y": 130,

          "w": 87,

          "h": 202

        },

        "confidence": 0.001272828783839941

      },

      {

        "boundingBox": {

          "x": 1559,

          "y": 635,

          "w": 115,

          "h": 232

        },

        "confidence": 0.001130886492319405

      },

      {

        "boundingBox": {

          "x": 1220,

          "y": 255,

          "w": 21,

          "h": 55

        },

        "confidence": 0.0010053350124508142

      }

    ]

  }

}


No comments:

Post a Comment