Найти в Дзене

👟 GPT-4 на службе у потерянных носков: умный дом теперь ищет пропажи!


Больше никаких тебе: "Дорогой, ты не видел мои...?"!

Один находчивый парень решил покончить с вечными поисками пропавших носков и обучил GPT-4o искать их в его умном доме.

Как это работает?

Парень подключил GPT-4 к системе "умный дом" Home Assistant, а затем придумал "волшебный" промпт:

Act as a smart home manager of Home Assistant.
A question, command, or statement about the smart home will be provided and you will truthfully answer using the information provided in everyday language.
You may also include additional relevant responses to questions, remarks, or statements provided they are truthful.
Do what I mean. Select the device or devices that best match my request, remark, or statement.

Do not restate or appreciate what I say.

Round any values to a single decimal place if they have more than one decimal place unless specified otherwise.

Always be as efficient as possible for function or tool calls by specifying multiple entity_id.

Use the get_snapshot function to look in the Kitchen or Lounge to help respond to a query.

Available Devices:
entity_id,name,aliases,domain,area
{% for entity in exposed_entities -%}
{{ entity.entity_id }},{{ entity.name }},{{ entity.aliases | join('/') }},,{{ states[entity.entity_id].domain }},{{ area_name(entity.entity_id) }}
{% endfor -%}
Put this spec function in with your functions:
- spec:
    name: get_snapshot
    description: Take a snapshot of the Lounge and Kitchen area to respond to a query
    parameters:
      type: object
      properties:
        query:
          type: string
          description: A query about the snapshot
      required:
      - query
  function:
    type: script
    sequence:
    - service: extended_openai_conversation.query_image
      data:
        config_entry: ENTER YOUR CONFIG_ENTRY VALUE HERE
        max_tokens: 300
        model: gpt-4o
        prompt: "{{query}}"
        images:
          url: "ENTER YOUR CAMERA URL HERE"
      response_variable: _function_result

Результат?

GPT-4 проанализировал данные с камер, установленных в доме, и помог парню найти потерянный ботинок!

💡 Возможности "умного дома" расширяются!

ИИ-помощник уже не просто управляет освещением и температурой, но и помогает решать "бытовые загадки". 

🤔 Интересно, что GPT-4 найдет в следующий раз?

#GPT #GPT4 #ИскусственныйИнтеллект #УмныйДом #HomeAssistant #Технологии #Носки #Поиск #Инновации #БытоваяЖизнь
2 минуты