მე გამოვიყენე Copilot AI Vision, რომ დამეთვალიერებინა ინტერნეტი და მას დიდი პოტენციალი აქვს


ვის სჭირდება AI ასისტენტი ინტერნეტში ინფორმაციის მოძიებაში? ეს დამოკიდებულია იმაზე, თუ რას ცდილობთ იპოვოთ.

ათწლეულების წინ, თუ რაიმეზე ინფორმაცია გინდოდა, ბიბლიოთეკაში შედიოდი და წიგნს გახსნიდი. ეს შეიცვალა ვებსა და საძიებო სისტემების გაჩენით, სადაც ახლა მხოლოდ თქვენ უნდა აკრიფოთ საძიებო მოთხოვნა და მიიღოთ ყველა ის ინფორმაცია, რაც ოდესმე გსურდათ.

თითქოს ეს საკმარისად მარტივი არ იყო, ხელოვნური ინტელექტი (AI) არის აქ, რათა ინფორმაციის შეგროვება კიდევ უფრო შორს იყოს.

ამ თვის დასაწყისში Microsoft-მა გამოუშვა Copilot Vision, გამოცდილება, რომლის დროსაც Copilot-ს შეუძლია ნახოს და გაიგოს კონტექსტი, რასაც აკეთებთ ონლაინ რეჟიმში, რათა უზრუნველყოს სიტყვიერი დახმარება რეალურ დროში. იდეა იმაში მდგომარეობს, რომ როდესაც დათვალიერებისას გჭირდებათ გამოხმაურება ან რჩევა, შეგიძლიათ დაუკავშირდეთ პირდაპირ ასისტენტს დახმარებისთვის.

გამოცდილება მუშაობს Microsoft Edge-ში და ხელმისაწვდომია გადახედვისას Copilot Pro აბონენტების შერჩეული ჯგუფისთვის თვეში $20 გამოწერით Copilot Labs და US Copilot Pro აბონენტების მეშვეობით: ფანჯრები. მე მივიღე ადრეული წვდომა და გამოვცადე. ღირს თუ არა გამოწერა Copilot Vision-ზე წვდომისთვის? აი ჩემი გამოცდილება.

ასისტენტი, რომელიც ესმის და ხედავს ყველაფერს

თეორიულად, ინტერნეტში ძებნა საკმაოდ გასაგებია, ამიტომ დახმარების მიღება შეიძლება ზედმეტი ჩანდეს. თუმცა, როდესაც მე გავიარე დემო გამოცდილება, საკმაოდ აღფრთოვანებული ვიყავი, რადგან აპლიკაციები ნამდვილად სასარგებლო ჩანდა.

გამოყენების შემთხვევების მაგალითი მოიცავდა ჩემს ეკრანზე რამდენიმე სურათის დაყენებას და Copilot Vision-ის თხოვნას მათ დალაგებაში. ერთ შემთხვევაში, იყო ძაღლების სხვადასხვა ჯიშის მრავალი სურათი და მე მომეთხოვა ვთხოვე Copilot Vision-ს, მეტი მეთქვა მათ შესახებ სიტყვიერად. ასისტენტმა გადახედა თითოეულ სურათს და მითხრა მეტი თითოეული ჯიშის შესახებ -- მიუხედავად იმისა, რომ ეკრანზე ტექსტი არ იყო.

სხვა მაგალითში, ეკრანზე იყო სხვადასხვა ქალაქების სურათები, ისევ ტექსტის გარეშე და მომათხოვეს მეკითხა რომელი იყო ყველაზე ძველი. Copilot Vision-მა დაადგინა თითოეული ქალაქი და განმარტა, რომელი იყო უძველესი და რატომ.

ჩემს საყვარელ მაგალითში, ხელოვნური ინტელექტის ინსტრუმენტმა აიღო სტატიის ნიმუში და შეაჯამა, როცა ვკითხე. მე ვხედავ, რომ ეს არის მძლავრი ინსტრუმენტი კვლევისთვის, განსაკუთრებით იმ შემთხვევაში, თუ თქვენ ეძებთ ინფორმაციას ერთ კონკრეტულ საკითხზე და არ გსურთ თავად გადახედოთ ნაწილს, რომ ნახოთ, აქვს თუ არა ის, რაც გჭირდებათ. ახლა, თეორიულად, შეგიძლიათ უბრალოდ იკითხოთ.

ყველა დემოში, Copilot Vision-ის ჩემი გაგების უნარი ძალიან შთამბეჭდავი იყო; ეს მესმოდა, იმისდა მიუხედავად, თუ რამდენად სწრაფად ვლაპარაკობდი ან ვჩურჩულებდი, რაც მთავარი პლიუსი იყო, რადგან ეს გამოცდილებას გლუვს და ინტუიციურს ხდიდა. თუმცა, როდესაც დადგა დრო, რომ დამეწყო მისი გამოყენება ჩემს ვებსაიტებზე, მე ოდნავ იმედგაცრუებული ვიყავი რეალური აპლიკაციების შესწავლისას.

შეზღუდვები

ამჟამად Copilot Vision-ს შეუძლია შეზღუდული რაოდენობის საიტებზე წვდომა, მათ შორის Wikipedia, Tripadvisor, Amazon, Target, OpenTable, Wayfair, Food & Wine, Williams Sonoma და Geoguessr.

მათი უმრავლესობა არის სავაჭრო ვებსაიტები და ჩემი გამოცდილება იყო, რომ არ არის მნიშვნელოვანი დახმარება, რაც შეიძლება მოხდეს ონლაინ შოპინგის დროს. როგორ დამეხმარა, მოიცავდა სავაჭრო საიტებზე ნავიგაციას, მითითებებს კონკრეტულ სექციებზე, როგორიცაა გარიგებები, და იმის გარკვევა, რომელ ჩანართებზე დავაწკაპუნო და რომელ სექციებზე გადახვიდე.

მაგალითად, ამაზონზე, როდესაც ვკითხე, შემეძლო თუ არა დავეხმარო დედაჩემს რაღაცის პოვნაში საშობაოდ, მან შემოგვთავაზა, რომელ ჩანართებზე უნდა დავაჭირო საიტს, რომ ვიპოვო ის, რაც მას აინტერესებდა. Vision ნაწილი არ იყო განსაკუთრებით სასარგებლო, რადგან მე თვითონ ვხედავდი ჩანართებს საიტზე. შემდეგ მან შემომთავაზა ზოგადი პროდუქტის შემოთავაზებები, როგორიცაა წიგნი ან სვიტერი.

როდესაც შემთხვევით ჩანართზე დავაწკაპუნე, ვთხოვე გამომეხმაურებინა, რა იქნებოდა მისთვის საუკეთესო საჩუქარი ნაჩვენები ვარიანტებიდან. მან აირჩია პირველი ელემენტი ეკრანზე, რომელიც ამ შემთხვევაში იყო Amazon Fire HD ტაბლეტი, სადაც ჩამოთვლილია მისი აშკარა და ზედა ხაზის გამოყენების შემთხვევები -- კიდევ ერთხელ, არც თუ ისე სასარგებლო.

სამი ხელმისაწვდომი შინაარსის საიტებზე - Wikipedia, Tripadvisor და Food & Wine - Copilot Vision-მა მეტი დაპირება აჩვენა, რადგან მან შეძლო სტატიების შინაარსის შეჯამება, რაც, როგორც ჩანს, პროდუქტიულობის მნიშვნელოვან გამარჯვებას წარმოადგენს მუშაკებისთვის, სტუდენტებისთვის და სხვებისთვის.

Food & Wine-ზე, რომელსაც აქვს უფრო ტრადიციული საწყისი გვერდი, სადაც ნაჩვენებია ყველაზე პოპულარული სტატიები, ხელოვნური ინტელექტი ასევე დამეხმარა იმის მიმოხილვაში, რასაც მე ვუყურებდი, მოკლედ აეხსნა მთავარი ამბავი და სხვა გამორჩეული სტატიები.

თუმცა, მე არ ვიყენებ ვიკიპედიას ჩემი კვლევისთვის მისი მესამე მხარის ჩანაწერების გამო და ორი სხვა საიტი ძალიან ნიშანდობლივია მათ ფოკუსში, ასე რომ, არ ვარ დარწმუნებული, რამდენად სასარგებლო იქნება Copilot Vision, თუ თქვენ უკვე არ იქნებით ერთ-ერთი ამ საიტიდან.

ბოლო ორი ემსახურება უფრო უნიკალურ გამოყენების შემთხვევებს: OpenTable და GeoGuessr. OpenTable-ზე - საიტი, რომელიც გამოიყენება რესტორნების დასათვალიერებლად და დაჯავშნის მიზნით - ეს არ იყო ძალიან გამოსადეგი, რადგან, ისევ და ისევ, მას შეუძლია დაგეხმაროთ მხოლოდ იმაზე, რასაც თქვენ უყურებთ. მაგალითად, თუ იმ ღამით მექსიკურ რესტორანში რეკომენდაციას ითხოვთ, ის უბრალოდ გეტყვით იმას, რაც უკვე ჩანს.

GeoGuessr-ის შესწავლა არის ის, სადაც Copilot Vision იყო ყველაზე სასარგებლო, მოქმედებდა როგორც ასისტენტი, რომელმაც იცოდა ყველა პასუხი. ისევე როგორც თქვენს გუნდში ძალიან ინფორმირებული პარტნიორის ყოლა, AI-მ მომცა რამდენიმე სასარგებლო რჩევა -- რაც გარკვეულწილად მოტყუებაა.

უსაფრთხოების შეშფოთება

ბუნებრივია, როდესაც ხელოვნური ინტელექტის მოდელი თქვენს ეკრანს უყურებს, ჩნდება შეშფოთება იმის შესახებ, თუ როგორ გამოიყურება თქვენი მონაცემები. ამ პრობლემის გადასაჭრელად, Microsoft-ს აქვს მტკიცე Q+A, რომელიც პასუხობს ადამიანების ყველაზე მწვავე კითხვებს.

დამწყებთათვის, კომპანია ამშვიდებს მომხმარებლებს, რომ Copilot Vision ნახულობს მხოლოდ მათ Edge ფანჯარას აქტიურ Vision სესიაში, რომელიც მითითებულია ბრაუზერის ჩარჩოთი, რომელიც მიუთითებს მათ აქტიურ სესიაზე. ეს არის ძირითადი განმასხვავებელი Recall-ისგან, ფუნქცია, რომელიც იღებს მომხმარებლის ეკრანის სურათებს ფონზე ნებისმიერ დროს, როდესაც Copilot+ კომპიუტერების მომხმარებლები ირჩევენ მონაწილეობას - და განიცადა ბევრი წინააღმდეგობა.

კომპანიის თქმით, Copilot-ის პასუხები იწერება მხოლოდ სახიფათო ურთიერთქმედების მონიტორინგისთვის, მაგრამ მომხმარებლის შეყვანები, მათ შორის ტექსტი, სურათები და კონტექსტი, არასოდეს ინახება. გარდა ამისა, მომხმარებლის შეყვანის მონაცემები წაიშლება სესიის დასრულების შემდეგ.

ღირს თუ არა?

ახლავე, Copilot Pro-ს მხოლოდ Copilot Vision-ისთვის მიღება არ ღირდა, განსაკუთრებით იმიტომ, რომ წვდომა არ არის გარანტირებული. თუმცა, თვეში $20 გამოწერით, მომხმარებლები ასევე იღებენ წვდომას სხვა ბონუსებზე, როგორიცაა პრიორიტეტული წვდომა უახლეს მოდელებზე და Copilot შერჩეულ Microsoft 365 აპებში, მათ შორის Word, Excel, PowerPoint, OneNote და Outlook. ეს მას სახალისო ბონუსად აქცევს, თუ უკვე ხართ Copilot-ის ენერგიის მომხმარებელი და შეგიძლიათ ისარგებლოთ ამ სხვა შეღავათებით.