Publié dans Sciences et espace

16

« ChatGPT peut maintenant voir, entendre et parler »

« ChatGPT peut maintenant voir, entendre et parler »

OpenAI explique que son intelligence artificielle va désormais au-delà du simple prompt pour lui poser des questions : vous pouvez « avoir une conversation vocale ou montrer à ChatGPT de quoi vous parlez ». 

OpenAI déroule une histoire : « Lorsque vous êtes à la maison, prenez des photos de votre réfrigérateur et de votre garde-manger pour savoir ce qu’il y a pour le dîner […] Après le dîner, aidez votre enfant à résoudre un problème de mathématiques en prenant une photo, en faisant le tour de l’ensemble des problèmes et en lui demandant de partager des conseils avec vous deux ».

L’entreprise déploiera les fonctionnalités de voix et d’images dans ChatGPT pour les clients Plus et Enterprise au cours des deux prochaines semaines. « La voix arrive sur iOS et Android (opt-in dans les paramètres) et les images seront disponibles sur toutes les plateformes », ajoute OpenAI. 

Tous les détails se trouvent par ici.

16

Tiens, en parlant de ça :

#Flock a sa propre vision de l’inclusion

Retour à l’envoyeur

13:39 Flock 15
Un Sébastien transformé en lapin par Flock pour imiter le Quoi de neuf Docteur des Looney Tunes

Quoi de neuf à la rédac’ #10 : nous contacter et résumé de la semaine

On est déjà à la V2 de Next ?

11:55 23
Autoportrait Sébastien

[Autoportrait] Sébastien Gavois : tribulations d’un pigiste devenu rédac’ chef

Me voilà à poil sur Internet

17:18 Next 16

#Flock a sa propre vision de l’inclusion

Flock 15
Un Sébastien transformé en lapin par Flock pour imiter le Quoi de neuf Docteur des Looney Tunes

Quoi de neuf à la rédac’ #10 : nous contacter et résumé de la semaine

23
Autoportrait Sébastien

[Autoportrait] Sébastien Gavois : tribulations d’un pigiste devenu rédac’ chef

Next 16
Logo de StreetPress

Pourquoi le site du média StreetPress a été momentanément inaccessible

Droit 14
Amazon re:Invent

re:Invent 2023 : Amazon lance son assistant Q et plusieurs services IA, dont la génération d’images

IA 10
Un œil symbolisant l'Union européenne, et les dissensions et problèmes afférents

Le Conseil de l’UE tire un bilan du RGPD, les États membres réclament des « outils pratiques »

Droit 4

19 associations européennes de consommateurs portent plainte contre Meta

DroitSocials 15

#LeBrief : Ariane 6 l’été prochain, Nextcloud rachète Roundcube, désinformation via la pub

Chiffre et formules mathématiques sur un tableau

CVSS 4.0 : dur, dur, d’être un expert !

Sécu 11
Une tête de fusée siglée Starlink.

Starlink accessible à Gaza sous contrôle de l’administration israélienne

Web 34
Fibre optique

G-PON, XGS-PON et 50G-PON : jusqu’à 50 Gb/s en fibre optique

HardWeb 52
Photo d'un immeuble troué de part en part

Règlement sur la cyber-résilience : les instances européennes en passe de conclure un accord

DroitSécu 10
lexique IA parodie

AGI, GPAI, modèles de fondation… de quoi on parle ?

IA 10

#LeBrief : logiciels libres scientifiques, fermeture de compte Google, « fabriquer » des femmes pour l’inclusion

livre dématérialisé

Des chercheurs ont élaboré une technique d’extraction des données d’entrainement de ChatGPT

IAScience 3
Un chien avec des lunettes apprend sur une tablette

Devenir expert en sécurité informatique en 3 clics

Sécu 11
Logo ownCloud

ownCloud : faille béante dans les déploiements conteneurisés utilisant graphapi

Sécu 16
Le SoC Graviton4 d’Amazon AWS posé sur une table

Amazon re:invent : SoC Graviton4 (Arm), instance R8g et Trainium2 pour l’IA

Hard 12
Logo Comcybergend

Guéguerre des polices dans le cyber (OFAC et ComCyberMi)

Sécu 10

#LeBrief : faille 0-day dans Chrome, smartphones à Hong Kong, 25 ans de la Dreamcast

Mur d’OVHcloud à Roubaix, avec le logo OVHcloud

OVHcloud Summit 2023 : SecNumCloud, IA et Local Zones

HardWeb 2
algorithmes de la CAF

Transparence, discriminations : les questions soulevées par l’algorithme de la CAF

IASociété 62

Plainte contre l’alternative paiement ou publicité comportementale de Meta

DroitIA 38
Nuage (pour le cloud) avec de la foudre

Économie de la donnée et services de cloud : l’Arcep renforce ses troupes

DroitWeb 0
De vieux ciseaux posés sur une surface en bois

Plus de 60 % des demandes de suppression reçues par Google émanent de Russie

Société 7
Une vieille boussole posée sur un plan en bois

La Commission européenne et Google proposent deux bases de données de fact-checks

DroitWeb 3

#LeBrief : des fichiers Google Drive disparaissent, FreeBSD 14, caméras camouflées, OnePlus 12

Le poing Dev – round 6

Next 151

Produits dangereux sur le web : nouvelles obligations en vue pour les marketplaces

Droit 9
consommation de l'ia

Usages et frugalité : quelle place pour les IA dans la société de demain ?

IA 12

La NASA établit une liaison laser à 16 millions de km, les essais continuent

Science 17
Concept de CPU

Semi-conducteurs : un important accord entre l’Europe et l’Inde

Hard 7

#LeBrief : PS5 Slim en France, Valeo porte plainte contre NVIDIA, pertes publicitaires X/Twitter

next n'a pas de brief le week-end

Le Brief ne travaille pas le week-end.
C'est dur, mais c'est comme ça.
Allez donc dans une forêt lointaine,
Éloignez-vous de ce clavier pour une fois !

16

Commentaires (16)


SebGF Abonné
Il y a 2 mois

L’analyse d’image est la bienvenue, c’est une fonctionnalité de l’IA qui est très intéressante de mon point de vue. Par contre connaissant le faible intérêt pour la protection de la vie privée d’OpenAI et leur aspect cavalier sur ces sujets, j’éviterai l’audio au même titre que tous les autres assistants de ce genre.



Au même titre que j’éviterai de lui envoyer une photo avec des personnes dessus.



Je suis curieux de voir s’il sera capable de générer un prompt pour StableDiffusion cela dit.



Mais bon, dans tous les cas c’est sur ChatGPT Plus, donc ça attendra. En ce moment je ne vois plus l’intérêt de payer le service en dehors de tester ce genre de feature.


tazvld Abonné
Il y a 2 mois

Pour les prompts, je t’invite à regarder la vidéo de présentation de Dall-E 3 ( en bas de la page de présentation https://openai.com/dall-e-3 )


SebGF Abonné
Il y a 2 mois

tazvld

Pour les prompts, je t’invite à regarder la vidéo de présentation de Dall-E 3 ( en bas de la page de présentation https://openai.com/dall-e-3 )

Oui mais là on reste dans l’interne des modèles OpenAI (qui coûtent cher à utiliser). Je parlais bien de demander à GPT de générer du prompt pour StableDiffusion, qui n’est pas une techno d’OpenAI.



C’est quelque chose qui existe plus ou moins avec AutoGPT mais c’est assez lourd à faire tourner soit-même. Perso je n’ai pas le matériel pour, là où StableDiffusion tourne très bien.



Bon, dans tous les cas, c’est une feature réservée à ChatGPT Plus et si à un moment je voyais la valeur ajoutée du service payant, aujourd’hui non. GPT4 est trop bridé et censuré, les features intéressantes comme le Web mode ont été supprimées, et GPT3.5 n’est plus aussi lent qu’avant (le site ayant aussi baissé en fréquentation ça aide, l’effet de mode semble passer). J’ai pas envie de devoir simplement me baser sur le contenu de l’apprentissage du modèle comme OpenAI prétend qu’il faut faire. C’est juste stupide et à des années lumière de ce qu’est capable de faire GPT.


Patatt Abonné
Il y a 2 mois

Le scénario mis en avant dans la brève me fait plus penser à une histoire d’horreur psychologique qu’à un doux rêve.
Utiliser l’IA pour tout est n’importe quoi pour leur donner toujours plus d’élément sur notre vie privée, non merci, on dirait du Facebook puissance 10.
Quand leur modèle économique ne décollera pas, ou que les actionnaires voudront toujours plus d’argent, on aura droit à quoi comme exploitation de nos données ?


xlp Abonné
Il y a 2 mois

Bah c’est plutôt pas mal comme fonction. C’est bien sûr en attendant d’avoir des données en temps réel sur le contenu de ton frigo.
Moi je pense à autre chose : prendre une photo du programme télé et demander à ChatGPT quoi regarder. Pareil, c’est en attendant les futurs évolutions, intégration, bref en attendant que tout ça se fasse tout seul pour toi, et que ta seule utilitée, tout qui est au revenu universel, soit de valider la commande que ChatGPT (ou autre) veut passer pour ton bien. (Oui, si ChatGPT gagne des sous ça ‘UI permet de fonctionner et donc de pouvoir choisir ce que tu vas manger, regarder… Tout ça pour ton bien.)


Arcy Abonné
Il y a 2 mois

OpenAI déroule une histoire : « Lorsque vous êtes à la maison, prenez des photos de votre réfrigérateur et de votre garde-manger pour savoir ce qu’il y a pour le dîner […] Après le dîner, aidez votre enfant à résoudre un problème de mathématiques en prenant une photo, en faisant le tour de l’ensemble des problèmes et en lui demandant de partager des conseils avec vous deux » envoyez votre marmot faire ses exercices et vu que ce dernier à trop la flemme, il demandera à ChatGPT de les résoudre à sa place.


ovancantfort Abonné
Il y a 2 mois

  • Chéri, qu’est-ce qu’il y a pour le dîner ?

  • D’après ChatGPT, des boites en plastique…



Et vu les performances de ChatGPT en math et en géographie, je ne suis pas près de lui confier l’éducation de mes enfants!



Exemple de réponse que j’ai réellement reçue de ChatGPT:




  • où peut on observer des Petits Pingouins ?

  • Le Petit Pingouin est un oiseau qui vit exclusivement dans l’hémisphère Nord (note: c’est correct). On peut notamment l’observer sur les côtes de la Nouvelle-Zélande (sic), de l’Afrique du Sud (re-sic) et du Chili (re-re-sic) . En France, on peut notamment l’observer sur l’archipel de l’Isle-aux-Grues au large de Québec.



Bref, il ne faut pas vouloir faire faire aux LLM des tâches pour lesquels ils ne sont pas du tout conçus…


Dadkill Abonné
Il y a 2 mois

La réponse de GPT-4 :



Les Petits Pingouins, aussi appelés “pingouins torda”, sont des oiseaux marins que l’on peut trouver dans l’hémisphère nord, notamment dans l’Atlantique Nord. Voici quelques endroits où vous pouvez les observer :




  1. Islande : L’Islande est l’un des meilleurs endroits pour voir les Petits Pingouins en grand nombre.

  2. Îles Féroé : Situées entre la Norvège et l’Islande, ces îles abritent également une grande population de Petits Pingouins.

  3. Écosse : Des lieux comme les Shetland et les Orcades sont de bons endroits pour les observer.

  4. Norvège : La côte norvégienne, en particulier autour des îles Lofoten, est un habitat privilégié pour ces oiseaux.

  5. Canada : Ils sont présents sur les côtes de Terre de l’est, comme à Terre-Neuve.

  6. Groenland : Une autre destination de choix pour observer ces oiseaux.

  7. France : On peut les observer sur certaines côtes de Bretagne et de Normandie, en particulier sur des îles comme Ouessant.



Lorsque vous planifiez une excursion pour voir les Petits Pingouins, il est bon de vérifier à l’avance la saison à laquelle ils sont présents, car ils peuvent migrer selon les périodes de l’année.


Abatonimus Abonné
Il y a 2 mois

Dadkill

La réponse de GPT-4 :

Les Petits Pingouins, aussi appelés “pingouins torda”, sont des oiseaux marins que l’on peut trouver dans l’hémisphère nord, notamment dans l’Atlantique Nord. Voici quelques endroits où vous pouvez les observer :

  1. Islande : L’Islande est l’un des meilleurs endroits pour voir les Petits Pingouins en grand nombre.
  2. Îles Féroé : Situées entre la Norvège et l’Islande, ces îles abritent également une grande population de Petits Pingouins.
  3. Écosse : Des lieux comme les Shetland et les Orcades sont de bons endroits pour les observer.
  4. Norvège : La côte norvégienne, en particulier autour des îles Lofoten, est un habitat privilégié pour ces oiseaux.
  5. Canada : Ils sont présents sur les côtes de Terre de l’est, comme à Terre-Neuve.
  6. Groenland : Une autre destination de choix pour observer ces oiseaux.
  7. France : On peut les observer sur certaines côtes de Bretagne et de Normandie, en particulier sur des îles comme Ouessant.

Lorsque vous planifiez une excursion pour voir les Petits Pingouins, il est bon de vérifier à l’avance la saison à laquelle ils sont présents, car ils peuvent migrer selon les périodes de l’année.

J’ai ça :



Les petits pingouins, également connus sous le nom de manchots pygmées, se trouvent principalement dans l’hémisphère sud, en particulier en Antarctique et dans les régions subantarctiques. Voici quelques endroits où vous pouvez les observer :




  1. Antarctique : C’est l’endroit le plus emblématique pour observer les petits pingouins. De nombreuses expéditions en Antarctique offrent des possibilités d’observation de la faune, y compris les manchots pygmées.



  2. Îles subantarctiques : Des endroits comme les îles Malouines (Falkland Islands), les îles Kerguelen, les îles Crozet et les îles Heard et McDonald abritent également des colonies de petits pingouins.



  3. Australie : En Australie, vous pouvez trouver des petits pingouins principalement en Tasmanie, sur l’île Phillip Island, ainsi que sur la côte sud de l’Australie.



  4. Nouvelle-Zélande : La Nouvelle-Zélande abrite également des colonies de petits pingouins. L’île de Stewart et l’île de Banks Peninsula sont de bons endroits pour les observer.



  5. Afrique du Sud : Vous pouvez voir des manchots pygmées dans la région de Simon’s Town, près du Cap. La plage de Boulders est célèbre pour sa colonie de petits pingouins.



  6. Amérique du Sud : Certaines îles au large de la côte de l’Argentine et du Chili, comme l’île Magdalena, abritent des colonies de petits pingouins.



  7. Îles Galápagos : Les îles Galápagos, situées dans l’océan Pacifique, sont un autre endroit où vous pouvez observer des petits pingouins.




Lorsque vous envisagez d’observer des petits pingouins, assurez-vous de respecter les réglementations locales en matière de conservation de la faune et de ne pas perturber leur habitat naturel. Profitez de cette expérience unique pour admirer ces adorables oiseaux dans leur environnement naturel. Si vous avez des questions supplémentaires ou avez besoin de plus d’informations sur un endroit en particulier, n’hésitez pas à demander !


thecis
Il y a 2 mois

Mais où sont les commentaires “on est en train de créer Skynet !” ?


TroudhuK Abonné
Il y a 2 mois

Quand ChatGPT sera capable de toucher tu feras moins le mariole :p


thecis
Il y a 2 mois

TroudhuK

Quand ChatGPT sera capable de toucher tu feras moins le mariole :p

J’espère que ce sera avec délicatesse et attention


Bill2
Il y a 2 mois

xlp a dit:


Moi je pense à autre chose : prendre une photo du programme télé et demander à ChatGPT quoi regarder.




Euh … perso, je comprends pas l’utilité d’un ChatGPT ici …
Pourquoi lui faire regarder le programme TV et ensuite lui demander quoi regarder ?
Si c’est pour avoir une réponse au hasard, autant fermer les yeux et pointer soi-même sur le programme, ou lancer un dé, ou … je sais pas … regarder avec ses propres yeux et choisir réellement ce qu’on veut voir, plutôt que de subir le choix arbitraire d’une “Intelligence” artificielle …



Ou alors je suis passé à côté du 2e degré …


xlp Abonné
Il y a 2 mois

Au moins 2ème degré.



En ce qui me concerne, YouTube, Facebook et bien d’autres font déjà “ça”.


Cetera
Il y a 2 mois

SebGF a dit:


Par contre connaissant le faible intérêt pour la protection de la vie privée d’OpenAI et leur aspect cavalier sur ces sujets, j’éviterai l’audio au même titre que tous les autres assistants de ce genre.




C’est un vrai sujet car selon moi, l’audio serait une bonne interface pour interagir avec ChatGPT notamment pour les personnes âgées ou en situation de handicape.
Il serait indispensable qu’il y ait de vraies garanties sur la protection et l’utilisation des données personnelles, le mieux étant que les données personnelles ne soient jamais envoyées vers un service tiers.
Chose que l’UE vient de dévoyer en torpillant le Privacy Shield.
Dommage.


SebGF Abonné
Il y a 2 mois

Entièrement d’accord sur l’aspect vie privée.



Et oui, l’IA générative et les évolutions dans la reconnaissance audio / transcription sont clairement un énorme bond en matière d’interaction humain-machine.