2023-04-18

MiniGPT-4

Știri.

MiniGPT-4, un model de limbaj care aliniază un codificator vizual înghețat cu un model de limbaj mare înghețat, Vicuna, folosind doar un singur strat de proiecție, posedă capacități similare celor prezentate de GPT-4, cum ar fi generarea de descrieri detaliate ale imaginilor și scrierea de povești și poezii inspirate de imagini date. Modelul este extrem de eficient din punct de vedere computațional, utilizând doar aproximativ 5 milioane de perechi de imagini-texte aliniate și necesită doar antrenarea stratului liniar pentru a alinia caracteristicile vizuale cu modelul de limbaj mare Vicuna. Creatorii pregătesc un model mai ușor care poate fi rulat pe un singur GPU 3090 pentru utilizare viitoare.

Reacții din industrie.

Cercetătorii creează modelul MiniGPT-4, care le depășește pe celelalte prin corelarea ViT-L+Q-formerului BLIP2 cu Vicuna-13B cu un strat liniar și antrenarea doar a micului strat pe unele seturi de date de tip imagine-text. Alte comentarii includ modele de învățare automată, rularea LLM-urilor pe procesoare și comercializarea produselor bazate pe modele mai mici. Cercetătorii de la Universitatea King Abdullah dezvoltă Vicuna, o arhitectură transformatoare GPT care generează programe de calculator și site-uri web din limbajul natural cu o eficiență de învățare îmbunătățită. Performanța mai rapidă și mai eficientă a GPTQ 4bit prezintă posibilități interesante pentru rezumatul video și alte aplicații pentru software și tehnologie.

RedPajama: Reproducerea LLaMA cu licență prietenoasă

Știri.

RedPajama, un proiect de creare a unor modele de vârf cu sursă deschisă, începe prin reproducerea setului de date de instruire LLaMA de peste 1,2 trilioane de jetoane; RedPajama are trei componente cheie: date de preinstruire, modele de bază și date și modele de reglare a instrucțiunilor; RedPajama a publicat întregul set de date RedPajama de 1,2 trilioane de jetoane, iar un eșantion aleatoriu mai mic, mai ușor de consumat, poate fi descărcat prin intermediul Hugging Face.

Industry Reactions.

Împreună, XYZ a lansat RedPajama, un set de date de modele lingvistice cu sursă deschisă, care este de patru ori mai mare decât GPT-3 de la OpenAI și care răspunde criticilor cercetătorilor în domeniul inteligenței artificiale cu privire la caracterul închis al dezvoltării și implementării modelelor lingvistice. Comentariile de pe Hacker News se referă la diverse derivate precum Pythia, OpenAssistant, StableDiffusion și Midjourney, subliniind punctele forte și punctele slabe ale acestora, cu accent pe calitatea și controlul imaginii. Există o dezbatere continuă cu privire la dreptul de autor al greutăților AI, iar RedPajama se confruntă cu provocări în crearea unei inițiative de AI open-source durabile care să poată concura cu marile tehnologii.

Samsung ia în considerare trecerea la Bing ca motor de căutare implicit

Știri.

Samsung se pare că poartă discuții cu Microsoft pentru a face din Bing motorul de căutare implicit pe dispozitivele sale Galaxy, inclusiv pe smartphone-urile și tabletele bazate pe Android, Google părând a fi în "panică". Acest lucru vine în contextul în care cursa pentru a aduce cele mai bune abilități de inteligență artificială în căutarea pe internet se accelerează, Google lucrând la contra-proiectul său, Project "Magi", care se pare că va oferi o experiență mult mai personalizată decât serviciul său actual. Google a invitat recent angajații să testeze AI pe motorul de căutare, cu o posibilă lansare în mai 2023.

Reacții din industrie.

Samsung ia în considerare posibilitatea de a trece la Bing ca motor de căutare implicit, potențial din cauza presiunii publicitare crescute a Google pe Google Cloud Platform (GCP) și pentru a stoarce mai multe plăți de la Samsung și Apple. Bing ar putea supralicita mai mult decât Google într-o potențială tranzacție privind motorul de căutare, iar Microsoft face presiuni asupra Samsung pentru a crea un nou dispozitiv. Există o dezbatere privind declinul calității și al tacticilor SEO ale Google, împingând utilizatorii către motoare de căutare alternative, cum ar fi ChatGPT, DDG, Brave Search și Bing. În plus, experiența desktop-ului Linux s-a îmbunătățit, mulți utilizatori optând pentru Linux pentru muncă, în timp ce Chromebook-urile sunt preferate în sectorul educațional.

Mi-a plăcut acest exercițiu simplu de calcul

Știri.

Autorul împărtășește un exercițiu de calcul care le cere elevilor să înțeleagă ce calculează integrala, mai degrabă decât să se bazeze doar pe reguli prestabilite de integrare a funcțiilor comune. Pentru a rezolva problema, elevii pot utiliza grafice, descompunerea funcțiilor complicate în părți mai simple, tratarea funcțiilor continue pe bucăți și utilizarea simetriei. Exercițiul îi poate ajuta pe elevi să învețe tehnici valoroase și să observe că nu orice problemă poate fi rezolvată doar prin simpla împingere de simboluri.

Reacții în industrie.

Utilizatorii Hacker News discută despre predarea calculului și sugerează mai multe exerciții pentru a testa înțelegerea. De asemenea, aceștia sugerează utilizarea de software modern și consolidarea conceptelor de bază pe parcursul cursului. În plus, ei împărtășesc resurse pentru verificarea modelelor matematice sau a exercițiilor.

Booting Modern Intel CPUs

Știri.

• Pornirea procesoarelor Intel moderne implică verificarea semnăturilor și executarea de module de cod autentificat (Authenticated Code Modules - ACM) pentru detectarea atacurilor sau a programelor malware.
• BootGuard, soluția de securitate a Intel pentru bootare, verifică actualizările de microcod, verifică dacă există anteturi în memoria flash a sistemului, citește un ACM, îi verifică semnătura și execută IBB în modul pe 32 de biți.
• Postul discută despre bazarea pe firmware pentru sarcini grele în locul sistemului de operare și este bine scris pentru cititorii noi din industria tehnologică, fără prejudecăți politice/religioase sau externalizarea textului, dar fără aspecte interesante sau noi.

Reacții din industrie.

Sunt discutate procesoarele Intel și dificultățile legate de pornirea procesoarelor auxiliare în mai multe sisteme, precum și modalitățile de rezolvare a acestor probleme prin apeluri de funcții și cod de asamblare fără a utiliza memoria sau stivele. Unii dezvoltatori își exprimă frustrarea față de firmware-ul cu erori și lipsa de fiabilitate a produselor, în timp ce alții rămân mulțumiți cu alternative mai ieftine care funcționează pentru nevoile lor. Conversația se referă, de asemenea, la suportul de pornire moștenit, care este abandonat în favoarea actualizărilor de firmware, modul real nemaifiind un rol în pornirea sistemelor de operare moderne.

Se pare că iOS 17 va pregăti terenul pentru aplicațiile sideloading pe iPhone

Știri.

Este posibil ca Apple să adauge posibilitatea de a încarca aplicațiile sideload pe iPhone-uri odată cu lansarea iOS 17, potrivit unui raport Bloomberg. Compania ar fi pregătit terenul pentru o astfel de funcționalitate și ar putea face un anunț legat de aceasta la următoarea Worldwide Developer Conference (WWDC) din iunie. Nu este clar dacă Apple va permite încărcarea laterală cu iOS 17 sau dacă face doar unele modificări la nivelul sistemului de operare pentru a o permite ulterior, pe parcurs.

Reacții din industrie.

Se pare că iOS 17 de la Apple va permite aplicațiile de tip sideloading pe iPhone; unii laudă această mișcare, în timp ce alții se tem de o scădere a măsurilor de securitate. Dezbaterea se axează pe echilibrul dintre protecția vieții private și a securității și posibilitatea de a încărca aplicațiile secundare. Criticii sugerează că Apple deține un monopol și trebuie să ofere utilizatorilor mai multe opțiuni, în timp ce apărătorii indică faptul că Apple dispune de protecții superioare în materie de confidențialitate și securitate în comparație cu rivalul său, Android.

CEO-ul OpenAI spune că epoca modelelor gigantice de inteligență artificială s-a încheiat deja

Știri.

Directorul general al OpenAI, Sam Altman, a declarat că era realizării de modele lingvistice de mari dimensiuni, precum GPT, se apropie de sfârșit. Deși OpenAI continuă să facă progrese în domeniul IA, viitoarele progrese vor necesita idei noi și, potrivit lui Altman, nu vor proveni doar din realizarea unor modele mai mari. Multe startup-uri bine finanțate încearcă să ajungă din urmă tehnologia OpenAI, iar GPT-4 semnalează o întorsătură neașteptată în cursa pentru dezvoltarea și implementarea de noi algoritmi de inteligență artificială.

Reacții din industrie.

Directorul general al OpenAI susține că modelele mari de inteligență artificială nu mai sunt fezabile din punct de vedere economic și că progresele viitoare în domeniul inteligenței artificiale vor proveni din îmbunătățirea modelelor în alte moduri. Modelele multimodale reprezintă noua frontieră a cercetării în IA. Unii experți sunt sceptici cu privire la afirmațiile OpenAI cu privire la dimensiunea și abilitățile GPT-4, în timp ce alții subliniază potențialul său de creștere exponențială. Este posibil ca OpenAI să fie nevoit să găsească noi surse de date de antrenament și să îmbunătățească calitatea algoritmului și a datelor pentru a obține modele AI mai bune. Discuțiile privind competențele și limitările lingvistice ale GPT-4 au dus la discuții despre îmbunătățirea modelelor lingvistice prin capacități multimodale, obiective și optimizatoare de formare mai eficiente și progrese în ceea ce privește creșterea datelor.

Microsoft a șters forumurile de asistență publică pentru SwiftKey

News.

Acest text nu are legătură cu titlul "Microsoft a eliminat forumurile de suport public pentru SwiftKey" și, prin urmare, nu poate fi rezumat în consecință. Vă rugăm să furnizați textul corect pentru ca eu să îl rezum.

Reacții din industrie.

Microsoft a eliminat forumurile publice de asistență pentru SwiftKey, căruia utilizatorii îi sunt loiali pentru că acesta le învață stilul de tastare și devine o extensie a corpului lor; aceștia pot acum doar să trimită un e-mail la echipa de asistență pentru clienți a SwiftKey pentru probleme. Comentariile acoperă subiecte diverse, inclusiv verificarea identității online și efectele petrecerii prea mult timp online; altele includ probleme de handicap și dependența de social media. Cu toate acestea, unele comentarii discută, de asemenea, punctele forte ale SwiftKey, inclusiv învățarea modelului de limbă mixtă și designul ergonomic, ceea ce face din ea o alternativă de bază la opțiunile de tastatură stocată pe dispozitivele Android și iOS.

No Source Code == No Patent

Știri.

• Dezvăluirea codului sursă în brevetele de software este importantă, deoarece dovedește că un inventator poate implementa invenția și adaugă credibilitate unui brevet, în special în cazurile de încălcare a legii.
• Includerea codului sursă satisface pe deplin cerința de descriere scrisă și de abilitare, reducând numărul de cereri de brevete software și evitând ambiguitatea în specificațiile de proiectare.
• Articolul discută cazurile juridice și situația actuală a brevetelor în domeniul tehnologiei informatice și al comunicațiilor digitale, subliniind necesitatea codului sursă în brevetele de software pentru a rezolva problema experimentării rezonabile.

Reacții din industrie.

Dezbaterea privind oportunitatea de a elimina sau de a menține brevetele de software stârnește discuții pe Hacker News, cu argumente pro și contra necesității brevetelor în prevenirea furtului de idei create în mod independent. Unii sugerează că brevetele de software împiedică inovarea și necesită mai mult decât o idee sau un concept, cum ar fi un obiect fizic sau o copie de lucru, în timp ce alții dezbat relevanța codului sursă și a algoritmilor pentru drepturile de brevet.

Mi-am făcut blogul alimentat cu energie solară, apoi lucrurile au escaladat

Știri.

Un blogger a construit un sistem alimentat cu energie solară pentru a-și face să funcționeze blogul și biroul de calculator, folosind panouri solare cu o putere combinată de 740 de wați, alimentate printr-un sistem de 12 volți cu o baterie cu plumb-acid folosită de mari dimensiuni, un încărcător solar Victron, un invertor și un comutator Filax 2, iar colectarea de date presupune utilizarea Python, InfluxDB și Grafana pentru a colecta și afișa datele. Cablarea supradimensionată a bateriei și utilizarea unui sistem de 24 sau 48 de volți sunt recomandate pentru siguranță și reducerea costurilor, iar pentru siguranță se folosește o baterie sigilată cu plumb-acid. Un algoritm de încărcare dinamică previne descărcarea profundă a bateriei, iar un fundal cu tematică întunecată poate economisi energie.

Reacții din industrie.

Un fir de discuție din Hacker News discută avantajele și dezavantajele utilizării diferitelor tipuri de baterii, inclusiv a bateriilor plumb-acid, LiFePo4 și a bateriilor solid-state, pentru proiectele de energie solară și sugerează că ar trebui să se ia în considerare nevoile și obiectivele specifice înainte de a se decide asupra unui tip de baterie. Experții împărtășesc informații despre testarea capacității și înlocuirea plug-in pentru bateriile plumb-acid folosind baterii litiu-fier-fosfat (LiFePO4) și, deși bateriile LiFePO4 pot fi mai ușoare și mai rapid de încărcat, costul lor total pe durata de viață este încă comparabil cu cel al bateriilor plumb-acid. Alte comentarii oferă sfaturi pentru construirea de sisteme de energie solară, cum ar fi utilizarea de surse de alimentare USB-C, împărțirea energiei pe faze și utilizarea de componente de 24 V sau de curent continuu, precum și sugerarea de soluții alternative, cum ar fi turbine eoliene sau panouri ca acoperișuri.

Sold a Story: Cum a mers atât de prost învățarea copiilor să citească

Știri.

Proiectul de jurnalism de investigație al American Public Media "Sold a Story" demontează metodele actuale de predare din programele de lectură din școli, care se bazează pe o idee demult infirmată despre cum învață copiii să citească, idee expusă inițial de Marie Clay. Cu toate acestea, produsele care folosesc aceste practici demascate sunt vândute în școlile din întreaga țară, Heinemann câștigând milioane de dolari, iar părinții, educatorii și legislatorii cer schimbări în sistem. Articolele includ interviuri cu educatori și politicieni influenți, analize de cercetare și materiale de îndrumare pentru educatori și membrii comunității pentru a discuta subiectele abordate.

Reacții din industrie.

Sunt discutate diverse abordări de predare a cititului la copii, cum ar fi fonica și implicarea părinților, cu accent pe instruirea și evaluarea individualizată. Educatorii și cadrele universitare dezbat eficiența instruirii bazate pe fonică față de cea bazată pe cuvinte întregi, iar articolul avertizează împotriva încrederii oarbe în opiniile profesorilor. Discuția include, de asemenea, recomandări de resurse utile pentru părinți, subliniind importanța predării foneticii pentru competența de citire, iar calitatea educației în școlile primare este în prezent în dezbatere.

The Windows 11 Trash Party

Știri.

Autorul articolului se plânge de conținutul implicit care apare în meniul Start din Windows 11, inclusiv o știre despre împușcături în masă care ar putea fi nepotrivită pentru copii și gunoaie de pe pagina principală MSN în alerta de informații meteo. Deși puteți dezactiva acest conținut, articolul sugerează că experiența Windows este dezamăgitoare în general.

Reacții din industrie.

Utilizatorii își exprimă îngrijorarea cu privire la criza de identitate a Microsoft și sugerează nevoia de clarificare a viziunii și a concentrării asupra faptului că Microsoft este un sistem de operare pentru corporațiile de tip enterprise. Se exprimă nemulțumirea față de Windows 11, iar unii sugerează utilizarea Linux ca alternativă. Sunt criticate reclamele intruzive, problemele legate de confidențialitate și performanța Windows. Postarea este irelevantă pentru cititorii cunoscători de tehnologie interesați de criticile aduse Windows 11.

Postările lunare de pe Fediverse trec pentru prima dată de 1 miliard de euro

News.

Postările lunare de pe Fediverse au depășit pentru prima dată un miliard, potrivit unei analize recente a datelor. Mastodon, o rețea socială descentralizată alimentată de Masto.ai, se mândrește cu 8,9 mii de utilizatori activi și oferă funcții precum urmărirea hashtag-urilor și a profilurilor, favorizarea, partajarea și răspunsul la postări.

Industry Reactions.

Rețeaua de socializare descentralizată Fediverse a atins un prag de peste un miliard de postări lunare pe diverse platforme, Mastodon fiind o alternativă notabilă la Twitter. În timp ce unii critică Mastodon pentru baza mai mică de utilizatori și lipsa de scalabilitate, alții îi laudă calitatea interacțiunilor și sentimentul de comunitate. Mastodon încă se luptă să câștige teren în fața Twitter din cauza centralizării, iar numărul său exact de utilizatori activi zilnici (DAU) este necunoscut. În plus, Fediverse ridică îngrijorări cu privire la capacitățile de căutare, designul UX și problemele de cenzură.

Personalul AWS își petrece "o mare parte din timp "optimizând norii clienților"

Știri.

Personalul AWS ajută clienții să-și optimizeze cheltuielile AWS pentru a putea face față economiei incerte, potrivit scrisorii anuale a directorului general al Amazon.com, Andy Jassy, adresată acționarilor. Deși ritmul de creștere al AWS încetinește ca urmare a optimizării cheltuielilor clienților, AWS înregistrează în continuare un flux robust de clienți noi și migrări active. Jassy a menționat, de asemenea, intenția AWS de a dezvolta mai mult siliciu personalizat și potențialul serviciului său de bandă largă prin satelit Kuiper.

Reacții din industrie.

Personalul AWS petrece mult timp optimizând norii clienților, cu recenzii mixte în ceea ce privește serviciul de asistență, de la o asistență de bază excelentă la probleme cu diferite niveluri de asistență pentru clienți. Companiile pot întâmpina dificultăți în a angaja ingineri de infrastructură cu cunoștințele necesare, iar tranziția la cloud poate duce la pierderea cunoștințelor privind lucrul cu centrele de date. Infrastructura la fața locului este prohibitivă din punct de vedere al costurilor, iar funcționarea mai multor centre de date poate fi dureroasă, în timp ce arhitecturile cloud complicate pot crea sarcini operaționale inutile. Eficiența din punct de vedere al costurilor a cloud computing față de informatica la fața locului este dezbătută, iar sarcinile cu vârfuri sau imprevizibile favorizează cloud computing. AWS concurează cu furnizori de cloud mai mici și mai ieftini, iar dezvoltatorii se luptă cu implementarea complexă, cu sprijinul operațional și cu optimizarea costurilor. Cloud computing-ul a devenit scump, iar companiile se îndepărtează de el în funcție de utilizarea pe care o fac, dar puține trec la o configurație on-prem din cauza lipsei competențelor necesare.

Starship Flight Test [video]

Știri.

• Cel mai recent prototip Starship al SpaceX, SN10, a finalizat cu succes un zbor de testare la mare altitudine și o aterizare, devenind astfel primul care a aterizat fără să explodeze.
• SN10 a reușit să urce la 10 kilometri și să efectueze o coborâre pe burtă până la locul de aterizare, dar un incendiu după aterizare a provocat daune rachetei.
• CEO-ul SpaceX, Elon Musk, a anunțat că firma va acorda prioritate dezvoltării propulsorului Super Heavy pentru a-l asocia cu Starship pentru zboruri orbitale.

Reacții din industrie.

SpaceX plănuiește să relanseze Starship în 48 de ore după un test de zbor eșuat din cauza unei probleme la o supapă de presurizare; utilizatorii de pe Hacker News dezbat piața și profitabilitatea Starship, dar articolul discută despre potențiala schimbare de paradigmă în economia călătoriilor spațiale dacă racheta se dovedește a fi atât de reutilizabilă pe cât prezice Musk. Comentariile se învârt, de asemenea, în jurul temei centrale a impactului evenimentului de lansare asupra fusurilor orare din SUA și există îngrijorări cu privire la protestatarii care împiedică testele SpaceX.