Gå til hovedinnhold

2023-05-26

Alt du alltid har ønsket å vite om matematikk (2013) [pdf]

Reaksjoner fra bransjen

  • "Everything you always wanted to know about mathematics" er en lærebok i matematikk som brukes i et førstesemesterkurs for CS- og matematikkstudenter ved Carnegie Mellon University.
  • Boken inneholder en introduksjon til hvert kapittel for å gjøre den mer samtalepreget.
  • Kommentatorene anbefaler ulike ressurser for å studere matematikk, inkludert bøker, nettsteder og nettkurs, og gir tips om hvordan man kan tilnærme seg faget.

Varsler overleverer 100 GB Tesla-hemmeligheter til tysk nyhetsnettsted

  • En varsler har lekket over 23 000 interne filer fra Tesla til et tysk nyhetsmedium, og avslører et mønster av farlige Autopilot-feil som selskapet angivelig har ignorert.
  • Filene inneholder mer enn 2400 klager på selvakselerasjon og over 1500 problemer med bremsefunksjonen, inkludert fantombremsing eller utilsiktet akselerasjon, med over 1000 ulykkesrapporter - hovedsakelig i USA og Tyskland.
  • Handelsblatt bekreftet dataenes ekthet med Fraunhofer Institute for Secure Information Technology, som ikke fant noen tegn på manipulering eller fabrikasjon. Tesla forsøkte å blokkere artikkelen, men Handelsblatt publiserte den med henvisning til at den var av offentlig interesse i henhold til EU-lovgivningen.

Reaksjoner fra bransjen

  • En varsler har lekket 100 GB konfidensielle Tesla-dokumenter som avslører potensielle systematiske feil i selskapets selvkjørende programvare.
  • Tesla-sjef Elon Musks påstand om at selvkjørende biler vil femdoble sin verdi bestrides av investorene, men noen hyller hans suksessformel med overhype, forsinkelser og til slutt suksess.
  • Teslas andel av det totale bilmarkedet vokser, men deres andel av elbilmarkedet krymper, noe som kan være et dårlig tegn. I tillegg har Tesla-bilene dyre reservedeler, noe som fører til økte forsikringskostnader, og kritikere hevder at Tesla oppfører seg kundefiendtlig og fratar kundene informasjon.

AI Canon

  • AI Canon er en samling ressurser som dekker de viktigste delene av moderne AI.
  • Den inneholder grunnleggende læringsmateriale, praktiske veiledninger, markedsanalyser og viktige forskningsresultater.
  • Viktige artikler dekker transformatormodeller, generativ AI og moderne LLM-er, inkludert GPT-3.
  • Viktige forskningsresultater inkluderer blant annet Googles LaMDA og OpenAIs GPT-4.
  • Ulike modeller, inkludert Stanfords og Facebooks, tar sikte på å forbedre LLM-nøyaktigheten gjennom informasjonsinnhenting.
  • Constitutional AI foreslår ideen om autonome og ufarlige AI-assistenter, og ulike plattformer forbedrer LLM-enes evne til å lage prognoser.
  • Generative agenter fra Google, Northeastern University og Meta har som mål å forbedre LLMs ferdigheter.
  • Forskningen tar sikte på å utvikle teknikker for å generere kode, videoer, bilder og lyd.
  • Arbeidet fra DeepMind og Med-PaLM har som mål å forbedre det medisinske feltet gjennom prediksjon av proteinstrukturer og språkmodeller som kan svare på USMLE-spørsmål.

Reaksjoner fra bransjen

  • Risikokapitalselskapet a16z har lansert en "AI Canon", en liste over de 50 beste ressursene for å forstå AI, som dekker ulike områder av AI og programvare og plattformer som er avhengige av AI for å fungere.
  • Lesere av Hacker News kritiserer a16z' investeringspraksis og tidligere resultater, og noen uttrykker misnøye med selskapets engasjement i kryptovaluta, NFT-er og Web3.
  • Noen lesere tilbyr flere ressurser om generativ AI, inkludert lærebøker, mens andre diskuterer skepsis til krypto og roser AI Canon som en nyttig liste med lenker.

Hvordan finjustere GPT-lignende store språkmodeller på et tilpasset datasett

  • Lær hvordan du finjusterer store språkmodeller (LLM) på et tilpasset datasett ved hjelp av Lit-Parrot, en nanoGPT-basert implementering av GPT-NeoX-modellen som støtter StableLM-, Pythia- og RedPajama-INCITE-modellvekter.
  • Ved hjelp av Lit-Parrot kan du finjustere de tilgjengelige LLM-modellene med åpen kildekode av høy kvalitet, som Open LLaMA, StableLM og Pythia, på et spesifikt instruksjonsdatasett, for eksempel for å trene opp en chatbot til å svare på økonomiske spørsmål.
  • Lightning AI lanserte Lit-Parrot for å gi AI/ML-samfunnet en ren, solid og optimalisert implementering av store språkmodeller med støtte for forhåndstrening og finjustering ved hjelp av LoRA og Adapter, og denne artikkelen guider leseren gjennom prosessen med å installere, laste ned modellvekter, behandle datasettet og finjustere modellen ved hjelp av skriptene finetune_adapter.py og generate_adapter.py.

Reaksjoner fra bransjen

  • Finjustering er en kostnadseffektiv og virkningsfull måte å forbedre LLM-ytelsen på for smale bruksområder.
  • Bruk av vektordatabaser og embeddings kan gi kontekst, men finjustering kan forbedre LLM-modellenes evne til å gi nøyaktig og relevant informasjon.
  • Finjustering av modeller innebærer imidlertid en risiko for kontaminering og overtilpasning.

Firefox viste en popup-annonse for Mozilla VPN over en ikke-relatert side

  • Firefox viste en popup-annonse for Mozilla VPN på toppen av en ikke-relatert side, og deaktiverte resten av Firefox-brukergrensesnittet til den ble lukket.
  • Flere brukere har rapportert om lignende hendelser, muligens relatert til feil 1834728.
  • Mozilla har bekreftet problemet og har lagt ut en løsning på supportsiden sin.

Reaksjoner fra bransjen

  • Mozilla fikk kritikk for å vise en popup-annonse for sitt VPN mens du surfer, noe som brøt med brukerens samtykke.
  • Brukerne uttrykker misnøye med Mozillas retning, inkludert fokuset på annonser og andre urelaterte produkter i stedet for å forbedre nettleseropplevelsen i Firefox.
  • Noen brukere foreslår alternativer som LibreWolf, mens andre etterlyser mer åpenhet og respekt for brukernes personvern.

War Is a Racket (1935)

  • "War Is a Racket" er et berømt hefte av generalmajor Smedley Butler, en tidligere høytstående marinesoldat.
  • Butler snakker om krigens natur og årsaker i et enkelt språk.
  • Heftet er relevant i dag, selv om det ble skrevet i 1935.

Reaksjoner fra industrien

  • Kommentarene diskuterer fordelene og ulempene ved USAs militære dominans og det militærindustrielle kompleksets rolle, med ulike synspunkter på effektivitet og bedre ressursallokering.
  • Samtalen berører også spesifikke konflikter som Afghanistan, Irak og Ukraina, og det er stor variasjon i synet på hvor effektive og moralske intervensjonene er.
  • Kommentarfeltet gjenspeiler et bredt spekter av meninger om politiske og sosiale spørsmål, og er et eksempel på hvordan diskusjoner kan spinne seg inn i emner som ikke har noe med saken å gjøre.

Colorado opphevet lov som begrenser kommunalt internett

  • Colorado har opphevet en lov som begrenset kommunalt internett og krevde tillatelse fra velgerne for å bygge avanserte bredbåndstjenester i lokalsamfunnene, noe som gjør det enklere for lokale myndigheter å utforske bredbåndsalternativer.
  • Loven hadde blitt fremmet av kabelindustrien som en måte å forhindre sløsing med skattebetalernes penger på infrastrukturprosjekter som kommunalt internett, men den hadde blitt et hinder for mange byer og fylker i Colorado.
  • Opphevelsen fjerner behovet for en folkeavstemning og gjør det mulig for Colorado å være kvalifisert for føderale bredbåndsmidler, samtidig som noen byer i Colorado, for eksempel Pueblo, arbeider med å gi innbyggerne bedre bredbåndstilbud.

Reaksjoner fra bransjen

  • Colorado har opphevet en lov som begrenser kommunalt internett, og begrunner dette med kabelbransjens ønske om å forhindre at skattebetalernes penger sløses bort på infrastrukturprosjekter.
  • Kommunalt internett har vært en suksess i byer som Longmont og Chattanooga, der innbyggerne har fått pålitelig, rimelig og ubegrenset internettilgang.
  • Symmetrisk fiberinternett blir stadig viktigere, spesielt i områder der det er blitt vanlig å jobbe hjemmefra.

Visuelle intuitive forklaringer av LLM-konsepter (LLM University)

  • LLM University har laget visuelle og intuitive forklaringer av LLM-konsepter.
  • Plattformen gir brukerne tilgang til ulike moduler fra et dashbord.
  • Forklaringene er utformet for å forenkle komplekse juridiske begreper og gjøre dem lettere å forstå.

Reaksjoner fra bransjen

  • LLM University har publisert et gratis kurs om store språkmodeller med visuelle og intuitive forklaringer, kodeeksempler og videoinnhold.
  • Kurset legger vekt på anvendelsen av LLM-er snarere enn teori eller opplæring, og tar gjerne imot forslag til fremtidig innhold.
  • Noen brukere har uttrykt bekymring for tilgjengeligheten av materialet, og det finnes tilgjengelige artikler om LLM-tolkbarhet. Vi har fått positive tilbakemeldinger på relatert teknisk innhold av Jay Alammar.

Deno 1.34: Deno compile støtter NPM-pakker

  • Deno 1.34 fokuserer på å forbedre kompatibiliteten med npm og Node.js, forbedre den generelle livskvaliteten og utvikleropplevelsen og legge grunnlaget for fremtidige ytelsesforbedringer.
  • Blant de viktigste funksjonene er støtte for deno-kompilering med npm-pakker, glob-støtte i deno-oppgaver og CLI-flagg og TLS-sertifikater med IP-adresser.
  • Andre forbedringer omfatter forbedringer av konfigurasjonsfiler, forbedringer av språkservere, endringer i Deno API, forbedringer av npm- og Node.js-kompatibiliteten og oppdateringer av V8 og TypeScript.

Reaksjoner fra bransjen

  • Deno 1.34 støtter nå NPM-pakker, noe som har ført til diskusjoner om prosjektets retning og fokus.
  • Noen er bekymret for at NPM-kompatibilitet går på bekostning av Denos opprinnelige visjon, mens andre hevder at det er viktig for en bredere adopsjon uten at det nødvendigvis skader rene Deno-prosjekter.
  • Interessenter understreker viktigheten av praktisk og pragmatisk programvareutvikling, noe som kan innebære avveininger og kompromisser.

Implementering av et distribuert nøkkelverdilager på toppen av implementeringen av Raft i Go

  • Et innlegg som forklarer hvordan man implementerer et distribuert nøkkelverdilager på toppen av Raft i Go.
  • Innlegget dekker to nøkkelkomponenter i Raft: valg av leder og replikering av logger, og beskriver også rekonfigurering og snapshotting.
  • Innlegget inkluderer modellering med tilstandsmaskiner og bygging av HTTP-endepunkter, og er kun laget for undervisningsformål.

Reaksjoner fra bransjen

  • Artikkelen får skryt for sin dekning av avanserte konsepter og langsiktig prosjektengasjement.
  • Tekniske intervjuer kritiseres for å være for enkle eller irrelevante for å finne kvalitetsingeniører.
  • Utviklere diskuterer erfaringer med distribuerte databaser og bygging av Raft-implementeringer, og foreslår alternative skaleringsmetoder og læringsressurser.