2023-04-18

MiniGPT-4

News.

MiniGPT-4, ein Sprachmodell, das einen eingefrorenen visuellen Kodierer mit einem eingefrorenen großen Sprachmodell, Vicuna, mit nur einer Projektionsschicht abgleicht, besitzt ähnliche Fähigkeiten wie GPT-4, wie z.B. das Erzeugen von detaillierten Bildbeschreibungen und das Schreiben von Geschichten und Gedichten, die von bestimmten Bildern inspiriert sind. Das Modell ist äußerst recheneffizient, da es nur etwa 5 Millionen ausgerichtete Bild-Text-Paare benötigt und nur die lineare Schicht trainiert werden muss, um die visuellen Merkmale mit dem großen Sprachmodell von Vicuna abzugleichen. Die Entwickler bereiten für die Zukunft ein leichteres Modell vor, das auf einer einzigen 3090 GPU ausgeführt werden kann.

Reaktionen der Industrie.

Forscher erstellen ein MiniGPT-4-Modell, das andere Modelle übertrifft, indem sie den ViT-L+Q-Former von BLIP2 mit Vicuna-13B mit einer linearen Schicht verknüpfen und nur die winzige Schicht auf einigen Bild-Text-Datensätzen trainieren. Weitere Kommentare betreffen maschinelle Lernmodelle, die Ausführung von LLMs auf CPUs und die Vermarktung von Produkten, die auf kleineren Modellen basieren. Forscher der King Abdullah University entwickeln Vicuna, eine GPT-Transformatorarchitektur, die Computerprogramme und Websites aus natürlicher Sprache mit verbesserter Lerneffizienz generiert. Die schnellere und effizientere Leistung von GPTQ 4bit eröffnet spannende Möglichkeiten für die Videozusammenfassung und andere Anwendungen für Software und Technik.

RedPajama: Vervielfältigung von LLaMA mit freundlicher Lizenz

News.

RedPajama, ein Projekt zur Erstellung führender Open-Source-Modelle, beginnt mit der Reproduktion des LLaMA-Trainingsdatensatzes von über 1,2 Billionen Token. RedPajama besteht aus drei Hauptkomponenten: Pre-Trainingsdaten, Basismodelle und Daten und Modelle zur Abstimmung von Anweisungen. RedPajama hat den vollständigen RedPajama-Datensatz mit 1,2 Billionen Token veröffentlicht, und eine kleinere, leichter konsumierbare Stichprobe kann über Hugging Face heruntergeladen werden.

Industry Reactions.

Together XYZ hat RedPajama veröffentlicht, einen quelloffenen Sprachmodell-Datensatz, der viermal größer ist als der von OpenAI betriebene GPT-3-Datensatz und der Kritik von KI-Forschern an der geschlossenen Natur der Sprachmodellentwicklung und -bereitstellung begegnet. Kommentare auf Hacker News beziehen sich auf verschiedene Derivate wie Pythia, OpenAssistant, StableDiffusion und Midjourney und heben deren Stärken und Schwächen hervor, wobei der Schwerpunkt auf Bildqualität und Kontrolle liegt. Es gibt eine anhaltende Debatte über die Urheberrechtsfähigkeit von KI-Gewichten, und RedPajama steht vor der Herausforderung, eine nachhaltige Open-Source-KI-Initiative zu schaffen, die mit Big Tech konkurrieren kann.

Samsung erwägt Umstellung auf Bing als Standardsuchmaschine

News.

Samsung ist Berichten zufolge in Gesprächen mit Microsoft, um Bing zur Standard-Suchmaschine auf seinen Galaxy-Geräten, einschließlich Android-basierten Smartphones und Tablets, zu machen, während Google anscheinend im "Panikmodus" ist. Das Rennen um die besten KI-Fähigkeiten für die Websuche wird immer hitziger, und Google arbeitet an seinem Gegenentwurf, dem Projekt "Magi", das Berichten zufolge ein weitaus personalisierteres Erlebnis als sein aktueller Dienst bieten wird. Google hat kürzlich seine Mitarbeiter eingeladen, die KI in der Suchmaschine zu testen, die möglicherweise im Mai 2023 auf den Markt kommen wird.

Reaktionen der Industrie.

Samsung erwägt, zu Bing als Standardsuchmaschine zu wechseln, möglicherweise aufgrund des erhöhten Werbedrucks von Google auf der Google Cloud Platform (GCP) und um mehr Zahlungen von Samsung und Apple zu erzwingen. Bing könnte Google in einem möglichen Suchmaschinen-Deal überbieten, und Microsoft drängt Samsung, ein neues Gerät zu entwickeln. Es gibt eine Debatte über den Rückgang der Qualität und der SEO-Taktiken von Google, was die Nutzer zu alternativen Suchmaschinen wie ChatGPT, DDG, Brave Search und Bing drängt. Darüber hinaus hat sich das Linux-Desktop-Erlebnis verbessert, und viele Nutzer entscheiden sich für Linux bei der Arbeit, während Chromebooks im Bildungsbereich bevorzugt werden.

Diese einfache Rechenaufgabe hat mir gefallen

News.

Der Autor stellt eine Rechenaufgabe vor, bei der die SchülerInnen verstehen müssen, was das Integral berechnet, anstatt sich nur auf bestimmte Regeln für die Integration von allgemeinen Funktionen zu verlassen. Um das Problem zu lösen, können die Schülerinnen und Schüler Graphen erstellen, komplizierte Funktionen in einfachere Teile zerlegen, mit stückweise stetigen Funktionen umgehen und Symmetrie nutzen. Die Übung kann den Schülern helfen, wertvolle Techniken zu erlernen und die Beobachtung zu machen, dass nicht jedes Problem durch einfaches Herumschieben von Symbolen gelöst werden kann.

Reaktionen der Industrie.

Benutzer von Hacker News diskutieren über das Unterrichten von Kalkül und schlagen mehr Übungen vor, um das Verständnis zu testen. Sie schlagen auch vor, moderne Software zu verwenden und die grundlegenden Konzepte während des gesamten Kurses zu vertiefen. Außerdem teilen sie Ressourcen zur Überprüfung mathematischer Modelle oder Übungen.

Booten moderner Intel-CPUs

News.

• Das Booten moderner Intel-CPUs umfasst die Überprüfung von Signaturen und die Ausführung von Authenticated Code Modules (ACMs) zur Erkennung von Angriffen oder Malware.
• BootGuard, Intels Sicherheitslösung für das Booten, verifiziert Mikrocode-Updates, prüft auf Header im System-Flash, liest ein ACM, verifiziert dessen Signatur und führt das IBB im 32-Bit-Modus aus.
• Der Beitrag befasst sich mit dem Verlassen auf Firmware für schwere Aufgaben anstelle des Betriebssystems und ist für neue Leser aus der Technologiebranche gut geschrieben, ohne politische/religiöse Voreingenommenheit oder Externalisierung des Textes, aber ohne spannende oder neue Aspekte.

Reaktionen der Industrie.

Intel-CPUs und die Schwierigkeiten mit dem Booten von Hilfsprozessoren in mehreren Systemen werden besprochen, zusammen mit Möglichkeiten, diese Probleme durch Funktionsaufrufe und Assemblercode ohne Verwendung von Speicher oder Stapeln zu lösen. Einige Entwickler bringen ihre Frustration über fehlerhafte Firmware und unzuverlässige Produkte zum Ausdruck, während andere sich mit billigeren Alternativen zufrieden geben, die für ihre Bedürfnisse geeignet sind. In dem Gespräch geht es auch darum, dass die Unterstützung für das Booten von Legacy-Systemen zugunsten von Firmware-Updates aufgegeben wird, wobei der Real-Mode beim Booten moderner Betriebssysteme keine Rolle mehr spielt.

iOS 17 wird Berichten zufolge die Voraussetzungen für das Sideloading von Apps auf dem iPhone schaffen.

News.

Einem Bericht von Bloomberg zufolge könnte Apple mit der Veröffentlichung von iOS 17 die Möglichkeit schaffen, Apps per Sideloading auf iPhones zu laden. Berichten zufolge bereitet das Unternehmen eine solche Funktion vor und könnte sie auf der kommenden Worldwide Developer Conference (WWDC) im Juni ankündigen. Es ist unklar, ob Apple Sideloading mit iOS 17 erlauben wird oder ob es nur einige Änderungen auf Betriebssystemebene vornimmt, um es zu einem späteren Zeitpunkt zu ermöglichen.

Reaktionen der Industrie.

Apples iOS 17 erlaubt Berichten zufolge das Sideloading von Apps auf iPhones; einige loben diesen Schritt, während andere sich Sorgen über einen Rückgang der Sicherheitsmaßnahmen machen. Die Debatte dreht sich um die Abwägung zwischen dem Schutz der Privatsphäre und der Sicherheit und der Möglichkeit, Apps per Sideloading zu laden. Kritiker meinen, Apple habe ein Monopol und müsse den Nutzern mehr Möglichkeiten bieten, während Befürworter auf die besseren Datenschutz- und Sicherheitsvorkehrungen von Apple im Vergleich zu seinem Konkurrenten Android verweisen.

Der CEO von OpenAI sagt, das Zeitalter der riesigen KI-Modelle sei bereits vorbei

News.

Der CEO von OpenAI, Sam Altman, erklärte, dass die Ära der Erstellung großer Sprachmodelle wie GPT zu Ende geht. Auch wenn OpenAI weiterhin Fortschritte in der KI macht, werden künftige Fortschritte neue Ideen erfordern, die laut Altman nicht einfach nur darin bestehen werden, die Modelle zu vergrößern. Viele gut finanzierte Start-ups versuchen, mit der Technologie von OpenAI gleichzuziehen, und GPT-4 signalisiert eine unerwartete Wendung im Rennen um die Entwicklung und den Einsatz neuer KI-Algorithmen.

Reaktionen der Industrie.

Der CEO von OpenAI behauptet, dass große KI-Modelle wirtschaftlich nicht mehr machbar sind und künftige Fortschritte in der KI durch die Verbesserung von Modellen auf andere Weise erzielt werden. Multimodale Modelle sind die neue Grenze der Forschung in der KI. Einige Experten stehen den Behauptungen von OpenAI über die Größe und die Fähigkeiten von GPT-4 skeptisch gegenüber, während andere auf das Potenzial für exponentielles Wachstum hinweisen. OpenAI muss möglicherweise neue Quellen für Trainingsdaten finden und den Algorithmus und die Datenqualität für bessere KI-Modelle verbessern. Die Diskussionen über die Sprachkompetenz und die Grenzen von GPT-4 haben zu Gesprächen über die Verbesserung von Sprachmodellen durch multimodale Fähigkeiten, effizientere Trainingsziele und Optimierer sowie Fortschritte bei der Datenerweiterung geführt.

Microsoft hat die öffentlichen Support-Foren für SwiftKey gelöscht.

News.

Dieser Text steht nicht im Zusammenhang mit dem Titel 'Microsoft löschte die öffentlichen Supportforen für SwiftKey' und kann daher nicht entsprechend zusammengefasst werden. Bitte stellen Sie mir den korrekten Text zur Verfügung, damit ich ihn zusammenfassen kann.

Reaktionen der Industrie.

Microsoft hat die öffentlichen Supportforen für SwiftKey entfernt, zu dem sich die Nutzer hingezogen fühlen, weil es ihren Tippstil lernt und zu einer Verlängerung ihres Körpers wird; sie können sich bei Problemen nur noch per E-Mail an das SwiftKey-Kundensupportteam wenden. In den Kommentaren geht es um verschiedene Themen, darunter die Online-Identitätsprüfung und die Auswirkungen von zu viel Zeit im Internet, aber auch um Behindertenfeindlichkeit und die Abhängigkeit von sozialen Medien. In einigen Kommentaren werden jedoch auch die Stärken von SwiftKey erörtert, darunter das Lernen von gemischten Sprachmodellen und das ergonomische Design, das es zu einer wichtigen Alternative zu den Standardtastaturen auf Android- und iOS-Geräten macht.

Kein Quellcode == Kein Patent

News.

• Die Offenlegung des Quellcodes in Softwarepatenten ist wichtig, weil sie beweist, dass ein Erfinder die Erfindung umsetzen kann, und einem Patent Glaubwürdigkeit verleiht, insbesondere in Verletzungsfällen.
• Durch die Einbeziehung des Quellcodes wird das Erfordernis der schriftlichen Beschreibung und der Ermöglichung vollständig erfüllt, wodurch die Zahl der Softwarepatentanmeldungen verringert und Unklarheiten in den Konstruktionsspezifikationen vermieden werden.
• In dem Artikel werden Rechtsfälle und der aktuelle Stand der Patente im Bereich der Computertechnologie und der digitalen Kommunikation erörtert, wobei die Notwendigkeit von Quellcode in Softwarepatenten hervorgehoben wird, um das Problem der angemessenen Erprobung zu lösen.

Reaktionen der Industrie.

Die Debatte darüber, ob Softwarepatente abgeschafft oder beibehalten werden sollten, entfacht eine Diskussion auf Hacker News, mit Argumenten für und gegen die Notwendigkeit von Patenten, um den Diebstahl von unabhängig geschaffenen Ideen zu verhindern. Einige sind der Meinung, dass Softwarepatente die Innovation behindern und mehr als nur eine Idee oder ein Konzept erfordern, z. B. ein physisches Objekt oder eine Arbeitskopie, während andere über die Bedeutung von Quellcode und Algorithmen für Patentrechte diskutieren.

Ich habe meinen Blog mit Solarenergie betrieben, dann ist die Sache eskaliert

News.

Ein Blogger hat ein solarbetriebenes System gebaut, um seinen Blog und seinen Computer zu betreiben. Dazu verwendet er Solarmodule mit einer Gesamtleistung von 740 Watt, die über ein 12-Volt-System mit einer großen gebrauchten Blei-Säure-Batterie, einem Victron-Solarladegerät, einem Wechselrichter und einem Filax-2-Schalter mit Strom versorgt werden, und zur Datenerfassung werden Python, InfluxDB und Grafana eingesetzt. Aus Sicherheits- und Kostengründen wird eine überdimensionierte Batterieverkabelung und die Verwendung eines 24- oder 48-Volt-Systems empfohlen, und aus Sicherheitsgründen wird eine versiegelte Bleibatterie verwendet. Ein dynamischer Lastalgorithmus verhindert eine Tiefentladung der Batterie, und ein dunkler Hintergrund kann Strom sparen.

Reaktionen der Industrie.

In einem Thread auf Hacker News werden die Vor- und Nachteile der Verwendung verschiedener Batterietypen, darunter Bleisäure-, LiFePo4- und Festkörperbatterien, für Solarstromprojekte erörtert, und es wird empfohlen, vor der Entscheidung für einen Batterietyp die eigenen Bedürfnisse und Ziele zu berücksichtigen. Experten geben Einblicke in die Kapazitätsprüfung und den Plug-in-Ersatz von Blei-Säure-Batterien durch Lithium-Eisen-Phosphat-Batterien (LiFePO4). LiFePO4-Batterien sind zwar leichter und lassen sich schneller aufladen, ihre Gesamtlebenskosten sind jedoch immer noch vergleichbar mit denen von Blei-Säure-Batterien. In anderen Kommentaren werden Tipps für den Bau von Solaranlagen gegeben, wie z. B. die Verwendung von USB-C-Netzteilen, die Aufteilung des Stroms auf Phasen und die Verwendung von 24-Volt- oder Gleichstromkomponenten, sowie alternative Lösungen wie Windturbinen oder Paneele als Überdachung vorgeschlagen.

Verkauft eine Geschichte: Wie man Kindern das Lesen beibringt, ging schief

News.

Das investigative Journalismusprojekt 'Sold a Story' von American Public Media entlarvt die aktuellen Lehrmethoden in den Leseprogrammen der Schulen, die auf einer seit langem widerlegten Idee darüber beruhen, wie Kinder lesen lernen, die ursprünglich von Marie Clay entwickelt wurde. Dennoch werden Produkte, die diese entlarvten Praktiken verwenden, an Schulen im ganzen Land verkauft, wobei Heinemann Millionen von Dollar verdient und Eltern, Pädagogen und Gesetzgeber Änderungen am System fordern. Die Artikel enthalten Interviews mit einflussreichen Pädagogen und Politikern, Forschungsanalysen und Leitfäden für Pädagogen und Gemeindemitglieder zur Diskussion der jeweiligen Themen.

Reaktionen der Industrie.

Es werden verschiedene Lehransätze für das Lesen von Kindern erörtert, z. B. Phonetik und Einbeziehung der Eltern, wobei der Schwerpunkt auf individuellem Unterricht und Bewertung liegt. Pädagogen und Wissenschaftler debattieren über die Wirksamkeit von phonetischem Unterricht im Vergleich zu Ganzwortunterricht, und der Artikel warnt davor, den Meinungen der Lehrer blind zu vertrauen. Die Diskussion umfasst auch Empfehlungen für hilfreiche Ressourcen für Eltern, wobei die Bedeutung des Phonetikunterrichts für die Lesekompetenz hervorgehoben wird, und die Qualität des Unterrichts in den Grundschulen wird derzeit diskutiert.

Die Windows-11-Müllparty

News.

Der Autor des Artikels beschwert sich über die Standardinhalte, die im Startmenü von Windows 11 erscheinen, darunter eine Nachricht über eine Massenerschießung, die für Kinder ungeeignet sein könnte, und Müll von der MSN-Homepage in der Wetterinfo. Obwohl man diese Inhalte abschalten kann, ist das Windows-Erlebnis laut dem Artikel insgesamt enttäuschend.

Reaktionen der Industrie.

Die Nutzer äußern sich besorgt über Microsofts Identitätskrise und weisen darauf hin, dass eine Klärung der Vision und der Konzentration auf ein Betriebssystem für Unternehmen notwendig ist. Es wird Unzufriedenheit mit Windows 11 geäußert, und einige schlagen vor, Linux als Alternative zu verwenden. Kritisiert werden die aufdringliche Werbung, Datenschutzbedenken und die Leistung von Windows. Der Beitrag ist für technisch versierte Leser, die sich für die Kritik an Windows 11 interessieren, irrelevant.

Monatliche Fediverse-Beiträge überschreiten zum ersten Mal die Marke von 1 Milliarde

News.

Laut einer aktuellen Datenanalyse haben die monatlichen Fediverse-Posts zum ersten Mal die Grenze von einer Milliarde überschritten. Mastodon, ein dezentralisiertes soziales Netzwerk, das von Masto.ai betrieben wird, hat 8,9.000 aktive Nutzer und bietet Funktionen wie das Verfolgen von Hashtags und Profilen, Favorisieren, Teilen und Beantworten von Beiträgen.

Industry Reactions.

Das dezentrale soziale Netzwerk Fediverse hat einen Meilenstein von über einer Milliarde monatlicher Beiträge auf verschiedenen Plattformen erreicht, wobei Mastodon eine bemerkenswerte Alternative zu Twitter darstellt. Während einige Mastodon für seine kleinere Nutzerbasis und mangelnde Skalierbarkeit kritisieren, loben andere die Qualität der Interaktionen und das gemeinschaftsorientierte Gefühl. Mastodon kämpft aufgrund der Zentralisierung noch immer damit, gegenüber Twitter an Boden zu gewinnen, und die genaue Zahl der täglich aktiven Nutzer (DAUs) ist unbekannt. Darüber hinaus wirft das Fediverse Bedenken hinsichtlich der Suchfunktionen, des UX-Designs und der Zensurprobleme auf.

AWS-Mitarbeiter verbringen einen Großteil ihrer Zeit mit der "Optimierung von Kunden-Clouds".

News.

AWS-Mitarbeiter helfen den Kunden, ihre AWS-Ausgaben zu optimieren, damit sie die unsichere Wirtschaftslage überstehen können, so der jährliche Brief von Amazon.com-CEO Andy Jassy an die Aktionäre. Obwohl sich die Wachstumsrate von AWS aufgrund der Optimierung der Kundenausgaben verlangsamt, verzeichnet AWS immer noch robuste Pipelines für neue Kunden und aktive Migrationen. Jassy erwähnte auch die Absicht von AWS, mehr kundenspezifisches Silizium zu entwickeln und das Potenzial seines Satelliten-Breitbanddienstes Kuiper.

Reaktionen der Industrie.

Die AWS-Mitarbeiter verbringen viel Zeit damit, die Clouds der Kunden zu optimieren. Die Bewertungen des Support-Services sind gemischt und reichen von einem großartigen Basis-Support bis hin zu Problemen mit verschiedenen Support-Stufen für Kunden. Unternehmen können Schwierigkeiten haben, Infrastrukturingenieure mit den erforderlichen Kenntnissen einzustellen, und die Umstellung auf die Cloud kann zu einem Verlust von Kenntnissen über die Arbeit mit Rechenzentren führen. Die Infrastruktur vor Ort ist kostspielig und der Betrieb mehrerer Rechenzentren kann mühsam sein, während komplizierte Cloud-Architekturen unnötige betriebliche Belastungen mit sich bringen können. Die Kosteneffizienz von Cloud Computing im Vergleich zu On-Premises-Computing ist umstritten, wobei sporadische oder unvorhersehbare Lasten das Cloud Computing begünstigen. AWS konkurriert mit kleineren, preiswerteren Cloud-Anbietern, und die Entwickler haben mit der komplexen Bereitstellung, dem betrieblichen Support und der Kostenoptimierung zu kämpfen. Cloud Computing ist teuer geworden, so dass sich Unternehmen je nach Nutzung davon abwenden, aber nur wenige wechseln zu einer On-Premise-Konfiguration, weil ihnen die nötigen Kenntnisse fehlen.

Starship Flugtest [Video]

News.

• Der neueste Starship-Prototyp von SpaceX, SN10, hat erfolgreich einen Testflug in großer Höhe und eine Landung absolviert und ist damit das erste Raumschiff, das ohne Explosion gelandet ist.
• Die SN10 war in der Lage, auf 10 Kilometer Höhe aufzusteigen und einen Bauchlandeanflug auf den Landeplatz durchzuführen, aber ein Feuer nach der Landung verursachte Schäden an der Rakete.
• SpaceX-CEO Elon Musk hat angekündigt, dass das Unternehmen vorrangig den Super Heavy Booster entwickeln wird, um ihn mit dem Starship für Orbitalflüge zu kombinieren.

Reaktionen der Industrie.

SpaceX plant einen Neustart von Starship innerhalb von 48 Stunden nach einem abgebrochenen Flugtest aufgrund eines Druckventilproblems; Nutzer auf Hacker News diskutieren über den Markt und die Rentabilität von Starship, aber der Artikel diskutiert den möglichen Paradigmenwechsel in der Wirtschaft der Raumfahrt, wenn sich die Rakete als so wiederverwendbar erweist, wie Musk voraussagt. Die Kommentare drehen sich auch um das zentrale Thema der Auswirkungen des Starts auf die Zeitzonen in den USA, und es wird befürchtet, dass Demonstranten die Tests von SpaceX behindern könnten.