a16z Podcast
Summary & Insights
The notion of restricting technologies like AI due to potential risks is akin to tying down everyone’s hands because some individuals might punch others – it restricts the utility and progress that these technologies can bring. This analogy highlights the delicate balance between mitigating risks and fostering innovation. The conversation revolves around the importance of open-source AI, its current state, and its implications for the future, particularly with the rise of robotics. Clem DeLong, CEO of Hugging Face, a platform that has become a central hub for open-source AI models, shares his insights on these matters.
The discussion touches on how the U.S. initially led in open-source AI but has since seen a shift towards closed models, whereas China has emerged as a significant contributor to open-source AI. DeLong expresses his concerns about the current investment bubble in large language models (LLMs) and suggests that while AI as a field is not in a bubble, LLMs distributed behind closed APIs might be overinvested. He advocates for open-source AI, arguing that it not only fosters innovation and competition but also enhances safety by distributing capabilities and allowing for broader scrutiny and development of protective measures.
The safety concerns surrounding AI models like Claude Mythos, which can assist with cyberattacks, are discussed. DeLong believes that releasing models as open-source is safer because it allows everyone to build both the systems and their protections, thus not creating an imbalance between attackers and defenders. He also touches on the future of robotics, where AI is moving off screens into the physical world, and highlights Hugging Face’s initiative with LeRobot. The role of open-source in robotics is seen as crucial for empowering new use cases and collaborations.
Surprising Insights
- China has become one of the biggest contributors to open-source AI, contrary to the trend in the U.S. towards more closed models.
- The volume of data handled by Hugging Face is significantly larger than that of GitHub, with two petabytes of data added in just one week, equivalent to 500,000 two-hour movies.
- The conversation suggests that the U.S. and China are likely to have a significant component of competition and collaboration in the field of robotics.
Practical Takeaways
- Encouraging open-source AI can lead to more innovation, better safety, and a more level playing field.
- Regulation should focus on fighting bad actors rather than restricting access to technology for everyone.
- The development of robotics will be a crucial area to watch, with open-source likely playing a significant role in its advancement.
Ý tưởng hạn chế các công nghệ như AI do rủi ro tiềm ẩn giống như việc trói tay mọi người vì một số cá nhân có thể đấm người khác – nó hạn chế tiện ích và tiến bộ mà các công nghệ này có thể mang lại. Sự tương tự này làm nổi bật sự cân bằng tinh tế giữa giảm thiểu rủi ro và thúc đẩy đổi mới. Cuộc trò chuyện xoay quanh tầm quan trọng của AI mã nguồn mở, trạng thái hiện tại của nó và ý nghĩa của nó đối với tương lai, đặc biệt là với sự phát triển của robotics. Clem DeLong, CEO của Hugging Face, một nền tảng đã trở thành trung tâm cho các mô hình AI mã nguồn mở, chia sẻ những hiểu biết sâu sắc của mình về những vấn đề này.
Cuộc thảo luận đề cập đến cách Mỹ ban đầu dẫn đầu về AI mã nguồn mở nhưng sau đó đã chuyển sang các mô hình đóng, trong khi Trung Quốc đã nổi lên như một người đóng góp đáng kể cho AI mã nguồn mở. DeLong bày tỏ mối quan ngại của mình về bong bóng đầu tư hiện tại vào các mô hình ngôn ngữ lớn (LLMs) và cho rằng mặc dù lĩnh vực AI không nằm trong bong bóng, nhưng LLMs được phân phối đằng sau các API đóng có thể được đầu tư quá mức. Ông ủng hộ AI mã nguồn mở, lập luận rằng nó không chỉ thúc đẩy đổi mới và cạnh tranh mà còn tăng cường an toàn bằng cách phân phối khả năng và cho phép kiểm tra và phát triển các biện pháp bảo vệ rộng rãi hơn.
Những lo ngại về an toàn xung quanh các mô hình AI như Claude Mythos, có thể hỗ trợ các cuộc tấn công mạng, được thảo luận. DeLong tin rằng việc phát hành các mô hình dưới dạng mã nguồn mở là an toàn hơn vì nó cho phép mọi người xây dựng cả hệ thống và các biện pháp bảo vệ của chúng, do đó không tạo ra sự mất cân bằng giữa những kẻ tấn công và những người phòng thủ. Ông cũng đề cập đến tương lai của robotics, nơi AI đang di chuyển khỏi màn hình vào thế giới vật lý, và nhấn mạnh sáng kiến của Hugging Face với LeRobot. Vai trò của mã nguồn mở trong robotics được coi là rất quan trọng để trao quyền cho các trường hợp sử dụng mới và hợp tác.
Những hiểu biết sâu sắc bất ngờ
- Trung Quốc đã trở thành một trong những người đóng góp lớn nhất cho AI mã nguồn mở, trái ngược với xu hướng ở Mỹ hướng tới các mô hình đóng hơn.
- Lượng dữ liệu được xử lý bởi Hugging Face lớn hơn đáng kể so với GitHub, với hai petabyte dữ liệu được thêm vào chỉ trong một tuần, tương đương với 500.000 bộ phim dài hai giờ.
- Cuộc trò chuyện cho thấy rằng Mỹ và Trung Quốc có khả năng sẽ có một thành phần cạnh tranh và hợp tác đáng kể trong lĩnh vực robotics.
Bài học thực tiễn
- Khuyến khích AI mã nguồn mở có thể dẫn đến đổi mới nhiều hơn, an toàn tốt hơn và một sân chơi công bằng hơn.
- Quy định nên tập trung vào việc chống lại những kẻ xấu chứ không phải hạn chế quyền truy cập vào công nghệ cho mọi người.
- Sự phát triển của robotics sẽ là một lĩnh vực quan trọng cần theo dõi, với mã nguồn mở có khả năng đóng một vai trò quan trọng trong sự tiến bộ của nó.
因潛在風險而限制像人工智慧這樣的技術,就像綁住每個人的雙手一樣,因為有些人可能會打別人——這限制了這些技術可以帶來的效用和進步。這個比喻凸顯了在降低風險和促進創新之間的微妙平衡。對話圍繞著開源人工智慧的重要性、當前狀態及其對未來的影響,特別是在機器人技術崛起的背景下。Hugging Face的執行長Clem DeLong,這個已成為開源人工智慧模型中心樞紐的平台,分享了他對這些問題的見解。
討論涉及美國最初在開源人工智慧領域領先,但後來轉向閉源模式,而中國則成為開源人工智慧的重要貢獻者。DeLong表達了他對當前大型語言模型(LLMs)投資泡沫的擔憂,並表示雖然人工智慧作為一個領域並不是泡沫,但通過閉源API分發的LLMs可能被過度投資。他主張開源人工智慧,認為它不僅促進創新和競爭,還通過分散能力和允許更廣泛的審查和開發保護措施來提高安全性。
討論了圍繞像Claude Mythos這樣的人工智慧模型的安全問題,這些模型可以協助網路攻擊。DeLong認為,將模型作為開源發布更安全,因為這允許每個人建立系統和保護措施,從而不會在攻擊者和防禦者之間造成不平衡。他還談到了機器人技術的未來,人工智慧正從螢幕轉移到實體世界,並強調了Hugging Face與LeRobot的合作。在機器人技術中,開源被視為對推動新用例和合作至關重要。
令人驚訝的見解
- 中國已成為開源人工智慧的最大貢獻者之一,這與美國趨向更閉源模式的趨勢相反。
- Hugging Face處理的數據量遠遠大於GitHub,僅在一周內就新增了2拍字節的數據,相當於50萬部兩小時的電影。
- 對話表明,美國和中國在機器人技術領域可能會出現競爭與合作並存的局面。
實用收穫
- 鼓勵開源人工智慧可以帶來更多的創新、更好的安全性和更公平的競爭環境。
- 監管應著重於打擊不良行為者,而不是限制每個人對技術的訪問。
- 機器人技術的發展將是一個值得關注的重要領域,開源可能會在其進步中發揮重要作用。
L’idée de restreindre les technologies comme l’IA en raison de risques potentiels est comparable à attacher les mains de tout le monde parce que certains individus pourraient frapper d’autres – cela restreint l’utilité et le progrès que ces technologies peuvent apporter. Cette analogie met en évidence l’équilibre délicat entre atténuer les risques et favoriser l’innovation. La conversation tourne autour de l’importance de l’IA open-source, de son état actuel et de ses implications pour l’avenir, en particulier avec l’essor de la robotique. Clem DeLong, PDG de Hugging Face, une plateforme qui est devenue un hub central pour les modèles d’IA open-source, partage ses idées sur ces questions.
La discussion aborde la manière dont les États-Unis ont initialement mené dans l’IA open-source, mais ont depuis vu un glissement vers des modèles fermés, tandis que la Chine est devenue un contributeur important à l’IA open-source. DeLong exprime ses inquiétudes concernant la bulle d’investissement actuelle dans les grands modèles de langage (LLM) et suggère que, même si l’IA en tant que domaine n’est pas dans une bulle, les LLM distribués derrière des API fermées pourraient être surinvestis. Il plaide en faveur de l’IA open-source, arguant qu’elle non seulement favorise l’innovation et la concurrence, mais aussi améliore la sécurité en répartissant les capacités et en permettant un examen plus large et le développement de mesures de protection.
Les préoccupations concernant la sécurité des modèles d’IA comme Claude Mythos, qui peuvent aider aux cyberattaques, sont discutées. DeLong pense que la publication de modèles en open-source est plus sûre parce que cela permet à tout le monde de construire à la fois les systèmes et leurs protections, ne créant ainsi pas de déséquilibre entre les attaquants et les défenseurs. Il aborde également l’avenir de la robotique, où l’IA se déplace des écrans vers le monde physique, et met en évidence l’initiative de Hugging Face avec LeRobot. Le rôle de l’open-source dans la robotique est considéré comme crucial pour donner du pouvoir à de nouveaux cas d’utilisation et collaborations.
Constats surprenants
- La Chine est devenue l’un des plus grands contributeurs à l’IA open-source, contrairement à la tendance aux États-Unis vers des modèles plus fermés.
- Le volume de données traité par Hugging Face est nettement plus important que celui de GitHub, avec deux pétaoctets de données ajoutés en une semaine seulement, équivalent à 500 000 films de deux heures.
- La conversation suggère que les États-Unis et la Chine sont susceptibles d’avoir une composante importante de concurrence et de collaboration dans le domaine de la robotique.
Enseignements pratiques
- Encourager l’IA open-source peut conduire à plus d’innovation, une meilleure sécurité et un terrain de jeu plus équitable.
- La réglementation devrait se concentrer sur la lutte contre les mauvais acteurs plutôt que de restreindre l’accès à la technologie pour tout le monde.
- Le développement de la robotique sera un domaine crucial à surveiller, l’open-source jouant probablement un rôle important dans son avancement.
Die Vorstellung, Technologien wie KI aufgrund potenzieller Risiken einzuschränken, ist vergleichbar mit dem Fesseln aller Hände, weil einige Personen andere schlagen könnten – dies schränkt den Nutzen und Fortschritt ein, den diese Technologien bringen können. Diese Analogie verdeutlicht das empfindliche Gleichgewicht zwischen der Minderung von Risiken und der Förderung von Innovationen. Die Diskussion dreht sich um die Bedeutung von Open-Source-KI, ihren aktuellen Stand und ihre Auswirkungen auf die Zukunft, insbesondere mit dem Aufstieg der Robotik. Clem DeLong, CEO von Hugging Face, einer Plattform, die zu einem zentralen Hub für Open-Source-KI-Modelle geworden ist, teilt seine Erkenntnisse zu diesen Themen.
Die Diskussion berührt darauf, wie die USA ursprünglich die Führung bei Open-Source-KI innehatten, aber seitdem einen Wechsel hin zu geschlossenen Modellen erlebt haben, während China zu einem bedeutenden Mitwirkenden an Open-Source-KI geworden ist. DeLong äußert seine Bedenken hinsichtlich der aktuellen Investitionsblase bei großen Sprachmodellen (LLMs) und deutet an, dass, obwohl KI als Feld nicht in einer Blase ist, LLMs, die hinter geschlossenen APIs verteilt werden, möglicherweise überinvestiert sind. Er befürwortet Open-Source-KI und argumentiert, dass sie nicht nur Innovationen und Wettbewerb fördert, sondern auch die Sicherheit durch die Verteilung von Fähigkeiten und die Ermöglichung einer breiteren Überprüfung und Entwicklung von Schutzmaßnahmen erhöht.
Die Sicherheitsbedenken hinsichtlich KI-Modellen wie Claude Mythos, die bei Cyberangriffen helfen können, werden diskutiert. DeLong glaubt, dass die Veröffentlichung von Modellen als Open-Source sicherer ist, da sie es allen ermöglicht, sowohl die Systeme als auch ihre Schutzmaßnahmen zu entwickeln, wodurch kein Ungleichgewicht zwischen Angreifern und Verteidigern entsteht. Er berührt auch die Zukunft der Robotik, in der KI von Bildschirmen in die physische Welt wechselt, und hebt Hugging Faces Initiative mit LeRobot hervor. Die Rolle von Open-Source in der Robotik wird als entscheidend für die Ermöglichung neuer Anwendungsfälle und Kooperationen angesehen.
Überraschende Erkenntnisse
- China ist zu einem der größten Mitwirkenden an Open-Source-KI geworden, entgegen dem Trend in den USA hin zu mehr geschlossenen Modellen.
- Das Datenvolumen, das von Hugging Face verarbeitet wird, ist deutlich größer als das von GitHub, mit zwei Petabyte an Daten, die in nur einer Woche hinzugefügt wurden, was 500.000 zweistündigen Filmen entspricht.
- Die Diskussion deutet darauf hin, dass die USA und China wahrscheinlich eine bedeutende Komponente von Wettbewerb und Zusammenarbeit im Bereich der Robotik haben werden.
Praktische Erkenntnisse
- Die Förderung von Open-Source-KI kann zu mehr Innovationen, besserer Sicherheit und einem ausgeglicheneren Spielfeld führen.
- Die Regulierung sollte sich auf die Bekämpfung von schlechten Akteuren konzentrieren, anstatt den Zugang zur Technologie für alle einzuschränken.
- Die Entwicklung der Robotik wird ein wichtiger Bereich sein, den man im Auge behalten sollte, wobei Open-Source wahrscheinlich eine bedeutende Rolle bei ihrer Weiterentwicklung spielen wird.
Clem Delangue joins MTS to discuss the global open-source AI landscape, the current large language model bubble, and the future of consumer robotics.
Originally aired on MTS, Theo Jaffee and Sofia Puccini speak with Clément Delangue, CEO at Hugging Face, about the global open-source AI race, why he believes the real bubble is in API-based large language models, and how robotics could become the next major interface for AI. They also discuss AI safety, U.S.-China competition, open-weight models, and why Hugging Face became the infrastructure layer for open AI development.
Resources:
Follow Clem on X: @ClementDelangue
Follow Theo on X: @theojaffee
Follow Sofia on X: @schisofrenia
Stay Updated:
Find a16z on YouTube: YouTube
Find a16z on X
Find a16z on LinkedIn
Listen to the a16z Show on Spotify
Listen to the a16z Show on Apple Podcasts
Follow our host: https://twitter.com/eriktorenberg
Please note that the content here is for informational purposes only; should NOT be taken as legal, business, tax, or investment advice or be used to evaluate any investment or security; and is not directed at any investors or potential investors in any a16z fund. a16z and its affiliates may maintain investments in the companies discussed. For more details please see a16z.com/disclosures.
Hosted by Simplecast, an AdsWizz company. See pcm.adswizz.com for information about our collection and use of personal data for advertising.
-
The Frontier of Spatial Intelligence with Fei-Fei Li
Fei-Fei Li and Justin Johnson are pioneers in AI. While the world has only recently witnessed a surge in consumer AI, our guests have long been laying the groundwork for innovations that are transforming industries…
-
Apple’s Big Reveals, OpenAI’s Multi-Step Models, and Firefly Does Video
This week in consumer tech: Apple’s big reveals, OpenAI’s multi-step reasoning, and Adobe Firefly’s video model. Olivia Moore and Justine Moore, Partners on the a16z Consumer team, break down the latest announcements and how these…
-
Grand Challenges in Healthcare AI
Vijay Pande, founding general partner, and Julie Yoo, general partner at a16z Bio + Health, come together to discuss the grand challenges facing healthcare AI today. The talk through the implications of AI integration in…
-
Governing democracy, the internet, and boardrooms
with @NoahRFeldman, @ahall_research, @rhhackett Welcome to web3 with a16z. I’m Robert Hackett and today we have a special episode about governance in many forms — from nation states to corporate boards to internet services and…
-
It’s Time to Build in Healthcare
Half of prescribed medications are never taken, and 88% of Americans are metabolically unhealthy. Despite spending 20% of our GDP on healthcare—twice that of any other developed nation—our outcomes still lag behind. In this episode,…
-
Latin America: A Tech Powerhouse?
Latin America is emerging as a tech powerhouse, but it’s not a one-size-fits-all market. In this episode, we explore why what works in Argentina won’t necessarily fly in Brazil or Mexico, and how companies are…
-
The SSN Breach: What Now?
In this episode, we cover the recent data breach of nearly 3B records, including a significant number of social security numbers. Joining us to discuss are security experts Joel de la Garza and Naftali Harris.…
-
Building Innovation Hubs: The UK & Beyond
This episode from Web3 with a16z Crypto, is all about innovation on a global scale, exploring both ecosystem and individual talent levels. We examine what works and what doesn’t, how certain regions evolve into startup…
-
The Olympics of Talent: France’s Tech Boom
Once criticized for lacking ambition, French founders are now aiming to create the world’s largest companies. With a thriving ecosystem attracting talent from across Europe and the US, France is becoming a major player on…
-
Building the World’s Most Trusted Driver
Waymo’s autonomous vehicles have driven over 20 million miles on public roads and billions more in simulation. In this episode, a16z General Partner David George sits down with Dmitri Dolgov, CTO at Waymo, to discuss…
