AI just officially took our jobs… I hate you Devin
Summary
TLDRこのスクリプトは、100年以内に家族の三代がロボットによって置き換えられる様子から始まり、プログラミングが新しい識字能力であると啓発します。しかし、DevonというAIが登場し、ソフトウェアエンジニアリングの未来を脅かす可能性があるかどうかを探求します。Devonは、実際の開発者ツールにアクセスし、問題を解決するためのコードを書くことができます。GitHubのベンチマークにおいて、DevonはGPT 4よりも大幅に高い成功率を示しており、将来的にはさらに進化する可能性があると示唆しています。一方で、AIが全てを解決するわけではなく、複雑な問題では反効果になる可能性があることも指摘しています。
Takeaways
- 👨🌾 100年前、あなたの曾祖父は農場で働いていましたが、ロボットに置き換えられました。
- 🏭 祖父はデトロイトの自動車工場で働いていましたが、同じくロボットに置き換えられました。
- 🍔 父はマクドナルドのシェフになりましたが、彼もロボットに置き換えられました。
- 👨💻 あなたは同じ運命を避けるためにプログラミングに進路を選びましたが、Pythonを学ぶことが新しい識字能力だと言われています。
- 🚀 co-pilotやgp4のようなツールが少しずつコードを書くようになり、DevonというAIが登場しました。
- 🔄 Devonはツールを通じてコードを書くことで、無限のフィードバックループで問題を解決しようとします。
- 🤖 Devonは実際のソフトウェアエンジニアのように動作し、GoogleやStack Overflowで解決策を見つけ、APIドキュメントを参照しながらコードを書きます。
- 📈 Devonはソフトウェアエンジニアリングベンチマークで他のツールを破り、GitHubの問題を解決する確率が大幅に向上しました。
- 🔢 しかし、Devonはまだほとんどのソフトウェアエンジニアを置き換えるほどの能力を持っていないようです。
- 🌐 DevonはGoogleのAlpha Coderのように並列ですべてのことを行うことで、競争プログラマーの85%を勝ち越すことができ、将来的には一つのジョブを投稿してから10分後には千種類のアプリが提案されるかもしれません。
- 💡 Devonは新しい技術を学び、アプリを構築・デプロイし、既存のコードベースのバグを修正し、自身のAIモデルをトレーニングできます。
- 🏢 Cognition LabsはSilicon Valleyの重鎮企業家から資金提供を受けており、業界での競争を繰り広げています。
- 💬 AIツールは単純な問題には非常に有用ですが、より複雑な問題に直面すると、コードをより悪化させる可能性があるため、注意が必要です。
Q & A
「デヴォン」とは何ですか?
-「デヴォン」は、開発者のツールを使ってコードを書き、問題を解決することができるAIソフトウェアエンジニアです。
デヴォンはどのように問題を解決しますか?
-デヴォンは、ウェブでAPIドキュメントを検索し、コードを書き、実行し、エラーを修正し、このプロセスを繰り返して問題を解決します。
デヴォンの性能は他のツールと比較してどうですか?
-ソフトウェアエンジニアリングのベンチマークテストで、デヴォンは他のツールよりも高い性能を示し、GitHubの問題を13.86%の確率で解決しています。
デヴォンはどのようにして開発されましたか?
-デヴォンは、人間のソフトウェアエンジニアに似た方法で開発ツールを使用し、問題解決する能力を持つAIとして、認識ラボによって開発されました。
デヴォンの開発にはどのような投資家が関与していますか?
-デヴォンの開発には、ピーター・ティールのファウンダーズ・ファンド、ストライプのコライソン兄弟など、シリコンバレーの重要な投資家が関与しています。
「デヴォン」が開発者の仕事に与える影響は?
-「デヴォン」は開発者の仕事を自動化する能力があり、ソフトウェアエンジニアリングの将来に大きな変化をもたらす可能性がありますが、まだ完全には代替できるレベルには達していません。
デヴォンが解決できる問題の種類は?
-デヴォンは、APIドキュメントの検索、コードの記述、エラーの修正など、ソフトウェア開発に関連する様々な問題を解決することができます。
デヴォンはどのようにしてAI技術の進歩を示していますか?
-デヴォンは、開発ツールの使用、問題解決プロセスの自動化、ソフトウェアエンジニアリングのベンチマークでの高い性能を通じて、AI技術の進歩を示しています。
将来的に「デヴォン」はソフトウェアエンジニアを完全に置き換える可能性がありますか?
-デヴォンの性能は向上していますが、ソフトウェアエンジニアを完全に置き換えるにはまだ至っておらず、将来的な可能性は不確かです。
Outlines
🤖 AIとソフトウェアエンジニアリングの未来
この段落は、テクノロジーによって職を失った家族の歴史を紹介し、現在のソフトウェアエンジニアリングの危機について議論しています。主人公の先祖はロボットに仕事を奪われ、主人公自身もプログラミングの世界に進出しますが、AIの進化によりその未来も不確かになります。Devonという新しいAIツールは、従来のソフトウェアエンジニアリングツールを大幅に上回る能力を持ち、実際の開発作業を自動化し始めています。このAIは問題を自動で解決し、継続的に改善を重ねる能力を持ち、現在の技術者に代わる存在と見なされています。また、この段落では、技術進歩の速度が人類の仕事をどのように変えていくか、そしてそれが人類にとってどのような意味を持つのかについて考察しています。さらに、Silicon Valleyのスタートアップや投資家がこの技術に大きな関心を持っていること、そしてそれが将来的にプログラマーの仕事をどう変えるかについても触れています。しかし、AIが単純なタスクは処理できるものの、複雑な問題に対してはまだ効果的ではないという現状も指摘しています。最後に、もしプログラミングのスキルが時代遅れになったとしても、新たなソリューションが提案されています。
Mindmap
Keywords
💡software engineering
💡AI
💡Devon
💡GitHub
💡parallel processing
💡job market
💡VC funding
💡machine learning
💡code report
💡gene therapy
💡self-driving cars
Highlights
100 years ago, the user's great-grandfather worked on a farm before being replaced by robots.
The user's grandfather worked in a car factory in Detroit, which was later automated by robots.
The user's father was a McDonald's chef, who was also eventually replaced by robots.
The user chose programming to avoid being replaced by robots, considering coding as the new literacy.
Co-pilot and GP4 are AI tools that have started to write code, indicating a shift in the software engineering landscape.
Devon is an AI that takes over tooling to write code in an infinite feedback loop, significantly improving on software engineering benchmarks.
Devon has access to the same developer tooling as a human, enabling it to solve problems like a real software engineer.
Devon can create a plan of action based on product manager requirements and then proceed to write and test code.
AI tools like Devon and Auto GPT are improving, with Devon currently solving GitHub issues 13.86% of the time.
Devon is outperforming GPT 4 on real-world GitHub issues, indicating a potential shift in the capability of AI in software engineering.
Google's Alpha Coder beats 85% of competitive programmers by generating and selecting the best solutions in parallel.
Devon is already doing real jobs on Upwork and getting paid, suggesting that AI is becoming a competitor in the job market.
Cognition Labs, the developers of Devon, is backed by significant Silicon Valley investors, indicating the potential for AI in software engineering.
Other stealth startups like Magic and Dodev are also working on AI software engineering tools, highlighting a growing trend in the industry.
Despite the advancements, AI tools are currently limited to solving simple problems and can be counterproductive for more complex tasks.
The user humorously suggests a gene therapy pill as a solution to maintaining coding skills in the face of AI advancement.
The transcript concludes with a satirical view on the future of software engineering and the impact of AI on jobs.
Transcripts
100 years ago my great-grandfather
worked on a farm then he got replaced by
robots my grandfather went on to work in
a car factory in Detroit he got replaced
by robots my father went on to become a
McDonald chef but he too was replaced by
robots I didn't want to suffer the same
fate so I got into programming they said
coding is the new literacy and everyone
needs to Learn Python but then co-pilot
started writing a little bit of code gp4
started writing a lot of code but then
yesterday Devon burst onto the scene an
AI that takes over our tooling to write
code in an infinite feedback loop in
today to video we'll find out if this
little named Devon is the final death
blow for software engineering or if it's
yet another hyped up pile of garbage
designed to milk what's left of the VC
money in this latest AI hyp cycle it is
March 13th 2024 and you're watching the
code report the software Engineers right
now are absolutely terrified begging the
developers of Devon to stop what they're
doing human software Engineers over at
cognition Labs have developed a machine
that they're calling the first AI
software engineer it has access to all
the same developer tooling that you do
like a terminal a browser a code editor
and so on and that means it can solve
problems like a real software engineer
by Googling until you find a blog or
stack Overflow answer that you can copy
and paste into your code a product
manager can give Devon some requirements
and it will respond by creating a plan
of action then it goes to the web to get
some API documentation then it starts
writing some code then it runs it it
gets an error it fixes its code and
continues doing this in an infinite Loop
until it solves the original problem
it's similar to tools like Auto GPT
where an llm is the base technology but
you give it the ability to perform
actions and then react to the feedback
that you get from those actions Devon is
already smashing other tools on the
software engineering Benchmark which is
a test that determines if AI can solve
real world issues on GitHub generally
speaking AI sucks really hard at this
Benchmark GPT 4 only gets the job done
1.74% of the time while Devon is
currently sitting at 13.86% that's a
huge Improvement but a tool that can
only solve GitHub issues 133% of the
time is not quite good enough to replace
most software Engineers today although
this number will likely improve in the
future if things are going to get really
lit though when tools like this start
doing everything in parallel like
Google's Alpha coder which currently
beats 85% of competitive programmers and
it does that by using an llm to generate
thousands of possible solutions in
parallel then picks the best one in the
future you'll be able to post a job just
like you would on upwork and 10 minutes
later Devon will come back with a
thousand different apps and you can
choose the best one in fact Devon is
already doing real jobs on upwork and
getting paid for it so I guess that
makes it official they took our jobs
your job your job your job can learn new
technologies it can build and deploy
apps it can fix bugs and existing code
bases train its own AI models train its
own AI models train its own AI models
and do all kinds of other stuff pretty
impressive and the company itself is
backed by Peter the's Founders fund
along with the Callis and brothers from
stripe and a bunch of other Heavy
Hitters from Silicon Valley and
cognition is not the only stealth
startup in this game there's also magic
dodev which has been funded with over
100 million and has a shared investor of
elad Gill who's also made investments
into mistal and perplexity AI it's naive
to think think that Silicon Valley
doesn't want to replace programmers they
absolutely do and whoever does it first
is going to make a ton of money but
there's really no point in being a dumer
for one there's a very high probability
that this technology will be like
self-driving cars or 3D printing which
promise to revolutionize the world but
in the grand scheme of things never
delivered on those promises currently
the only thing that Devon can do is bang
out crappy little demos and anyone
that's used AI tools over the last year
know that they're extremely useful for
simple problems but as soon as you get
into more complex problems they become
counterproductive and end up hurting
your code more than helping it however
there's a lot of smart people who think
that problem will be solved like Jensen
Wong recently made this bombshell
statement it is our job to create
Computing technology such that nobody
has to program everybody in the world is
now a programmer this is a miracle of
artificial intelligence but even if
Devon succeeds and coding becomes an
archaic skill there is a solution to
that depressing outcome and that of
course is the one daily pill I'm working
on with fiser it's a dimethyl tryptamine
based gene therapy that rewires your
brain for optimal coding performance
common side effects may include headache
diarrhea geometric hallucinations ego
death and physical death so don't let
the robots take your job ask your doctor
if getting fir ship pilled is right for
you this has been the code report thanks
for watching and I will see you in the
next one
5.0 / 5 (0 votes)