Sticker shock zet ceo's aan het denken over hun AI-plannen
Anthropic
OpenAI
GitHub
Bedrijfsleiders zijn geschokt door de stijgende AI-kosten nu verbruiksgebaseerde facturering vaste tarieven vervangt. Uit een KPMG-enquête bleek dat 29% van de senior executives moeite heeft om de operationele kosten te begrijpen, en bijna de helft overweegt herziening van implementaties. Ondertussen trimt een opensourcetool van een Netflix-engineer redundante invoer om te besparen op tokenkosten.
Uit een KPMG-enquête onder meer dan 2.000 topfunctionarissen uit twintig landen blijkt dat 29% moeite heeft met het begrijpen van operationele kosten bij het opschalen van AI-implementaties in hun organisatie. Bijna de helft past de uitrolfases aan als de kosten hoger uitvallen dan de verwachte waarde. Leveranciers zoals Anthropic, OpenAI en GitHub zijn overgestapt van abonnementen met vaste tarieven naar gebruiksgebaseerde facturering per token, wat leidt tot prijsschokken. Uit onderzoek van Gartner blijkt dat de kosten voor AI-ondersteund programmeren per ontwikkelaar tegen 2028 het wereldwijde gemiddelde salaris kunnen overschrijden, vooral in regio's met lagere lonen. Een open source-tool, gemaakt door een Netflix-ingenieur, verwijdert overbodige invoer (zoals databaseschema's en logboeken) die naar LLM's wordt gestuurd, wat gebruikers honderdduizenden dollars aan tokengeruikosten bespaart. De tool maakt gebruik van 'squashers' om onnodige breedsprakigheid te verwijderen voordat de invoer wordt verstuurd.
Bron: The Register AI/ML —
origineel
