Cerebras launches AI inference tool to challenge Nvidia
By Max A. Cherney
SAN FRANCISCO, Aug 27 (Reuters) -Cerebras Systems launched on Tuesday a tool for AI developers that allows them to access the startup's outsized chips to run applications, offering what it says is a much cheaper option than industry-standard Nvidia NVDA.O processors.
Access to Nvidia graphics processing units (GPUs) - often via a cloud computing provider - to train and deploy large artificial intelligence models used for applications such as OpenAI's ChatGPT can be difficult to obtain and expensive to run, a process developers refer to as inference.
"We're delivering performance that cannot be achieved by a GPU," Cerebras CEO Andrew Feldman told Reuters in an interview. "We're doing it at the highest accuracy, and we're offering it at the lowest price."
The inference portion of the AI market is expected to be fast-growing and attractive - ultimately worth tens of billions of dollars if consumers and businesses adopt AI tools.
The Sunnyvale, California-based company plans to offer several types of the inference product via a developer key and its cloud. The company will also sell its AI systems to customers who prefer to operate their own data centers.
Cerebras' chips - each the size of a dinner plate and called Wafer Scale Engines - avoid one of the issues with AI data crunching: the data crunched by large models that power AI applications typically won't fit on a single chip and can require hundreds or thousands of chips strung together.
That means Cerebras' chips can achieve speedier performances, Feldman said.
It plans to charge users as little as 10 cents per million tokens, which are one of the ways companies can measure the amount of output data from a large model.
Cerebras is aiming to go public and filed a confidential prospectus with the Securities and Exchange Commission this month, the company said.
Reporting by Max Cherney in San Francisco; Editing by Edwina Gibbs
Mga Kaugnay na Asset
Pinakabagong Balita
Disclaimer: Ang mga kabilang sa XM Group ay nagbibigay lang ng serbisyo sa pagpapatupad at pag-access sa aming Online Trading Facility, kung saan pinapahintulutan nito ang pagtingin at/o paggamit sa nilalaman na makikita sa website o sa pamamagitan nito, at walang layuning palitan o palawigin ito, at hindi din ito papalitan o papalawigin. Ang naturang pag-access at paggamit ay palaging alinsunod sa: (i) Mga Tuntunin at Kundisyon; (ii) Mga Babala sa Risk; at (iii) Kabuuang Disclaimer. Kaya naman ang naturang nilalaman ay ituturing na pangkalahatang impormasyon lamang. Mangyaring isaalang-alang na ang mga nilalaman ng aming Online Trading Facility ay hindi paglikom, o alok, para magsagawa ng anumang transaksyon sa mga pinansyal na market. Ang pag-trade sa alinmang pinansyal na market ay nagtataglay ng mataas na lebel ng risk sa iyong kapital.
Lahat ng materyales na nakalathala sa aming Online Trading Facility ay nakalaan para sa layuning edukasyonal/pang-impormasyon lamang at hindi naglalaman – at hindi dapat ituring bilang naglalaman – ng payo at rekomendasyon na pangpinansyal, tungkol sa buwis sa pag-i-invest, o pang-trade, o tala ng aming presyo sa pag-trade, o alok para sa, o paglikom ng, transaksyon sa alinmang pinansyal na instrument o hindi ginustong pinansyal na promosyon.
Sa anumang nilalaman na galing sa ikatlong partido, pati na ang mga nilalaman na inihanda ng XM, ang mga naturang opinyon, balita, pananaliksik, pag-analisa, presyo, ibang impormasyon o link sa ibang mga site na makikita sa website na ito ay ibibigay tulad ng nandoon, bilang pangkalahatang komentaryo sa market at hindi ito nagtataglay ng payo sa pag-i-invest. Kung ang alinmang nilalaman nito ay itinuring bilang pananaliksik sa pag-i-invest, kailangan mong isaalang-alang at tanggapin na hindi ito inilaan at inihanda alinsunod sa mga legal na pangangailangan na idinisenyo para maisulong ang pagsasarili ng pananaliksik sa pag-i-invest, at dahil dito ituturing ito na komunikasyon sa marketing sa ilalim ng mga kaugnay na batas at regulasyon. Mangyaring siguruhin na nabasa at naintindihan mo ang aming Notipikasyon sa Hindi Independyenteng Pananaliksik sa Pag-i-invest at Babala sa Risk na may kinalaman sa impormasyong nakalagay sa itaas, na maa-access dito.
