Cloudflare Basin fer í almenna notkun — útflutningsgjaldið hverfur

Cloudflare tilkynnti 1. október 2026 að Cloudflare Basin væri komið í almenna notkun og að flytja mætti gögn úr R2 Object Storage án útflutningsgjalds; í sömu kynningu lýsti Dax Raad, meðstofnandi Anomaly, flutningi gagnaleiðslu fyrirtækisins frá AWS S3 og Athena sem „a cleaner, serverless architecture“. Basin sameinar móttöku atburðagagna, Apache Iceberg-töflur í R2 og SQL-fyrirspurnir. Fyrir þróunarteymi þýðir það að þessi gagnaleið er í boði sem rekin þjónusta án þess að teymið setji upp eigin gagnaklasa.

Í frétt The Register er rakið hvernig Cloudflare Data Platform fór úr opinni prófun í almenna notkun undir nýju heiti. Cloudflare Pipelines, R2 Data Catalog og R2 SQL heita nú Basin Pipelines, Basin Catalog og Basin SQL. Gjaldfrjáls útflutningur er áfram eiginleiki R2; nýi áfanginn er almennt aðgengi að þjónustunum sem taka við gögnunum, halda utan um töflurnar og gera þær fyrirspurnarhæfar.

Frá atburði í Iceberg-töflu

Basin Pipelines tekur við atburðum í gegnum HTTP-endapunkt, tengingu við Cloudflare Workers eða Logpush fyrir annála frá Cloudflare. Leiðslan getur síðan notað SQL til að sía færslur og breyta sviðum áður en þau eru vistuð. Það leyfir teymi til dæmis að halda aðeins þeim annálum sem skipta máli fyrir greiningu og sleppa óþarfa reitum áður en þeir fara í geymslu.

Úttakið getur farið í Apache Iceberg-töflu sem Basin Catalog heldur utan um eða í JSON- og Parquet-skrár í R2. Munurinn er efnislegur: skrá í hlutageymslu er ekki sjálfkrafa tafla með lýsigögnum og skyndimyndum sem samhæfar fyrirspurnarvélar geta notað sameiginlega. Þegar leiðslan skrifar í Iceberg-töflu heldur Catalog utan um töfluskrána, svo gagnaskrárnar birtast sem eitt skilgreint gagnasafn. Teymi sem þarf aðeins að geyma skrár getur valið þá einfaldari útleið án þess að gera ráð fyrir sömu töflueiginleikum.

Basin SQL les Iceberg-töflurnar í Catalog án þess að notandinn úthluti eða stækki eigin SQL-klasa. Vélin styður meðal annars síun, samantektir og tengingar milli taflna, sem skiptir máli þegar atburðir og önnur gögn liggja í aðskildum töflum. Þannig endar gagnaleiðin ekki við að færa atburði í R2: hægt er að spyrja um þá þar sem taflan er vistuð og láta önnur samhæf verkfæri lesa sömu gögn.

Viðhald töflunnar færist til þjónustunnar

Basin Catalog tekur yfir reglubundið viðhald sem fylgir vaxandi Iceberg-töflu. Þar á meðal eru samruni smárra gagnaskráa, útrunnir skyndimyndir og hagræðing lýsigagna. Stefnur fyrir samruna má laga að einstökum töflum, meðal annars með því að velja æskilega stærð skráa. Þetta dregur úr þeirri innviðavinnu sem annars þarf til að halda töflunni læsilegri og fyrirspurnum skilvirkum þegar ný gögn bætast stöðugt við.

Pipelines veitir einnig sýn á færslur sem falla út vegna vantarandi reita, rangra gagnategunda eða annarra villna við móttöku. Tegundatengingar við Workers geta greint ósamræmi við skilgreint gagnasnið áður en nýr kóði fer í notkun. Sú aðstoð leysir þó ekki teymið undan því að ákveða hvað hver atburður merkir, hvaða reiti á að varðveita og hvaða umbreytingar eiga heima í leiðslunni.

Teymið ber áfram ábyrgð á aðgangi að gögnunum, varðveislutíma þeirra og því hvaða greiningarspurningum safnið á að svara. Það þarf líka að ákveða hvort hráar skrár eða stjórnaðar Iceberg-töflur henti hverjum gagnastraumi. Fyrir lítið þróunarteymi er verkaskiptingin því skýr: rekstur leiðslna, töfluskrár og fyrirspurnarvélar getur færst til Basin, en hönnun gagnanna og reglur um notkun þeirra verða áfram hjá eigandanum.

Engin R2-gjöld fyrir útflutning, en aðrir liðir á reikningnum

Útflutningsgjald úr R2 og gjald fyrir afhendingu úr Basin Pipelines eru ólíkir kostnaðarliðir. Samkvæmt verðskrá Basin Pipelines er móttaka gagna í streymi gjaldfrjáls; á Workers Paid-áætlun fylgja 50 GB á mánuði bæði fyrir SQL-umbreytingar og afhendingu, en umfram það kosta umbreytingar 0,04 Bandaríkjadali á GB og afhending í Parquet eða Iceberg 0,06 Bandaríkjadali á GB. Afhendingargjaldið miðast við óþjappað gagnamagn sem fer á áfangastaðinn.

Geymsla og aðgerðir í R2 eru gjaldfærðar sérstaklega, og notkun Basin Catalog og Basin SQL getur einnig bæst við. Loforðið um engan kostnað við að flytja gögn úr R2 segir því til um einn lið, ekki heildarverð þess að safna, umbreyta, geyma og lesa þau. Þetta skiptir máli ef leiðsla tekur við miklu magni en SQL-sía skilar aðeins hluta þess í töflu: vinnslan og afhendingin fylgja þá hvor sinni mælingu.

Þegar teymi ber saman geymsluleiðir breytir gjaldfrjáls útflutningur einkum dæminu ef sömu gögn eru lesin í mörgum verkfærum eða utan Cloudflare. Í samanburði á R2 og S3 er sá kostnaðarliður sérstaklega viðfangsefnið. Ytri fyrirspurnarvél hefur þó sína eigin verðlagningu, og fjöldi fyrirspurna, gagnamagn í R2 og viðhald taflnanna hafa áfram áhrif á heildarreikninginn.

Opið töflusnið skiptir máli þegar fleiri vélar lesa gögnin

Apache Iceberg gerir sömu töflu í R2 aðgengilega verkfærum sem styðja sniðið. DuckDB, Apache Spark, Snowflake og PyIceberg eru meðal þeirra sem geta tengst Basin Catalog. Teymi getur því notað Basin SQL fyrir eina tegund greiningar og aðra vél fyrir verkefni sem hún hentar betur, án þess að búa til sérstakt lokað afrit af gagnasafninu fyrir hvora leið.

Sá sveigjanleiki verður að raunverulegu vali þegar aðgangsheimildir, studdir Iceberg-eiginleikar og kostnaður ytri vélar passa við verkefnið. Opið snið eitt og sér flytur ekki rekstrarákvarðanir, skilgreiningar gagna eða heimildir á milli þjónusta. Það varðveitir hins vegar möguleikann á að skipta um lestrar- eða vinnsluvél á meðan taflan og gagnaskrár hennar eru áfram í R2.

Fyrir teymi sem vill halda fleiri greiningarleiðum opnum er afleiðingin sú að það getur byggt eina stjórnaða töflu og valið síðar hvaða samhæfa vél les hana. Sú ákvörðun þarf þá ekki að ráðast af útflutningsgjaldi Cloudflare, heldur af eiginleikum vélarinnar og kostnaði við vinnslu gagnanna.

Lestu einnig:

• Cloudflare R2 eða AWS S3: útflutningsgjöldin geta snúið dæminu
• Claude Opus 5.5 fær vatnsmerki — almenningur getur ekki sannreynt það
• Prófgráðan hverfur úr auglýsingunni en ræður enn hver fær starfið