技術部落格

集結國內外精選文章,掌握最新雲端技術新知與應用
Loading...
將 GCP 帳單輸出至 BigQuery,監控管理雲端成本 雲端計算的靈活性和可擴展性意味著你的使用量可能會大幅波動,以因應日常需求。當我們使用"用多少,付多少"的計價模式,顧客會希望我們能讓他們更好地掌握他們的費用。 掌握帳單的先決條件,就是能更好地造訪用戶的使用情況和帳務明細。而 GCP 的帳單輸出至 BigQuery 的功能正式釋出,令您能比以往更及時地查看您的GCP成本。 帳單輸出到 BigQuery,是將現有帳單輸出到 CSV/JSON 文件的一種新的改進版本,可將您的雲端使用數據直接...
本文主要會介紹 Google Merchant Center 結合 BigQuery 的應用。具體而言,本文會提到 Merchant Center 的相關背景知識,以及如何在 Merchant Center 和 BigQuery 這兩個系統之間傳輸資料。此外,本文也會討論到應用這些資料的使用案例。 什麼是 Merchant Center? Merchant Center 是一種工具,可以將您的產品數據提供給 Google Shopping 和其他Google 服務,讓您的商品能夠在 Google...
BigQuery authorized view 可以授權特定的用戶或是群組查看權限,特定的用戶及群組也不會有更動到原始 BigQuery 資料的風險,只會有查詢資料的權限。此教學將帶您手把手建立 BigQuery authorized view。 建立一個 source dataset # 假如您已經有建立好的 source dataset,則可以略過此步驟 Step 1 前往 GCP console > BigQuery Step 2 左邊導覽列點選欲建立 dataset 的 Proj...
編輯註:全球金融機構-匯豐銀行 (HSBC) 與 Google Cloud 密切合作,使用自動化工具將舊資料倉儲搬遷到 BigQuery,這讓它們在資料分析上有很大的進展,維持資料的高真實性。 匯豐銀行為 66 個國家/地區的 3,900 萬客戶 (涵蓋消費者和企業) 提供數位化服務,在 21 個地區維護資料中心,並擁有超過 94,000 台伺服器。在打造基礎設施的同時,匯豐銀行不斷遇到容量的挑戰,這限制了業務的發展。隨著資料增長,HSBC 希望可以多加利用這些資料打造更好的金融服務,但礙於過去...
Google Cloud 宣佈了一項資料倉儲遷移服務,讓符合資格的客戶能夠更輕鬆地將傳統資料倉儲 (例如:Teradata、Netezza) 搬遷到 Google Cloud BigQuery,不必再擔心維運相關事務。 過去數十年來,企業一直仰賴自身的資料倉儲來收集和儲存其最有價值的數據。但是,傳統的資料倉儲建置成本昂貴,缺乏靈活性且難以維護,而且對於許多人來說,它們已無法滿足當今的業務需求。現在企業需要的是一種簡單、具擴展性的方式來儲存所有數據,並利用進階分析工具來幫助他們找到有價值的洞見。因...
本篇是此系列文的第二篇 (延伸閱讀第一篇),系列文將涵蓋以下列點式的內容,本篇文章則是針對「流量來源」、「地理區域」、「平台或裝置」、「網頁追蹤」進行探討: BigQuery 中的 Google Analytics 資料簡介 查詢多個資料表 使用者 工作階段 時間 流量來源 地理區域 平台或裝置 網頁追蹤 事件追蹤 目標追蹤 加強型電子商務(交易) 電子商務(產品) 加強型電子商務(產品) 自訂維度與自訂指標 自訂管道分組 intraday 報表 即時報表與檢視 流量來源 以下的查詢範例包含所有...
本篇是此系列文的第三篇,系列文將涵蓋以下列點式的內容,本篇文章則是針對「事件追蹤」、「目標追蹤」、「加強型電子商務(交易)」、「電子商務(產品)」、「加強型電子商務(產品)」進行探討: BigQuery 中的 Google Analytics 資料簡介 查詢多個資料表 使用者 工作階段 時間 流量來源 地理區域 平台或裝置 網頁追蹤 事件追蹤 目標追蹤 加強型電子商務(交易) 電子商務(產品) 加強型電子商務(產品) 自訂維度與自訂指標 自訂管道分組 intraday 報表 即時報表與檢視 事件...
本篇是此系列文的第三篇,系列文將涵蓋以下列點式的內容,本篇文章則是針對「事件追蹤」、「目標追蹤」、「加強型電子商務(交易)」、「電子商務(產品)」、「加強型電子商務(產品)」進行探討: BigQuery 中的 Google Analytics 資料簡介 查詢多個資料表 使用者 工作階段 時間 流量來源 地理區域 平台或裝置 網頁追蹤 事件追蹤 目標追蹤 加強型電子商務(交易) 電子商務(產品) 加強型電子商務(產品) 自訂維度與自訂指標 自訂管道分組 當日 (intraday) 資料表 即時報表...
「資料 / 資料倉儲」在企業的決過程中扮演關鍵角色,這也是為甚麼許多企業正在從傳統資料倉儲的孤島式方法轉為使用現代資料倉儲; 因為現代資料倉儲可以提供先進的功能,滿足不斷變化的需求。Google Cloud 經常與客戶合作開展資料倉儲遷移專案,包括幫助匯豐銀行遷移到 BigQuery,減省了 600 多個報表以及多個相關應用程式和 data pipeline。Google 甚至組建了一個遷移用的框架,幫助各位用戶了解,該如何為遷移的每個階段做好準備以降低風險,並且在前期定義好一個清晰的商業案例,...
Unity Technologies 是全球創作與運行即時 3D 應用 (Real-Time 3D, RT3D) 的佼佼者。Unity 所建構、營運的服務每個月觸及數十億的終端用戶,還有許多外部服務支援金融交易、行銷等項目。而這些服務及系統所產生的資料都非常重要,有利於 Unity 更加了解業務營運與服務狀況。為了增加資料的可見度與開發這些資料的潛能,Unity 必須剖析資料倉儲並鞏固其資料來源,以便更有效提供、管理資料。 集中整合資料服務 Unity 處理的資料量非常巨大,每個月有超過 30 ...
「即時串流資料」已逐漸成為大勢所趨。根據 IDC 預測,到了 2025 年,有 25% 的資料都將會以「即時」(real-time) 的形式存在。隨之而來的,就是企業也會藉由即時資料來輔助決策。那究竟是什麼改變,帶動了這樣的趨勢呢?數位化的加速是直接因素之一。舉例來說,這些「即時資料」,可能來自各種行動裝置、數位通訊、電子商務、網路購物或數位媒體,甚至是工廠內的物聯網設備⋯⋯等。 對企業來說,未來的營運挑戰之一,就是要能駕馭這些即時串流資料,並借助資料洞察,來剖析市場、提高競爭力,更重要的是,改...
Google Cloud Next OnAir 於台北時間 7 月 15 日正式登場,為讓台灣網友共襄盛舉,Google 也將在 7 月 29 日起舉行 Next Recap OnAir 全中文講次免費報名,濃縮 Next OnAir 的精華。 今年活動涵蓋業界最新雲端技術與產業洞察,包括 Google 近期發表的全新 BigQuery Omni、Confidential Computing 技術與 G Suite 全新功能,還宣布多項產業深度合作;當中德意志銀行、高盛集團、寶僑家品、福斯體育台...
隨著出版市場的快速發展,Forbes 經歷了重大的數位轉型改革,策略持續向「用戶為中心」靠攏,藉此洞察讀者、為出版內容做分析、評估與分類。Forbes 選擇與 Google 合作實現其數位轉型目標;包括使用 Google Analytics 360 來管理和追蹤內容,透過 Google Ad Manager 來提高廣告收入並使用創新的廣告解決方案,並於近期完成由 Forbes.com 遷移到 Google Cloud 的工作。 「Google 提供的核心平台,支援了我們的三大業務面向:內容、銷售...
商業分析師或資料科學家經常會需要大量時間處理文本資料,以便透過 Google Cloud 強大的資料倉儲 BigQuery 進行分析。而有時資料的形式可能為 CSV 檔,CSV 檔裡面的單個儲存格內,可能又有許多換行或表情符號,造成匯入至 BigQuery 時的麻煩。這時,Google Sheets 試算表就派上用場了!歡迎繼續閱讀,教您手把手將 CSV 檔匯入到 BigQuery,完成你的 ELT 工作。 以 Google Sheets 為中介,建立 ELT pipeline 無論是從 Web...
BigQuery BI Engine 是一個快速且純記憶體操作的資料分析服務。透過使用 BI Engine,BigQuery 的查詢效能可以提升至亞秒級,並且支援高 concurrency。BI Engine 與大家熟悉的 Google 工具 (例如 Google Data Studio) 整合在一起,加速數據的探索和分析。借助 BI Engine,你可以在 Data Studio 中構建內容豐富的互動式 dashboard 和報表,而無需妥協於性能、規模、安全性或資料即時性。 BI Engin...
回到頂端