使用 C# 搭配 Playwright 來獲取網頁內容

使用 C# 搭配 Playwright 來獲取網頁內容 最近團隊有個需求,需要從網頁上抓取一些資料,雖然普遍對於網路爬蟲的第一印象都是 python,但因為團隊中多數成員都

使用 C# 搭配 Selenium 來獲取網頁內容

使用 C# 搭配 Selenium 來獲取網頁內容 最近團隊有個需求,需要從網頁上抓取一些資料,雖然普遍對於網路爬蟲的第一印象都是 python,但因為團隊中多數成員都

使用 C# 搭配 AngleSharp 來獲取網頁內容

使用 C# 搭配 AngleSharp 來獲取網頁內容 最近團隊有個需求,需要從網頁上抓取一些資料,雖然普遍對於網路爬蟲的第一印象都是 python,但因為團隊中多數成員都

使用 C# 搭配 ScrapySharp 來獲取網頁內容

使用 C# 搭配 ScrapySharp 來獲取網頁內容 最近團隊有個需求,需要從網頁上抓取一些資料,雖然普遍對於網路爬蟲的第一印象都是 python,但因為團隊中多數成員都

使用 Nexus Repository 建立 Docker Registry

使用 Nexus Repository 建立 Docker Registry 之前筆記 使用 Docker 建立 Nexus3 的 Image Registry 紀錄到如何使用 Sonatype Nexus Repository 來建立 Docker Image Registry,最近遇到幾次需要使用 Docker Registry 的需求,但之前筆記 使用 Docker 建

如何 Debug Kubernetes Pod

如何 Debug Kubernetes Pod 團隊從 .NET 8 問市之後就開始逐步將舊有的專案升級到 .NET 8,隨著所有專案都升級完成之後,團隊便開始套用 Microsoft PM - Richard Lander 發表的 Announcing .NET Chiseled Containers 做法:將 base image

使用 Cloud Run Job 來處理 Error Reporting

使用 Cloud Run Job 來處理 Error Reporting 原本打算透過之前筆記 為 GCP Cloud Run 加上呼叫 key 保護 的內容來處理 Error Reporting 的錯誤通知,我的實作方式是設定 Error Reporting 的 Notification 透過 webhook 的方式發送到 Cloud Ru

為 GCP Cloud Run 加上呼叫 key 保護

為 GCP Cloud Run 加上呼叫 key 保護 之前筆記 使用 Google Api Gateway 為 Google Cloud Functions 加上 API Key 保護 紀錄如何透過 Api Gateway 設定 key 來保護 Cloud Functions 避免被無差異呼叫攻擊,最近剛好有個類似的需求,雖

使用官方 image 來建立 Kafka

使用官方 image 來建立 Kafka 從 Kafka 2.8 發表 KRaft mode (KRaft early access) 以來,我就嘗試將 KRaft 導入團隊,逐步取代 Zookeeper,一開始配合官方建議: KRaft beta 功能只是在開發環境先試

ASP.NET ProblemDetail 錯誤處理

ASP.NET ProblemDetail 錯誤處理 之前筆記 ASP.NET 8 新增的錯誤處理 主要是想嘗試 ASP.NET 8 新增的錯誤處理功能,不過剛好官網文件 Microsoft Learn:Handle errors in ASP.NET Core 有提到其他錯誤處理做法,所以一併簡單紀

ASP.NET 8 新增的錯誤處理

ASP.NET 8 新增的錯誤處理 ASP.NET Core 問市時提供了 Middleware 的做法:可以透過建立不同元件用做 pipeline 處理請求,讓 log、authentication、authorizat

使用 C# 與 redis 避免重複資料

使用 C# 與 redis 避免重複資料 過去在面對可能重複的資料時,常見的做法是透過關聯式資料庫的 unique key 來避免重複資料的產生,但資料庫的資源相對稀缺、加上資料庫