Golang database/sql 数据库断线自动重连机制解析
最近有个交接服务的数据库要升级版本,升级最后切换瞬间会有一个闪断。
这里业务侧需要确保有自动重连机制,否则会影响服务。
因为是交接的服务,得通过代码再确认一下。
最近有个交接服务的数据库要升级版本,升级最后切换瞬间会有一个闪断。
这里业务侧需要确保有自动重连机制,否则会影响服务。
因为是交接的服务,得通过代码再确认一下。
重现代码:
package main
import (
"fmt"
"io"
"net/http"
"time"
)
func main() {
client := &http.Client{
Timeout: time.Duration(3) * time.Second,
}
for i := 0; i < 100; i++ {
go func() {
for {
req, _ := http.NewRequest(http.MethodGet, "https://baidu.com", nil)
rsp, err := client.Do(req)
if err != nil {
fmt.Println("request failed", err)
continue
}
rsp.Body.Close()
body, err := io.ReadAll(rsp.Body)
if err != nil {
fmt.Println("read body failed", err)
continue
}
fmt.Println(string(body))
}
}()
}
select {}
}
启动后,随着请求越来越多,很快就出现了"cannot assign requested address"错误,服务器出现大量TIME_WAIT连接。
去年10月底,考虑到老的绿源电动车已经骑了5年,电池越来越不行,马上要冬天了,考虑换个新电动车。
到各个品牌店里转了一圈,发现都没有车子,说是新规的缘故,要到11月份才能有新车。
Open-source GenBI AI Agent that empowers data-driven teams to chat with their data to generate Text-to-SQL, charts, spreadsheets, reports, and BI.
WrenAI 是一个开源的Text-SQL 的工具,通过导入数据库结构,通过提问的方式生成SQL。
昨天像往常一样打开博客,发现评论没有加载出来。
一开始以为是手机网络问题,用电脑复现了一下,发现twikoo的js访问报错了。
细心的朋友可能会发现,我的博客图片都带上了水印。
经过博客被恶意镜像这个事情后,我一直在思考如何防止内容被恶意盗用,尤其是博客里的一些图片。
在当Hugo遇上AVIF,优化图片加载这篇文章里,使用了ImageMagick工具做了图片压缩。
当时文章最后说留了个坑,其实就是今天的这篇内容,利用ImageMagick自动给图片添加水印。
Livid大佬新搞了个支持Solana的IPFS/IPNS网关,了解到还有一个.sol
的web3域名。
Solana域名服务(SNS)的目标是提供一种去中心化且可负担的方式,将域名(.sol)和链上数据连接起来。这些链上数据可以是SOL地址、 IPFS CID、图片、文本、或者任何其它的东西。
五一的时候带娃骑过南边这段,网上查了说北边这段不好骑,难得2号下午有空,决定先自己走一遍看看。
从家附近的奥北森林公园开始,骑行到沙河水库,整个行程近30公里,耗时3个小时左右。
早上5点半起床洗漱,6点出门打车直奔清河站,6点50的火车S515清河-雁栖湖。
虽然坐地铁经常路过清河站,但还是第一次来清河站坐车。
我们提前20分钟到的车站,已经开始排队了。
这篇文章会介绍基于Github Workflow使用ImageMagick生成AVIF图片,来优化Hugo站点的加载速度。
上周末在搭建个人锻炼页面时,遇到个Github Pages
部署的困惑。
看了running_page
项目文档,是支持部署到Github Pages
页面的,对应的操作流程定义在github/workflows/gh-pages.yml文件。
- name: Install dependencies
run: pnpm install
- name: Build
run: PATH_PREFIX=/${{ github.event.repository.name }} pnpm build
- name: Upload artifact
uses: actions/upload-pages-artifact@v3
with:
# Upload dist repository
path: './dist'
- name: Deploy to GitHub Pages
id: deployment
uses: actions/deploy-pages@v4
核心逻辑就是上面这段。
中午的时候,突然收到一条消息,打开一看,提示我的Google Adsense
审核通过了。
偶然发现Google Adsense
里居然有40美金,想起来是之前老博客加的广告。
本文会介绍如何接入filebase
的Names(IPNS)服务,使你的IPFS
站点持久在线。
周末更新博客时,发现workflow的上传IPFS任务执行失败了。
$ go install google.golang.org/protobuf/cmd/protoc-gen-go@latest
$
$ protoc-gen-go --version
protoc-gen-go v1.34.2
$
$ sh make.sh
user.pb.go:123:45: undeclared name: any (requires version go1.18 or later)
$
流水线编译报错,其中make.sh
文件代码:
...
protoc -I=./ --proto_path=./ --go_out=./ --go_opt=paths=source_relative user.proto
...
go build
同样的代码在本机编译就没问题,但是放到流水线里编译就报上面的错误。
4月底的时候,Livid大佬提醒,Cloudflare
应该是调整了IPFS Gateway
网关策略,我的IPFS镜像博客无法访问了。
没查到Cloudflare
的调整说明,不过还好IPFS
官方也提供了公共网关gateway.ipfs.io
,将域名解析改到官网网关。
302跳转的跨域问题
请求
GET /302 HTTP/1.1
Host: liudon.xyz
Origin: https://www.baidu.com
User-Agent: Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/124.0.0.0 Safari/537.36
返回
HTTP/1.1 200 OK
Cache-Control: private, max-age=0, no-store, no-cache, must-revalidate, post-check=0, pre-check=0
Cf-Ray: 88535773eaf5107e-HKG
Content-Length: 143
Content-Type: text/html
Date: Fri, 17 May 2024 11:42:00 GMT
Expires: Thu, 01 Jan 1970 00:00:01 GMT
Location: https://liudon.org
Server: cloudflare
Vary: Accept-Encoding
浏览器报错
什么是sqlcommenter?
sqlcommenter is a suite of middlewares/plugins that enable your ORMs to augment SQL statements before execution, with comments containing information about the code that caused its execution. This helps in easily correlating slow performance with source code and giving insights into backend database performance. In short it provides some observability into the state of your client-side applications and their impact on the database’s server-side.
在gorm
下实现sqlcommenter过程中,遇到一些问题,顺便把gorm
整个流程梳理了一遍,整理记录一下。
gorm使用示例
package main
import (
"gorm.io/driver/mysql"
"gorm.io/gorm"
)
type Product struct {
gorm.Model
Code string
Price uint
}
func main() {
// 参考 https://github.com/go-sql-driver/mysql#dsn-data-source-name 获取详情
dsn := "user:pass@tcp(127.0.0.1:3306)/dbname?charset=utf8mb4&parseTime=True&loc=Local"
db, err := gorm.Open(mysql.Open(dsn), &gorm.Config{})
var product Product
db.First(&product, 1) // 根据整型主键查找
}
我们以First
查询为例,看一下是怎么转成具体sql的。
18年的时候办了张工银亚洲的银行卡,好几年没有用过了。
今年想起来了,发现网银登不上了,密码忘了。
最悲剧的是,试了超过10次,账户冻结了。
打95588咨询了一下,说是可以内地见证方式修改密码,只需要带上港澳通行证和身份证即可。
这是当前的博客架构,文件保存在Github
仓库,通过Cloudflare Page
提供访问。
众所周知,在国内,Cloudflare
的CDN属于反向加速,平均耗时在1.5s左右。
记录暴雪下普通打工人的生活。
北京的雪已经连着下了两天了。
12月11日,也是因为下雪,晚上打车打到10点半才叫到车。
所以这次下雪后,晚上就早走了。
继续我们的博客优化之旅,本篇内容我们将介绍如何使用Hugo
实现响应式和优化的图片。
在之前文章里,通过腾讯云数据万象实现了图片优化能力,具体的可参考文章累计布局偏移修复方案改进 —— 自动生成图片宽高。
经过一段运行后,发现这里有一个弊端。
Run hugo --gc --minify --cleanDestinationDir
Start building sites …
hugo v0.119.0-b84644c008e0dc2c4b67bd69cccf87a41a03937e linux/amd64 BuildDate=2023-09-24T15:20:17Z VendorInfo=gohugoio
ERROR Failed to get JSON resource "https://static.***.com/64412246-9050f100-d0c1-11e9-893a-f9b0766533ad.png?imageInfo&t=1698674110": Get "https://static.***.com/64412246-9050f100-d0c1-11e9-893a-f9b0766533ad.png?imageInfo&t=1698674110": stream error: stream ID 1; STREAM_CLOSED; received from peer
ERROR Failed to get JSON resource "https://static.***.com/SkRx5uFwQ8Cliyq.jpg?imageInfo&t=1698674110": Get "https://static.***.com/SkRx5uFwQ8Cliyq.jpg?imageInfo&t=1698674110": stream error: stream ID 3; STREAM_CLOSED; received from peer
随着图片数量增多,因为需要调接口查询图片信息,这里构建耗时变长,同时也特别容易出现超时导致构建失败。
Google Analytics
是一款优秀的流量分析服务,集成方便,使用简单。
最近在优化页面访问速度,发现Google Analytics
是一个优化点。
国内访问Google Analytics
很慢,同时还面临着各种广告屏蔽插件拦截。
对于一个新站点来说,总是想着能让搜索引擎快点收录网站内容。
今天,我们就来介绍一种利用Google Indexing API
接口,通过Github Actions
实现部署时通知Google
抓取页面内容。