The road
open-menucloseme
The Road
Series icon
Effective Cloud Computing GitOps Serverless Amazon Builders Library
About
🌐
English
The road
githubtwitterstackoverflowrss
  • 无服务器架构的Docker镜像数据分析应用

    calendarMay 4, 2020 · 2 min read · 云计算 AWS Big Data Data Lakes Analytics AWS Athena Cloud Native docker  ·
    Share on: twitterfacebooklinkedincopy
    无服务器架构的Docker镜像数据分析应用

    近期对Docker镜像做了些数据分析,这里分享一下利用云原生技术快速且低成本的实现任意数量的数据分析。

    之前通过文章介绍了不用拉取Docker镜像就可获取镜像的大小的一种方法,通过其中的示例脚本,我们可以获取到待分析的原始数据。

    比如nginx镜像的部分原始数据(csv格式)如下,

     1
     2
     3
     4
     5
     6
     7
     8
     9
    10
    11
    12 …

    Read More
  • 基于CodeCommit代码管理的无服务器架构Devops

    calendarMar 26, 2020 · 3 min read · 云计算 AWS Devops CodeCommit Git  ·
    Share on: twitterfacebooklinkedincopy
    基于CodeCommit代码管理的无服务器架构Devops

    Github/Gitlab已经成为众多开发者非常熟悉的代码协作平台,通过他们参与开源项目或实施企业内部项目协作。

    AWS也提供了托管的、基于Git、安全且高可用的代码服务CodeCommit。CodeCommit主要针对企业用户场景,所以他并没有社交功能以及代码仓库fork功能,是否CodeCommit就无法实现Github基于Pull Request的协同工作模式呢?


    Read More
  • AWS发布更快、更便宜、更易用的HTTP APIs

    calendarMar 13, 2020 · 2 min read · 云计算 FaaS AWS AWS API Gateway Serverless Computing  ·
    Share on: twitterfacebooklinkedincopy
    AWS发布更快、更便宜、更易用的HTTP APIs
    AWS在3月12日正式发布了新一代的API网关 -- HTTP APIs。AWS发布的第一代API Gateway服务已经快5年了,通过这些年来大规模服务客户的心得以及客户反馈,由此重新构建了更快(相比第一代网关60%的延迟减少)、更便宜(至少节省71%的费用)、更易用的第二代网关服务。
    Read More
  • AWS Cloud Debugging初探

    calendarDec 26, 2019 · 2 min read · AWS AWS Toolkit AWS ECS AWS Fargate IntelliJ IDEs  ·
    Share on: twitterfacebooklinkedincopy
    AWS Cloud Debugging初探
    在re:Invent 2019之前,AWS Toolkit发布了Cloud Debugging beta功能。该功能支持在IntelliJ IDEs(IntelliJ, PyCharm, Webstorm, 以及 Rider)中远程调试 ECS Fargate 容器中执行的应用程序。
    Read More
  • AWS Batch简介

    calendarDec 25, 2019 · 2 min read · AWS Batch Infrastructure as Code  ·
    Share on: twitterfacebooklinkedincopy
    AWS Batch简介
    AWS Batch是一个全托管的批处理调度服务,它可为用户管理所有基础设施,从而避免了预置、管理、监控和扩展批处理计算作业所带来的复杂性。当然AWS Batch已与 AWS 平台原生集成,让用户能够利用 AWS 的扩展、联网和访问管理功能。让用户轻松运行能够安全地从 AWS 数据存储(如 Amazon S3 和 Amazon DynamoDB)中检索数据并向其中写入数据的作业。AWS Batch可根据所提交的批处理作业的数量和资源要求预置计算资源并优化作业分配。能够将计算资源动态扩展至运行批处理作业所需的任何数量,从而不必受固定容量集群的限制。AWS Batch还可以利用 Spot 实例,从而进一步降低运行批处理作业产生的费用。 …
    Read More
  • 实战Aliyun EDAS应用迁移AWS

    calendarDec 2, 2019 · 1 min read · AWS EDAS Migration Microservice Infrastructure as Code  ·
    Share on: twitterfacebooklinkedincopy
    实战Aliyun EDAS应用迁移AWS

    近期实践了将阿里云EDAS微服务应用迁移到AWS上,在这里分享一下迁移方案。 该方案涉及了以下三个方面, 微服务应用集群。在AWS上采用的ECS


    Read More
  • AWS RDS数据库日志分析及展示

    calendarNov 5, 2019 · 1 min read · AWS Serverless Analysis  ·
    Share on: twitterfacebooklinkedincopy
    AWS RDS数据库日志分析及展示

    托管的RDS数据库已经是云计算服务中非常成熟的服务,绝大部分的云计算用户会采用RDS服务来提升数据库服务的可用性同时减少数据库的各类运维事务。

    AWS RDS服务支持开启和查询各类的数据库日志,包括常规日志、慢日志、错误日志和审计日志。但RDS服务默认提供的日志查看工具仅仅类似文本查看器,无法针对日志数据做统计和查看历史滚动的存档。


    Read More
  • 使用Openswan连接AWS VPC

    calendarSep 16, 2019 · 2 min read · AWS AWS VPN Site-to-Site VPN Openswan  ·
    Share on: twitterfacebooklinkedincopy
    使用Openswan连接AWS VPC
    业务上云之后,经常也有需求将多云、数据中心或办公室的私有网络同云端的私有网络建立连接。AWS Site-to-Site VPN正是AWS提供的托管VPN服务,我们可以在另一端的私有网络通过Openswan同AWS VPC网络建立基于IPSec协议的安全连接。
    Read More
  • AWS CDK简介

    calendarSep 8, 2019 · 3 min read · AWS AWS CDK Infrastructure as Code  ·
    Share on: twitterfacebooklinkedincopy
    AWS CDK简介
    Infrastructure as Code(架构即代码)一直是衡量公有云是否支持良好运维能力的重要指标。作为云计算领先的AWS,通过服务CloudFormation来编排云环境中的基础设施资源。不过由于CloudFormation是使用YAML/JSON编写的声明式语言,不善于处理逻辑,编写繁琐且不利于调试排错,对于新上手的Devops工程师来说也有不小的学习曲线。三方开源的工具Terraform同样没有很好解决CloudFormation存在的这些问题。
    Read More
  • 无服务器架构的域名重定向服务

    calendarAug 27, 2019 · 2 min read · 云计算 AWS AWS S3 AWS Lambda AWS CDK  ·
    Share on: twitterfacebooklinkedincopy
    无服务器架构的域名重定向服务

    业务时常有需求将某个域名(A)的访问重定向到其他域名(B),即使实现这样一个很简单的需求通常也需要部署Web服务器(例如Nginx),为域名A的请求返回302响应,并提供新的Location地址重定向到域名B。现在基于云计算服务,我们可以使用一些托管服务来实现同样的事情,无需管理服务器和维护应用,同时做到最低成本实现该需求。

    接下来将介绍如何利用AWS上的服务实现该需求。


    Read More
    • ««
    • «
    • 1
    • 2
    • 3
    • 4
    • »
    • »»

Kane Zhu photo

Kane Zhu

Just a blog for personal experience or thoughts, mostly tech-related.
Read More

Recent Posts

  • Define your API via OpenAPI definition on AWS
  • Setup DevOps pipeline with few code
  • Federated OIDC login with Cognito and Amplify
  • Protect website with Cognito
  • Distribute the website globally
  • Build no code restful HTTP API with API Gateway and DynamoDB
  • Build serverless web application with AWS Serverless
  • FluxCD GitOps debugging tip

Categories

BLOGGING 60 KUBERNETES 10 TRIP 5

Series

EFFECTIVE-CLOUD-COMPUTING 38 SERVERLESS-COMPUTING 15 GITOPS 6 AMAZON-BUILDERS-LIBRARY 2

Tags

AWS 40 ECLIPSE 21 云计算 16 AWS-CDK 15 TIP 15 KUBERNETES 14 EQUINOX 10 GIT 9 SERVERLESS 8 CONTINUOUS-DELIVERY 7 GITOPS 7 OSGI 7 P2 7 阿里云 7
All Tags
ALIYUN1 AMAZON-ALEXA1 AMAZON-API-GATEWAY1 AMAZON-BUILDERS-LIBRARY2 AMAZON-EKS2 AMAZON-NEPTUNE1 AMAZON-SQS1 AMPLIFY2 ANALYSIS1 ANALYTICS1 ANGULARJS1 API-GATEWAY3 ARCHITECTURE1 ARCHSUMMIT1 ARGOCD1 ATHENA1 AUTHENTICATION2 AUTHORIZATION1 AWS40 AWS-API-GATEWAY1 AWS-ATHENA1 AWS-CDK15 AWS-CLOUDFORMATION2 AWS-ECR1 AWS-ECS1 AWS-EKS2 AWS-FARGATE1 AWS-FAULT-INJECTION-SIMULATOR1 AWS-FIS1 AWS-LAMBDA5 AWS-S32 AWS-SECRETS-MANAGER1 AWS-STEP-FUNCTIONS1 AWS-TOOLKIT1 AWS-VPN1 BATCH1 BIG-DATA1 BUILD2 BUNDLE1 CD6 CDK-CONSTRUCT2 CERTIFICATE2 CHAOS-ENGINEERING1 CLEARCASE2 CLOUD-NATIVE1 CLOUDFRONT1 CODE-SIGNING1 CODECOMMIT1 CODEPIPELINE1 COGNITO2 COMPILE1 CONFIGURATION2 CONSTRUCT-HUB1 CONTINUOUS-DELIVERY7 CONTINUOUS-DEPLOYMENT2 COST1 CROSSPLANE1 DAEMON1 DATA-LAKES1 DEBUG2 DEBUGGING1 DEVOPS6 DINGTALK4 DJANGO1 DOCKER6 DOCKER-SWARM2 DUAL-MONITOR1 DYNAMODB1 ECLIPSE21 EDAS1 EKS4 ENCODING1 EQUINOX10 EXTERNAL-SECRETS-OPERATOR1 FAAS6 FEATURE1 FILEVAULT1 FIREFOX1 FLUX6 GDB1 GERRIT2 GIT9 GITOPS7 GLUE1 GRAPH-DATABASE1 GROOVY1 HELM3 HOWTO1 IAM3 IBM-NOTES1 INFRASTRUCTURE-AS-CODE5 INTELLIJ-IDES1 ISTIO1 JAVA5 JENKINS3 JENKINS-CLI2 JETTY1 JNI1 JRE1 KUBERNETES14 LINUX4 LUCENE1 MAC-OSX1 MACOS-MONTEREY1 MACOSX2 MAKEFILE1 MAVEN1 METAVERSE1 MICROSERVICE1 MIGRATION1 MINGW1 MONGODB1 MOUNTAIN-LION1 NAT1 NATIVECODE1 NETWORK1 NFT1 NGINX1 NPM1 OAS1 OAUTH22 OH-MY-ZSH1 OPENAPI1 OPENID1 OPENID-CONNECT1 OPENSWAN1 OSGI7 OSS1 OSSFS1 P27 PAY1 PDE2 PERFORMANCE1 PERFORMANCE-TUNING2 PHP1 PROFILE2 PROJEN1 PROTON1 PYTHON1 QCON1 RCP3 RESILIENCE-ENGINEERING1 S31 SALZBURG3 SEO1 SERVERLESS8 SERVERLESS-COMPUTING6 SERVICE-CATALOG1 SERVICE-MESH1 SESSION-MANAGEMENT1 SHELL2 SINGLE-PAGE-APP1 SITE-TO-SITE-VPN1 SMTP1 SOLR1 SONATYPE-NEXUS2 SPRING2 SPRING-BOOT1 SPRING-CLOUD1 SPRING-CLOUD-FUNCTION1 SPRING-FRAMEWORK1 SPRING-SESSION1 SSH3 SSP1 SYSTEM-DESIGN2 TIP15 TOUR3 TRAVEL3 TRICK1 TROBULE-SHOOTING1 TROUBLE-SHOOTING1 TROUBLESHOOT3 TYCHO1 UBUNTU1 UBUNTU-14041 UPDATE1 URL-HANDLER-SERVICE1 WEB-2.02 WECHAT2 WEIXIN2 WORKAROUND1 ZEND-CE1 ZEND-DEBUGGER1 ZSH1 云计算16 会议2 元宇宙1 公众平台1 函数计算3 工程效率1 微信1 技巧1 搜索引擎优化1 支付1 架构2 注册表1 混沌工程1 网站架构1 邮件转发1 钉钉4 阿里云7
[A~Z][0~9]
The road

Copyright 2006-  THE ROAD. All Rights Reserved

to-top