跳到主要內容

基於 abp vNext 和 .NET Core 開發博客項目 - 定時任務最佳實戰（三）_網頁設計公司


※如何讓商品強力曝光呢? 網頁設計公司幫您建置最吸引人的網站，提高曝光率!



以設計的實用美學觀點，規劃出舒適、美觀的視覺畫面，有效提昇使用者的心理期待，營造出輕鬆、愉悅的網站瀏覽體驗。


系列文章



  1. 基於 abp vNext 和 .NET Core 開發博客項目 - 使用 abp cli 搭建項目

  2. 基於 abp vNext 和 .NET Core 開發博客項目 - 給項目瘦身，讓它跑起來

  3. 基於 abp vNext 和 .NET Core 開發博客項目 - 完善與美化，Swagger登場

  4. 基於 abp vNext 和 .NET Core 開發博客項目 - 數據訪問和代碼優先

  5. 基於 abp vNext 和 .NET Core 開發博客項目 - 自定義倉儲之增刪改查

  6. 基於 abp vNext 和 .NET Core 開發博客項目 - 統一規範API，包裝返回模型

  7. 基於 abp vNext 和 .NET Core 開發博客項目 - 再說Swagger，分組、描述、小綠鎖

  8. 基於 abp vNext 和 .NET Core 開發博客項目 - 接入GitHub，用JWT保護你的API

  9. 基於 abp vNext 和 .NET Core 開發博客項目 - 異常處理和日誌記錄

  10. 基於 abp vNext 和 .NET Core 開發博客項目 - 使用Redis緩存數據

  11. 基於 abp vNext 和 .NET Core 開發博客項目 - 集成Hangfire實現定時任務處理

  12. 基於 abp vNext 和 .NET Core 開發博客項目 - 用AutoMapper搞定對象映射

  13. 基於 abp vNext 和 .NET Core 開發博客項目 - 定時任務最佳實戰（一）

  14. 基於 abp vNext 和 .NET Core 開發博客項目 - 定時任務最佳實戰（二）

  15. 基於 abp vNext 和 .NET Core 開發博客項目 - 定時任務最佳實戰（三）

  16. 基於 abp vNext 和 .NET Core 開發博客項目 - 博客接口實戰篇（一）

  17. 基於 abp vNext 和 .NET Core 開發博客項目 - 博客接口實戰篇（二）

  18. 基於 abp vNext 和 .NET Core 開發博客項目 - 博客接口實戰篇（三）

  19. 基於 abp vNext 和 .NET Core 開發博客項目 - 博客接口實戰篇（四）

  20. 基於 abp vNext 和 .NET Core 開發博客項目 - 博客接口實戰篇（五）

  21. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（一）

  22. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（二）

  23. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（三）

  24. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（四）

  25. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（五）

  26. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（六）

  27. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（七）

  28. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（八）

  29. 基於 abp vNext 和 .NET Core 開發博客項目 - Blazor 實戰系列（九）

  30. 基於 abp vNext 和 .NET Core 開發博客項目 - 終結篇之發布項目


上一篇(https://www.cnblogs.com/meowv/p/12974439.html)完成了全網各大平台的熱點新聞數據的抓取，本篇繼續圍繞抓取完成后的操作做一個提醒。當每次抓取完數據后，自動發送郵件進行提醒。


在開始正題之前還是先玩一玩之前的說到卻沒有用到的一個庫PuppeteerSharp。


PuppeteerSharp：Headless Chrome .NET API ，它運用最多的應該是自動化測試和抓取異步加載的網頁數據，更多介紹可以看GitHub：https://github.com/hardkoded/puppeteer-sharp 。


我這裏主要來試試它的異步抓取功能，同時它還能幫我們生成網頁截圖或者PDF。


如果沒有安裝可以先安裝一下，在.BackgroundJobs層安裝PuppeteerSharp：Install-Package PuppeteerSharp


在Jobs文件夾下新建一個PuppeteerTestJob.cs，繼承IBackgroundJob，同樣是在ExecuteAsync()方法中執行操作。


//PuppeteerTestJob.cs
 using System;
 using System.Threading.Tasks;
 
 namespace Meowv.Blog.BackgroundJobs.Jobs.PuppeteerTest
 {
     public class PuppeteerTestJob : IBackgroundJob
     {
         public async Task ExecuteAsync()
         {
             throw new NotImplementedException();
         }
     }
 }

使用 await new BrowserFetcher().DownloadAsync(BrowserFetcher.DefaultRevision); 第一次檢測到沒有瀏覽器文件會默認幫我們下載 chromium 瀏覽器。


DownloadAsync(...)可以指定 Chromium 版本，BrowserFetcher.DefaultRevision 下載當前默認最穩定的版本。


然後配置瀏覽器啟動的方式。


using var browser = await Puppeteer.LaunchAsync(new LaunchOptions
 {
     Headless = true,
     Args = new string[] { "--no-sandbox" }
 });

感興趣的可以自己看看LaunchOptions有哪些參數，我這裏指定了Headless = true 以無頭模式運行瀏覽器，然後加了一個啟動參數 "--no-sandbox"。針對Linux環境下，如果是運行在 root 權限下，在啟動 Puppeteer 時要添加 "--no-sandbox" 參數，否則 Chromium 會啟動失敗。


我們打開一個異步加載的網頁，然後獲取到頁面加載完后的HTML，以我個人博客中的某個單頁為例：https://meowv.com/wallpaper 。


//PuppeteerTestJob.cs
 using PuppeteerSharp;
 using System.Threading.Tasks;
 
 namespace Meowv.Blog.BackgroundJobs.Jobs.PuppeteerTest
 {
     public class PuppeteerTestJob : IBackgroundJob
     {
         public async Task ExecuteAsync()
         {
             await new BrowserFetcher().DownloadAsync(BrowserFetcher.DefaultRevision);
 
             using var browser = await Puppeteer.LaunchAsync(new LaunchOptions
             {
                 Headless = true,
                 Args = new string[] { "--no-sandbox" }
             });
 
             using var page = await browser.NewPageAsync();
 
             await page.SetViewportAsync(new ViewPortOptions
             {
                 Width = 1920,
                 Height = 1080
             });
 
             var url = "https://meowv.com/wallpaper";
             await page.GoToAsync(url, WaitUntilNavigation.Networkidle0);
 
             var content = await page.GetContentAsync();
         }
     }
 }

page.SetViewportAsync()設置網頁預覽大小，page.GoToAsync()語法打開網頁，WaitUntilNavigation.Networkidle0等待網頁加載完畢，使用page.GetContentAsync()獲取到HTML。


新建擴展方法，調用這個PuppeteerTestJob的ExecuteAsync()方法，調試看看效果。



HTML已經出來了，此時該幹嘛就幹嘛就可以了。


第一次運行可能會很慢，因為如果你本地不存在 Chromium 是會去幫我們下載的，因為網絡原因可能會下載的很慢，所以推薦大家手動下載。


可以使用淘寶的源：https://npm.taobao.org/mirrors/chromium-browser-snapshots/ 。


要注意的是，下載完成后的解壓的路徑不能出錯，默認下載地址是在啟動目錄下面。


Windows：..\.local-chromium\Win64-706915\chrome-win 、 Linux：../.local-chromium/Linux-706915/chrome-linux


接下來試試生成PDF和保存圖片功能，使用方式也很簡單。


await page.PdfAsync("meowv.pdf",new PdfOptions { });
 await page.ScreenshotAsync("meowv.png", new ScreenshotOptions
 {
     FullPage = true,
     Type = ScreenshotType.Png
 });

這裏只做簡單的展示，page.PdfAsync()直接生成PDF文件，同時還有很多方法可以自己調用page.試試，PdfOptions選項中可以設置各種參數。


page.ScreenshotAsync()保存圖片，ScreenshotOptions中FullPage可以設置保存圖片為全屏模式，圖片格式為Png類型。



※綠能、環保無空污,成為電動車最新代名詞，目前市場使用率逐漸普及化



台中景泰電動車行只是一個單純的理由，將來台灣的環境，出門可以自由放心的深呼吸，讓空氣回歸自然的乾淨，減少污染，留給我們下一代有好品質無空污的優質環境




可以看到項目根目錄已經生成了圖片和PDF，感覺去試試吧。


接下里來實現發送郵件的功能。


我這裏發郵件的賬號是用的騰訊企業郵箱，也可以用普通郵箱開通SMTP服務即可。


在appsettings.json配置收發郵件的賬號等信息。


//appsettings.json
   "Email": {
     "Host": "smtp.exmail.qq.com",
     "Port": 465,
     "UseSsl": true,
     "From": {
       "Username": "123@meowv.com",
       "Password": "[Password]",
       "Name": "MEOWV.COM",
       "Address": "123@meowv.com"
     },
     "To": [
       {
         "Name": "test1",
         "Address": "test1@meowv.com"
       },
       {
         "Name": "test2",
         "Address": "test2@meowv.com"
       }
     ]
   }

然後再AppSettings中讀取配置的項。


//AppSettings.cs
 public static class Email
 {
     /// <summary>
     /// Host
     /// </summary>
     public static string Host => _config["Email:Host"];
 
     /// <summary>
     /// Port
     /// </summary>
     public static int Port => Convert.ToInt32(_config["Email:Port"]);
 
     /// <summary>
     /// UseSsl
     /// </summary>
     public static bool UseSsl => Convert.ToBoolean(_config["Email:UseSsl"]);
 
     /// <summary>
     /// From
     /// </summary>
     public static class From
     {
         /// <summary>
         /// Username
         /// </summary>
         public static string Username => _config["Email:From:Username"];
 
         /// <summary>
         /// Password
         /// </summary>
         public static string Password => _config["Email:From:Password"];
 
         /// <summary>
         /// Name
         /// </summary>
         public static string Name => _config["Email:From:Name"];
 
         /// <summary>
         /// Address
         /// </summary>
         public static string Address => _config["Email:From:Address"];
     }
 
     /// <summary>
     /// To
     /// </summary>
     public static IDictionary<string, string> To
     {
         get
         {
             var dic = new Dictionary<string, string>();
 
             var emails = _config.GetSection("Email:To");
             foreach (IConfigurationSection section in emails.GetChildren())
             {
                 var name = section["Name"];
                 var address = section["Address"];
 
                 dic.Add(name, address);
             }
             return dic;
         }
     }
 }

分別介紹下每項的含義：



  • Host：發送郵件服務器地址。

  • Port：服務器地址端口號。

  • UseSsl：是否使用SSL方式。

  • From：發件人的賬號密碼，名稱及郵箱地址，一般郵箱地址和賬號是相同的。

  • To：收件人郵箱列表，也包含名稱和郵箱地址。


收件人郵箱列表我將其讀取為IDictionary<string, string>了，key是名稱，value是郵箱地址。


接着在.ToolKits層添加一個EmailHelper.cs，收發郵件我選擇了MailKit和MailKit兩個庫，沒有安裝的先安裝一下，Install-Package MailKit、Install-Package MimeKit。


直接新建一個發送郵件的方法SendAsync()，按照要求將基本的配置信息填進去，然後直接調用即可。


//EmailHelper.cs
 using MailKit.Net.Smtp;
 using Meowv.Blog.Domain.Configurations;
 using MimeKit;
 using System.Linq;
 using System.Threading.Tasks;
 
 namespace Meowv.Blog.ToolKits.Helper
 {
     public static class EmailHelper
     {
         /// <summary>
         /// 發送Email
         /// </summary>
         /// <param name="message"></param>
         /// <returns></returns>
         public static async Task SendAsync(MimeMessage message)
         {
             if (!message.From.Any())
             {
                 message.From.Add(new MailboxAddress(AppSettings.Email.From.Name, AppSettings.Email.From.Address));
             }
             if (!message.To.Any())
             {
                 var address = AppSettings.Email.To.Select(x => new MailboxAddress(x.Key, x.Value));
                 message.To.AddRange(address);
             }
 
             using var client = new SmtpClient
             {
                 ServerCertificateValidationCallback = (s, c, h, e) => true
             };
             client.AuthenticationMechanisms.Remove("XOAUTH2");
 
             await client.ConnectAsync(AppSettings.Email.Host, AppSettings.Email.Port, AppSettings.Email.UseSsl);
             await client.AuthenticateAsync(AppSettings.Email.From.Username, AppSettings.Email.From.Password);
             await client.SendAsync(message);
             await client.DisconnectAsync(true);
         }
     }
 }

SendAsync(...)接收一個參數MimeMessage對象，這樣就完成了一個通用的發郵件方法，接着我們去需要發郵件的地方構造MimeMessage，調用SendAsync()。


//WallpaperJob.cs
 ...
     // 發送Email
     var message = new MimeMessage
     {
         Subject = "【定時任務】壁紙數據抓取任務推送",
         Body = new BodyBuilder
         {
             HtmlBody = $"本次抓取到{wallpapers.Count()}條數據，時間:{DateTime.Now:yyyy-MM-dd HH:mm:ss}"
         }.ToMessageBody()
     };
     await EmailHelper.SendAsync(message);
 ...
 

//HotNewsJob.cs
 ...
     // 發送Email
     var message = new MimeMessage
     {
         Subject = "【定時任務】每日熱點數據抓取任務推送",
         Body = new BodyBuilder
         {
             HtmlBody = $"本次抓取到{hotNews.Count()}條數據，時間:{DateTime.Now:yyyy-MM-dd HH:mm:ss}"
         }.ToMessageBody()
     };
     await EmailHelper.SendAsync(message);
 ...

分別在兩個爬蟲腳本中添加發送Email，MimeMessage中設置了郵件主題Subject，正文Body，最後調用await EmailHelper.SendAsync(message)執行發送郵件操作。


編譯運行執行兩個定時任務，看看能否收到郵件提醒。



成功了，郵箱收到了兩條提醒。


還有一種比較特殊的用法，也介紹一下，如果想要發送帶圖片的郵件怎麼操作呢？注意不是附件，是將圖片內嵌在郵箱中。


一般常規都是有郵件模板的，將圖片的具體地址插入到img標籤中，這就不說了，這裏選擇另外一種方式。以前面添加的PuppeteerTestJob為例，正好我們生成了一張圖片的。將這種圖片以郵件的形式發出去。


public class PuppeteerTestJob : IBackgroundJob
 {
     public async Task ExecuteAsync()
     {
         var path = Path.Combine(Path.GetTempPath(), "meowv.png");
         
         ...
         
         await page.ScreenshotAsync(path, new ScreenshotOptions
         {
             FullPage = true,
             Type = ScreenshotType.Png
         });
 
         // 發送帶圖片的Email
         var builder = new BodyBuilder();
 
         var image = builder.LinkedResources.Add(path);
         image.ContentId = MimeUtils.GenerateMessageId();
 
         builder.HtmlBody = "當前時間:{0}.<img src=\"cid:{1}\"/>".FormatWith(DateTime.Now.ToString("yyyy-MM-dd HH:mm:ss"), image.ContentId);
 
         var message = new MimeMessage
         {
             Subject = "【定時任務】每日熱點數據抓取任務推送",
             Body = builder.ToMessageBody()
         };
         await EmailHelper.SendAsync(message);
     }
 }

先確定我們生成圖片的路徑 path ，將圖片生成Message-Id，然後賦值給ContentId，給模板中<img src=\"cid:{1}\"/>圖片標籤cid賦上值在調用發送郵件方法即可。



成功收到郵件，搞定了，你學會了嗎？


開源地址：https://github.com/Meowv/Blog/tree/blog_tutorial


基於 abp vNext 和 .NET Core 開發博客項目，截止到本篇所用到的基礎模塊算是寫完了，如果對您有些許幫助請多多分享，我的所有原創文章都首發於我發個人公眾號：阿星Plus 。


下面有二維碼可以直接掃一掃，如果你不想關注也沒有關係，博客園我也會同步過來的。


不管因為什麼，如果你在學習這個項目或者跟着我一起做這個項目，裏面肯定還是有瑕疵的，大家可以根據自己的需求自行修改。


接下來應該還會更新博客所用到的接口，這個純屬於CRUD，可以自己先行開發，我這邊目前也不知道以什麼樣的方式展現給大家是最好的選擇。

本站聲明:網站內容來源於博客園,如有侵權,請聯繫我們,我們將及時處理

※自行創業缺乏曝光? 網頁設計幫您第一時間規劃公司的形象門面



網站的第一印象網頁設計，決定了客戶是否繼續瀏覽的意願。台北網動廣告製作的RWD網頁設計，採用精簡與質感的CSS語法，提升企業的專業形象與簡約舒適的瀏覽體驗，讓瀏覽者第一眼就愛上它。




Orignal From: 基於 abp vNext 和 .NET Core 開發博客項目 - 定時任務最佳實戰（三）_網頁設計公司

留言

張貼留言

這個網誌中的熱門文章

架構設計 | 異步處理流程，多種實現模式詳解

本文源碼：GitHub·點這裏 || GitEE·點這裏 一、異步處理 1、異步概念 異步處理不用阻塞當前線程來等待處理完成，而是允許後續操作，直至其它線程將處理完成，並回調通知此線程。 必須強調一個基礎邏輯，異步是一種設計理念，異步操作不等於多線程，MQ中間件，或者消息廣播，這些是可以實現異步處理的方式。 同步處理和異步處理相對，需要實時處理並響應，一旦超過時間會結束會話，在該過程中調用方一直在等待響應方處理完成並返回。同步類似電話溝通，需要實時對話，異步則類似短信交流，發送消息之後無需保持等待狀態。 2、異步處理優點 雖然異步處理不能實時響應，但是處理複雜業務場景，多數情況都會使用異步處理。 異步可以解耦業務間的流程關聯，降低耦合度； 降低接口響應時間，例如用戶註冊，異步生成相關信息表； 異步可以提高系統性能，提升吞吐量； 流量削峰即把請求先承接下來，然後在異步處理； 異步用在不同服務間，可以隔離服務，避免雪崩； 異步處理的實現方式有很多種，常見多線程，消息中間件，發布訂閱的廣播模式，其根據邏輯在於先把請求承接下來，放入容器中，在從容器中把請求取出，統一調度處理。 注意 ：一定要監控任務是否產生積壓過度情況，任務如果積壓到雪崩之勢的地步，你會感覺每一片雪花都想勇闖天涯。 3、異步處理模式 異步流程處理的實現有好多方式，但是實際開發中常用的就那麼幾種，例如： 基於接口異步響應，常用在第三方對接流程； 基於消息生產和消費模式，解耦複雜流程； 基於發布和訂閱的廣播模式，常見系統通知 異步適用的業務場景，對數據強一致性的要求不高，異步處理的數據更多時候追求的是最終一致性。 二、接口響應異步 1、流程描述 基於接口異步響應的方式，有一個本地業務服務，第三方接口服務，流程如下： 本地服務發起請求，調用第三方服務接口； 請求包含業務參數，和成功或失敗的回調地址； 第三方服務實時響應流水號，作為該調用的標識； 之後第三方服務處理請求，得到最終處理結果； 如果處理成功，回調本地服務的成功通知接口； 如果處理失敗，回調本地服務的失敗通知接口； 整個流程基於部分異步和部分實時的模式，完整處理； 注意 ：如...
張貼留言
閱讀完整內容

.NET Core前後端分離快速開發框架(Core.3.0+AntdVue)

.NET Core前後端分離快速開發框架(Core.3.0+AntdVue) 目錄 引言 時間真快，轉眼今年又要過去了。回想今年，依次開源發布了 Colder.Fx.Net.AdminLTE(254Star) 、 Colder.Fx.Core.AdminLTE(335Star) 、 DotNettySocket(82Star) 、 IdHelper(47Star) ，這些框架及組件都是本着以實際出發，實事求是的態度，力求提高開發效率（我自己都是第一個使用者），目前來看反響不錯。但是隨着前端和後端技術的不斷變革，尤其是前端，目前大環境已經是前後端完全分離為主的開發模式，在這樣的大環境和必然趨勢之下，傳統的MVC就顯得有些落伍了。在這樣的背景下，一款前後端分離的.NET開發框架就顯得尤為必要，由此便定了框架的升級目標： 前後端分離 。 首先後端技術的選擇，從目前的數據來看，.NET Core的發展遠遠快於.NET Framework，最簡單的分析就是Colder.Fx.Core.AdminLTE發布比Colder.Fx.Net.AdminLTE晚，但是星星卻後來居上而且比前者多30%，並且這個差距在不斷擴大，由點及面的分析可以看出我們廣大.NET開發人員學習的熱情和积極向上的態度，並不是某些人所認為的那麼不堪（ 走自己的路，讓別人說去吧 ）。大環境上微軟积極擁抱開源，大力發展.NET Core， 可以說前途一片光明。因此後端決定採用 .NET Core3.0 ，不再浪費精力去支持.NET Framework。 然後是前端技術選擇，首選是三大js框架選擇，也是從實際出發，Vue相對其它而言更加容易上手，並且功能也毫不遜色，深得各種大小公司喜歡，如果偏要說缺點的話，那就是對TS支持不行，但是即將發布Vue3.0肯定會改變這一缺陷。選擇了Vue之後，然後就是UI框架的選擇了，這裏的選擇更多了，我選擇了Ant Design Vue，理由便是簡潔方便，十分符合我的設計理念。 技術選型完畢之後便...
張貼留言
閱讀完整內容

台北市住宅、社區建創儲能設備 最高可獲600萬元補助

為了推廣分散式發電，台北市環保局預計補助1億元供住宅社區設置創能、儲能設備，計有3種方案可供選擇。環保局說明，每案補助額度不超過建制總經費49％，社區每案最高可獲200萬至600萬元補助，住宅每案補助上限100萬元，5月1日起開放申請。 環保局說明，台北市溫室氣體排放量7成以上來自住商部門，其中以使用電力造成間接溫室氣體排放為大宗，台北市平均年用電量約159.86億度，1度電約等同排放0.5公斤二氧化碳，若想達成2050年淨零排放目標，僅靠節能減碳無法達成，必須發展綠色創能、儲能，並且參考歐洲、日本的做法，採分散式發電方式，推廣到社區、住家、商辦，達到供電自給自足目標。 因此，環保局推出「台北市住宅社區創能儲能及節能補助計畫」，補助對象為台北市轄內房屋所有權人及社區管理委員會，補助方案共計3種，每一申請人或每一場址僅能獲1次補助，每案補助額度不超過建置總經費49％為限，5月1日到7月31日開放申請，但補助經費用完即停止申請。 環保局說明，方案A補助對象以社區為主，公共區域申請創能儲能及節能項目，每案補助上限新台幣600萬元；方案B分為住宅或社區公共區域申請創能搭配儲能項目（創能或儲能方案不得單獨申請），社區每案補助上限新台幣400萬元，住宅每案補助上限100萬元。方案C補助對象也是社區，公共區域申請節能項目，每案補助上限新台幣200萬元。 網頁設計 最專業,超強功能平台可客製,窩窩以「數位行銷」「品牌經營」「網站與應用程式」「印刷品設計」等四大主軸，為每一位客戶客製建立行銷脈絡及洞燭市場先機,請問 台中電動車 哪裡在賣比較便宜可以到台中景泰電動車門市去看看總店：臺中市潭子區潭秀里雅潭路一段102-1號。 電動車補助 推薦評價好的 iphone維修 中心擁有專業的維修技術團隊，同時聘請資深iphone手機維修專家，現場說明手機問題，快速修理，沒修好不收錢住家的頂樓裝 太陽光電 聽說可發揮隔熱功效一線推薦東陽能源擁有核心技術、產品研發、系統規劃設置、專業團隊的太陽能發電廠商。 網頁設計 一頭霧水該從何著手呢? 回頭車 貨運收費標準宇安交通關係企業，自成立迄今，即秉持著「以誠待人」、「以實處事」的企業信念 台中搬家公司 教你幾個打包小技巧,輕鬆整理裝箱!還在煩惱搬家費用要多少哪？台中大展搬家線上試算搬家費用，從此不再擔心「物品怎麼計費」、「多...
張貼留言
閱讀完整內容