/[LeafOK_CVS]/lbbs/src/article_cache.c
ViewVC logotype

Diff of /lbbs/src/article_cache.c

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

Revision 1.1 by sysadm, Thu May 29 09:44:01 2025 UTC Revision 1.34 by sysadm, Tue Nov 4 14:58:56 2025 UTC
# Line 1  Line 1 
1  /***************************************************************************  /* SPDX-License-Identifier: GPL-3.0-or-later */
2                                             article_cache.c  -  description  /*
3                                                           -------------------   * article_cache
4          Copyright            : (C) 2004-2025 by Leaflet   *   - convert article content from DB to local cache with LML conversion and line offset index
5          Email                : leaflet@leafok.com   *
6   ***************************************************************************/   * Copyright (C) 2004-2025  Leaflet <leaflet@leafok.com>
7     */
 /***************************************************************************  
  *                                                                         *  
  *   This program is free software; you can redistribute it and/or modify  *  
  *   it under the terms of the GNU General Public License as published by  *  
  *   the Free Software Foundation; either version 3 of the License, or     *  
  *   (at your option) any later version.                                   *  
  *                                                                         *  
  ***************************************************************************/  
8    
9  #include "article_cache.h"  #include "article_cache.h"
10    #include "lml.h"
11    #include "log.h"
12    #include <errno.h>
13    #include <fcntl.h>
14    #include <stdio.h>
15    #include <stdlib.h>
16    #include <string.h>
17    #include <time.h>
18    #include <unistd.h>
19    #include <sys/mman.h>
20    #include <sys/stat.h>
21    
22  int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const char *content)  #define ARTICLE_HEADER_MAX_LEN 4096
23    #define ARTICLE_CONTENT_MAX_LEN 1024 * 1024 * 4 // 4MB
24    #define ARTICLE_FOOTER_MAX_LEN 4096
25    #define SUB_DT_MAX_LEN 50
26    
27    static const char *BBS_article_footer_color[] = {
28            "\033[31m",
29            "\033[32m",
30            "\033[33m",
31            "\033[34m",
32            "\033[35m",
33            "\033[36m",
34            "\033[37m",
35    };
36    static const int BBS_article_footer_color_count = 7;
37    
38    static char *content_f; // static buffer in large size
39    
40    inline static int article_cache_path(char *file_path, size_t buf_len, const char *cache_dir, const ARTICLE *p_article)
41  {  {
42            if (file_path == NULL || cache_dir == NULL || p_article == NULL)
43            {
44                    log_error("NULL pointer error\n");
45                    return -1;
46            }
47    
48            snprintf(file_path, buf_len, "%s%d", cache_dir, p_article->cid);
49    
50          return 0;          return 0;
51  }  }
52    
53    int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const SECTION_LIST *p_section,
54                                                       const char *content, const char *sub_ip, int overwrite)
55    {
56            char data_file[FILE_PATH_LEN];
57            int fd;
58            ARTICLE_CACHE cache;
59            struct tm tm_sub_dt;
60            char str_sub_dt[SUB_DT_MAX_LEN + 1];
61            char header[ARTICLE_HEADER_MAX_LEN];
62            size_t header_len;
63            long header_line_cnt;
64            char footer[ARTICLE_FOOTER_MAX_LEN];
65            size_t footer_len;
66            long footer_line_cnt;
67            long i;
68    
69            if (cache_dir == NULL || p_article == NULL || content == NULL)
70            {
71                    log_error("NULL pointer error\n");
72                    return -1;
73            }
74    
75            if (content_f == NULL && (content_f = malloc(ARTICLE_CONTENT_MAX_LEN)) == NULL)
76            {
77                    log_error("malloc(content_f) error: OOM\n");
78                    return -1;
79            }
80    
81            if (article_cache_path(data_file, sizeof(data_file), cache_dir, p_article) < 0)
82            {
83                    log_error("article_cache_path(dir=%s, cid=%d) error\n", cache_dir, p_article->cid);
84                    return -1;
85            }
86    
87            if (!overwrite)
88            {
89                    if ((fd = open(data_file, O_RDONLY)) != -1) // check data file
90                    {
91                            close(fd);
92                            return 0;
93                    }
94            }
95    
96            if ((fd = open(data_file, O_WRONLY | O_CREAT | O_TRUNC, 0640)) == -1)
97            {
98                    log_error("open(%s) error (%d)\n", data_file, errno);
99                    return -2;
100            }
101    
102            memset(&cache, 0, sizeof(cache));
103    
104            // Generate article header / footer
105            localtime_r(&(p_article->sub_dt), &tm_sub_dt);
106            strftime(str_sub_dt, sizeof(str_sub_dt), "%c %Z", &tm_sub_dt);
107    
108            snprintf(header, sizeof(header), "发布者: %s (%s), 版块: %s (%s)\n标  题: %s\n发布于: %s (%s)\n\n",
109                             p_article->username, p_article->nickname, p_section->sname, p_section->stitle, p_article->title, BBS_name, str_sub_dt);
110    
111            snprintf(footer, sizeof(footer),
112                             "\n--\n%s※ 来源: %s http://%s [FROM: %s]\033[m\n\n",
113                             BBS_article_footer_color[p_article->aid % BBS_article_footer_color_count],
114                             BBS_name, BBS_server, sub_ip);
115    
116            header_len = strnlen(header, sizeof(header));
117            footer_len = strnlen(footer, sizeof(footer));
118    
119            header_line_cnt = split_data_lines(header, SCREEN_COLS, cache.line_offsets, MAX_SPLIT_FILE_LINES, 1, NULL);
120    
121            if (header_len != cache.line_offsets[header_line_cnt])
122            {
123    #ifdef _DEBUG
124                    log_error("Header of article(aid=%d) is truncated from %ld to %ld\n", p_article->aid, header_len, cache.line_offsets[header_line_cnt]);
125    #endif
126                    header_len = (size_t)cache.line_offsets[header_line_cnt];
127            }
128    
129            // Apply LML render to content body
130            cache.data_len = header_len + (size_t)lml_render(content, content_f, ARTICLE_CONTENT_MAX_LEN, SCREEN_COLS, 0);
131    
132            cache.line_total = header_line_cnt +
133                                               split_data_lines(content_f, SCREEN_COLS + 1, cache.line_offsets + header_line_cnt, MAX_SPLIT_FILE_LINES - header_line_cnt, 1, NULL);
134    
135            if (cache.data_len - header_len != (size_t)cache.line_offsets[cache.line_total])
136            {
137    #ifdef _DEBUG
138                    log_error("Body of article(aid=%d) is truncated from %ld to %ld\n",
139                                      p_article->aid, cache.data_len - header_len, cache.line_offsets[cache.line_total]);
140    #endif
141                    cache.data_len = header_len + (size_t)(cache.line_offsets[cache.line_total]);
142            }
143    
144            for (i = header_line_cnt; i <= cache.line_total; i++)
145            {
146                    cache.line_offsets[i] += (long)header_len;
147            }
148    
149            footer_line_cnt = split_data_lines(footer, SCREEN_COLS, cache.line_offsets + cache.line_total, MAX_SPLIT_FILE_LINES - cache.line_total, 1, NULL);
150    
151            if (footer_len != cache.line_offsets[cache.line_total + footer_line_cnt])
152            {
153    #ifdef _DEBUG
154                    log_error("Footer of article(aid=%d) is truncated from %ld to %ld\n",
155                                      p_article->aid, footer_len, cache.line_offsets[cache.line_total + footer_line_cnt]);
156    #endif
157                    footer_len = (size_t)(cache.line_offsets[cache.line_total + footer_line_cnt]);
158            }
159    
160            for (i = 0; i <= footer_line_cnt; i++)
161            {
162                    cache.line_offsets[cache.line_total + i] += (long)cache.data_len;
163            }
164    
165            cache.data_len += footer_len;
166            cache.line_total += footer_line_cnt;
167            cache.mmap_len = sizeof(cache) - sizeof(long) * (MAX_SPLIT_FILE_LINES - (size_t)(cache.line_total) - 1) + cache.data_len;
168    
169            if (write(fd, &cache, cache.mmap_len - cache.data_len) == -1)
170            {
171                    log_error("write(%s, cache) error (%d)\n", data_file, errno);
172                    close(fd);
173                    return -3;
174            }
175            if (write(fd, header, header_len) == -1)
176            {
177                    log_error("write(%s, header) error (%d)\n", data_file, errno);
178                    close(fd);
179                    return -3;
180            }
181            if (write(fd, content_f, cache.data_len - header_len - footer_len) == -1)
182            {
183                    log_error("write(%s, content) error (%d)\n", data_file, errno);
184                    close(fd);
185                    return -3;
186            }
187            if (write(fd, footer, footer_len) == -1)
188            {
189                    log_error("write(%s, footer) error (%d)\n", data_file, errno);
190                    close(fd);
191                    return -3;
192            }
193    
194            if (close(fd) == -1)
195            {
196                    log_error("close(%s) error (%d)\n", data_file, errno);
197                    return -2;
198            }
199    
200            return 0;
201    }
202    
203    void article_cache_cleanup(void)
204    {
205            if (content_f)
206            {
207                    free(content_f);
208                    content_f = NULL;
209            }
210    }
211    
212  int article_cache_load(ARTICLE_CACHE *p_cache, const char *cache_dir, const ARTICLE *p_article)  int article_cache_load(ARTICLE_CACHE *p_cache, const char *cache_dir, const ARTICLE *p_article)
213  {  {
214            char data_file[FILE_PATH_LEN];
215            int fd;
216            struct stat sb;
217            void *p_mmap;
218            size_t mmap_len;
219    
220            if (p_cache == NULL || cache_dir == NULL || p_article == NULL)
221            {
222                    log_error("NULL pointer error\n");
223                    return -1;
224            }
225    
226            if (article_cache_path(data_file, sizeof(data_file), cache_dir, p_article) < 0)
227            {
228                    log_error("article_cache_path(dir=%s, cid=%d) error\n", cache_dir, p_article->cid);
229                    return -1;
230            }
231    
232            if ((fd = open(data_file, O_RDONLY)) == -1)
233            {
234                    log_error("open(%s) error (%d)\n", data_file, errno);
235                    return -2;
236            }
237    
238            if (fstat(fd, &sb) < 0)
239            {
240                    log_error("fstat(fd) error (%d)\n", errno);
241                    return -2;
242            }
243    
244            mmap_len = (size_t)sb.st_size;
245    
246            p_mmap = mmap(NULL, mmap_len, PROT_READ, MAP_SHARED, fd, 0L);
247            if (p_mmap == MAP_FAILED)
248            {
249                    log_error("mmap(%s) error (%d)\n", data_file, errno);
250                    return -2;
251            }
252    
253            if (close(fd) == -1)
254            {
255                    log_error("close(%s) error (%d)\n", data_file, errno);
256                    return -2;
257            }
258    
259            if (((ARTICLE_CACHE *)p_mmap)->mmap_len != mmap_len)
260            {
261                    log_error("Inconsistent mmap len of article (cid=%d), %ld != %ld\n", p_article->cid, p_cache->mmap_len, mmap_len);
262                    return -3;
263            }
264    
265            memset(p_cache, 0, sizeof(*p_cache));
266            memcpy((void *)p_cache, p_mmap, (size_t)(((ARTICLE_CACHE *)p_mmap)->mmap_len - ((ARTICLE_CACHE *)p_mmap)->data_len));
267    
268            p_cache->p_mmap = p_mmap;
269            p_cache->p_data = (char *)p_mmap + (p_cache->mmap_len - p_cache->data_len);
270    
271          return 0;          return 0;
272  }  }
273    
274  int article_cache_unload(ARTICLE_CACHE *p_cache)  int article_cache_unload(ARTICLE_CACHE *p_cache)
275  {  {
276            if (p_cache == NULL || p_cache->p_mmap == NULL)
277            {
278                    log_error("NULL pointer error\n");
279                    return -1;
280            }
281    
282            if (munmap(p_cache->p_mmap, p_cache->mmap_len) < 0)
283            {
284                    log_error("munmap() error (%d)\n", errno);
285                    return -2;
286            }
287    
288            p_cache->p_mmap = NULL;
289            p_cache->p_data = NULL;
290    
291          return 0;          return 0;
292  }  }

Legend:
Removed lines/characters  
Changed lines/characters
  Added lines/characters
webmaster@leafok.com
 ViewVC Help
Powered by ViewVC 1.3.0-beta1