/[LeafOK_CVS]/lbbs/src/article_cache.c
ViewVC logotype

Diff of /lbbs/src/article_cache.c

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

Revision 1.4 by sysadm, Sat May 31 02:42:24 2025 UTC Revision 1.36 by sysadm, Tue Nov 11 00:28:05 2025 UTC
# Line 1  Line 1 
1  /***************************************************************************  /* SPDX-License-Identifier: GPL-3.0-or-later */
2                                             article_cache.c  -  description  /*
3                                                           -------------------   * article_cache
4          Copyright            : (C) 2004-2025 by Leaflet   *   - convert article content from DB to local cache with LML conversion and line offset index
5          Email                : leaflet@leafok.com   *
6   ***************************************************************************/   * Copyright (C) 2004-2025  Leaflet <leaflet@leafok.com>
7     */
8  /***************************************************************************  
9   *                                                                         *  #ifdef HAVE_CONFIG_H
10   *   This program is free software; you can redistribute it and/or modify  *  #include "config.h"
11   *   it under the terms of the GNU General Public License as published by  *  #endif
  *   the Free Software Foundation; either version 3 of the License, or     *  
  *   (at your option) any later version.                                   *  
  *                                                                         *  
  ***************************************************************************/  
12    
13  #include "article_cache.h"  #include "article_cache.h"
14    #include "lml.h"
15  #include "log.h"  #include "log.h"
16  #include <errno.h>  #include <errno.h>
 #include <stdio.h>  
17  #include <fcntl.h>  #include <fcntl.h>
18    #include <stdio.h>
19  #include <stdlib.h>  #include <stdlib.h>
20    #include <string.h>
21    #include <time.h>
22  #include <unistd.h>  #include <unistd.h>
23  #include <sys/mman.h>  #include <sys/mman.h>
24  #include <sys/stat.h>  #include <sys/stat.h>
 #include <strings.h>  
 #define _POSIX_C_SOURCE 200809L  
 #include <string.h>  
25    
26  #define ARTICLE_HEADER_MAX_LEN 4096  enum _article_cache_constant_t
27    {
28            ARTICLE_HEADER_MAX_LEN = 4096,
29            ARTICLE_FOOTER_MAX_LEN = 4096,
30            SUB_DT_MAX_LEN = 50,
31    };
32    
33    static const char *BBS_article_footer_color[] = {
34            "\033[31m",
35            "\033[32m",
36            "\033[33m",
37            "\033[34m",
38            "\033[35m",
39            "\033[36m",
40            "\033[37m",
41    };
42    static const int BBS_article_footer_color_count = 7;
43    
44    static char *content_f; // static buffer in large size
45    
46  inline static int article_cache_path(char *file_path, size_t buf_len, const char *cache_dir, const ARTICLE *p_article)  inline static int article_cache_path(char *file_path, size_t buf_len, const char *cache_dir, const ARTICLE *p_article)
47  {  {
48          if (file_path == NULL || cache_dir == NULL || p_article == NULL)          if (file_path == NULL || cache_dir == NULL || p_article == NULL)
49          {          {
50                  log_error("article_cache_path() NULL pointer error\n");                  log_error("NULL pointer error\n");
51                  return -1;                  return -1;
52          }          }
53    
# Line 42  inline static int article_cache_path(cha Line 56  inline static int article_cache_path(cha
56          return 0;          return 0;
57  }  }
58    
59  int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const SECTION_LIST *p_section, const char *content, int overwrite)  int article_cache_generate(const char *cache_dir, const ARTICLE *p_article, const SECTION_LIST *p_section,
60                                                       const char *content, const char *sub_ip, int overwrite)
61  {  {
62          char data_file[FILE_PATH_LEN];          char data_file[FILE_PATH_LEN];
63          int fd;          int fd;
64          ARTICLE_CACHE cache;          ARTICLE_CACHE cache;
65          struct tm tm_sub_dt;          struct tm tm_sub_dt;
66          char str_sub_dt[50];          char str_sub_dt[SUB_DT_MAX_LEN + 1];
67          char header[ARTICLE_HEADER_MAX_LEN];          char header[ARTICLE_HEADER_MAX_LEN];
68          size_t header_len;          size_t header_len;
69          long header_line_cnt;          long header_line_cnt;
70            char footer[ARTICLE_FOOTER_MAX_LEN];
71            size_t footer_len;
72            long footer_line_cnt;
73          long i;          long i;
74    
75          if (cache_dir == NULL || p_article == NULL || content == NULL)          if (cache_dir == NULL || p_article == NULL || content == NULL)
76          {          {
77                  log_error("article_cache_generate() NULL pointer error\n");                  log_error("NULL pointer error\n");
78                    return -1;
79            }
80    
81            if (content_f == NULL && (content_f = malloc(ARTICLE_CONTENT_MAX_LEN)) == NULL)
82            {
83                    log_error("malloc(content_f) error: OOM\n");
84                  return -1;                  return -1;
85          }          }
86    
# Line 81  int article_cache_generate(const char *c Line 105  int article_cache_generate(const char *c
105                  return -2;                  return -2;
106          }          }
107    
108          bzero(&cache, sizeof(cache));          memset(&cache, 0, sizeof(cache));
109    
110          // Generate article header          // Generate article header / footer
111          localtime_r(&(p_article->sub_dt), &tm_sub_dt);          localtime_r(&(p_article->sub_dt), &tm_sub_dt);
112          strftime(str_sub_dt, sizeof(str_sub_dt), "%c", &tm_sub_dt);          strftime(str_sub_dt, sizeof(str_sub_dt), "%c %Z", &tm_sub_dt);
113    
114          snprintf(header, sizeof(header), "发布者: %s (%s), 版块: %s (%s)\n标  题: %s\n发布于: %s (%s)\n\n",          snprintf(header, sizeof(header), "鍙戝竷鑰: %s (%s), 鐗堝潡: %s (%s)\n鏍  棰: %s\n鍙戝竷浜: %s (%s)\n\n",
115                           p_article->username, p_article->nickname, p_section->sname, p_section->stitle, p_article->title, BBS_name, str_sub_dt);                           p_article->username, p_article->nickname, p_section->sname, p_section->stitle, p_article->title, BBS_name, str_sub_dt);
116    
117            snprintf(footer, sizeof(footer),
118                             "\n--\n%s鈥 鏉ユ簮: %s http://%s [FROM: %s]\033[m\n\n",
119                             BBS_article_footer_color[p_article->aid % BBS_article_footer_color_count],
120                             BBS_name, BBS_server, sub_ip);
121    
122          header_len = strnlen(header, sizeof(header));          header_len = strnlen(header, sizeof(header));
123          cache.data_len = header_len + strlen(content);          footer_len = strnlen(footer, sizeof(footer));
124    
125            header_line_cnt = split_data_lines(header, SCREEN_COLS, cache.line_offsets, MAX_SPLIT_FILE_LINES, 1, NULL);
126    
127            if (header_len != cache.line_offsets[header_line_cnt])
128            {
129    #ifdef _DEBUG
130                    log_error("Header of article(aid=%d) is truncated from %ld to %ld\n", p_article->aid, header_len, cache.line_offsets[header_line_cnt]);
131    #endif
132                    header_len = (size_t)cache.line_offsets[header_line_cnt];
133            }
134    
135            // Apply LML render to content body
136            cache.data_len = header_len + (size_t)lml_render(content, content_f, ARTICLE_CONTENT_MAX_LEN, SCREEN_COLS, 0);
137    
         header_line_cnt = split_data_lines(header, SCREEN_COLS, cache.line_offsets, MAX_SPLIT_FILE_LINES);  
138          cache.line_total = header_line_cnt +          cache.line_total = header_line_cnt +
139                                             split_data_lines(content, SCREEN_COLS, cache.line_offsets + header_line_cnt, MAX_SPLIT_FILE_LINES - header_line_cnt);                                             split_data_lines(content_f, SCREEN_COLS + 1, cache.line_offsets + header_line_cnt, MAX_SPLIT_FILE_LINES - header_line_cnt, 1, NULL);
140    
141          if (cache.line_total >= MAX_SPLIT_FILE_LINES)          if (cache.data_len - header_len != (size_t)cache.line_offsets[cache.line_total])
142          {          {
143                  log_error("split_data_lines(%s) truncated over limit lines %d >= %d\n", data_file, cache.line_total, MAX_SPLIT_FILE_LINES);  #ifdef _DEBUG
144                  cache.line_total = MAX_SPLIT_FILE_LINES - 1;                  log_error("Body of article(aid=%d) is truncated from %ld to %ld\n",
145                                      p_article->aid, cache.data_len - header_len, cache.line_offsets[cache.line_total]);
146    #endif
147                    cache.data_len = header_len + (size_t)(cache.line_offsets[cache.line_total]);
148          }          }
149    
150          for (i = header_line_cnt; i <= cache.line_total; i++)          for (i = header_line_cnt; i <= cache.line_total; i++)
# Line 108  int article_cache_generate(const char *c Line 152  int article_cache_generate(const char *c
152                  cache.line_offsets[i] += (long)header_len;                  cache.line_offsets[i] += (long)header_len;
153          }          }
154    
155          if (write(fd, &cache, sizeof(cache)) == -1)          footer_line_cnt = split_data_lines(footer, SCREEN_COLS, cache.line_offsets + cache.line_total, MAX_SPLIT_FILE_LINES - cache.line_total, 1, NULL);
156    
157            if (footer_len != cache.line_offsets[cache.line_total + footer_line_cnt])
158            {
159    #ifdef _DEBUG
160                    log_error("Footer of article(aid=%d) is truncated from %ld to %ld\n",
161                                      p_article->aid, footer_len, cache.line_offsets[cache.line_total + footer_line_cnt]);
162    #endif
163                    footer_len = (size_t)(cache.line_offsets[cache.line_total + footer_line_cnt]);
164            }
165    
166            for (i = 0; i <= footer_line_cnt; i++)
167            {
168                    cache.line_offsets[cache.line_total + i] += (long)cache.data_len;
169            }
170    
171            cache.data_len += footer_len;
172            cache.line_total += footer_line_cnt;
173            cache.mmap_len = sizeof(cache) - sizeof(long) * (MAX_SPLIT_FILE_LINES - (size_t)(cache.line_total) - 1) + cache.data_len;
174    
175            if (write(fd, &cache, cache.mmap_len - cache.data_len) == -1)
176          {          {
177                  log_error("write(%s, cache) error (%d)\n", data_file, errno);                  log_error("write(%s, cache) error (%d)\n", data_file, errno);
178                  close(fd);                  close(fd);
# Line 120  int article_cache_generate(const char *c Line 184  int article_cache_generate(const char *c
184                  close(fd);                  close(fd);
185                  return -3;                  return -3;
186          }          }
187          if (write(fd, content, cache.data_len - header_len) == -1)          if (write(fd, content_f, cache.data_len - header_len - footer_len) == -1)
188          {          {
189                  log_error("write(%s, content) error (%d)\n", data_file, errno);                  log_error("write(%s, content) error (%d)\n", data_file, errno);
190                  close(fd);                  close(fd);
191                  return -3;                  return -3;
192          }          }
193            if (write(fd, footer, footer_len) == -1)
194            {
195                    log_error("write(%s, footer) error (%d)\n", data_file, errno);
196                    close(fd);
197                    return -3;
198            }
199    
200          if (close(fd) == -1)          if (close(fd) == -1)
201          {          {
# Line 136  int article_cache_generate(const char *c Line 206  int article_cache_generate(const char *c
206          return 0;          return 0;
207  }  }
208    
209    void article_cache_cleanup(void)
210    {
211            if (content_f)
212            {
213                    free(content_f);
214                    content_f = NULL;
215            }
216    }
217    
218  int article_cache_load(ARTICLE_CACHE *p_cache, const char *cache_dir, const ARTICLE *p_article)  int article_cache_load(ARTICLE_CACHE *p_cache, const char *cache_dir, const ARTICLE *p_article)
219  {  {
220          char data_file[FILE_PATH_LEN];          char data_file[FILE_PATH_LEN];
# Line 146  int article_cache_load(ARTICLE_CACHE *p_ Line 225  int article_cache_load(ARTICLE_CACHE *p_
225    
226          if (p_cache == NULL || cache_dir == NULL || p_article == NULL)          if (p_cache == NULL || cache_dir == NULL || p_article == NULL)
227          {          {
228                  log_error("article_cache_load() NULL pointer error\n");                  log_error("NULL pointer error\n");
229                  return -1;                  return -1;
230          }          }
231    
# Line 183  int article_cache_load(ARTICLE_CACHE *p_ Line 262  int article_cache_load(ARTICLE_CACHE *p_
262                  return -2;                  return -2;
263          }          }
264    
265          memcpy((void *)p_cache, p_mmap, sizeof(ARTICLE_CACHE));          if (((ARTICLE_CACHE *)p_mmap)->mmap_len != mmap_len)
   
         if (sizeof(ARTICLE_CACHE) + p_cache->data_len != mmap_len)  
266          {          {
267                  log_error("Inconsistent length, cache_len(%ld) + data_len(%ld) != mmap_len(%ld)\n",                  log_error("Inconsistent mmap len of article (cid=%d), %ld != %ld\n", p_article->cid, p_cache->mmap_len, mmap_len);
                                   sizeof(ARTICLE_CACHE), p_cache->data_len, mmap_len);  
   
                 if (munmap(p_mmap, mmap_len) < 0)  
                 {  
                         log_error("munmap() error (%d)\n", errno);  
                 }  
   
268                  return -3;                  return -3;
269          }          }
270    
271            memset(p_cache, 0, sizeof(*p_cache));
272            memcpy((void *)p_cache, p_mmap, (size_t)(((ARTICLE_CACHE *)p_mmap)->mmap_len - ((ARTICLE_CACHE *)p_mmap)->data_len));
273    
274          p_cache->p_mmap = p_mmap;          p_cache->p_mmap = p_mmap;
275          p_cache->p_data = p_mmap + sizeof(ARTICLE_CACHE);          p_cache->p_data = (char *)p_mmap + (p_cache->mmap_len - p_cache->data_len);
276    
277          return 0;          return 0;
278  }  }
# Line 208  int article_cache_unload(ARTICLE_CACHE * Line 281  int article_cache_unload(ARTICLE_CACHE *
281  {  {
282          if (p_cache == NULL || p_cache->p_mmap == NULL)          if (p_cache == NULL || p_cache->p_mmap == NULL)
283          {          {
284                  log_error("article_cache_unload() NULL pointer error\n");                  log_error("NULL pointer error\n");
285                  return -1;                  return -1;
286          }          }
287    
288          if (munmap(p_cache->p_mmap, sizeof(ARTICLE_CACHE) + p_cache->data_len) < 0)          if (munmap(p_cache->p_mmap, p_cache->mmap_len) < 0)
289          {          {
290                  log_error("munmap() error (%d)\n", errno);                  log_error("munmap() error (%d)\n", errno);
291                  return -2;                  return -2;

Legend:
Removed lines/characters  
Changed lines/characters
  Added lines/characters
webmaster@leafok.com
 ViewVC Help
Powered by ViewVC 1.3.0-beta1