FormMain.cs 40 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298299300301302303304305306307308309310311312313314315316317318319320321322323324325326327328329330331332333334335336337338339340341342343344345346347348349350351352353354355356357358359360361362363364365366367368369370371372373374375376377378379380381382383384385386387388389390391392393394395396397398399400401402403404405406407408409410411412413414415416417418419420421422423424425426427428429430431432433434435436437438439440441442443444445446447448449450451452453454455456457458459460461462463464465466467468469470471472473474475476477478479480481482483484485486487488489490491492493494495496497498499500501502503504505506507508509510511512513514515516517518519520521522523524525526527528529530531532533534535536537538539540541542543544545546547548549550551552553554555556557558559560561562563564565566567568569570571572573574575576577578579580581582583584585586587588589590591592593594595596597598599600601602603604605606607608609610611612613614615616617618619620621622623624625626627628629630631632633634635636637638639640641642643644645646647648649650651652653654655656657658659660661662663664665666667668669670671672673674675676677678679680681682683684685686687688689690691692693694695696697698699700701702703704705706707708709710711712713714715716717718719720721722723724725726727728729730731732733734735736737738739740741742743744745746747748749750751752753754755756757758759760761762763764765766767768769770771772773774775776777778779780781782783784785786787788789790791792793794795796797798799800801802803804805806807808809810811812813814815816817818819820821822823824825826827828829830831832833834835836837838839840841842843844845846847848849850851852853854855856857858859860861862863864865866867868869870871872873874875876877878879880881882883884885886887888889890891892893894895896897898899900901902903904905906907908909910911912913914915916917918919920921922923924925926927928929930931932933934935936937938939940941942943944945946947948949950951952953954955956957958959960961962963964965966967968969970971972973974975976977978979980981982983984985986987988989990991992993994995996997998999100010011002100310041005100610071008100910101011101210131014101510161017101810191020102110221023102410251026102710281029103010311032103310341035103610371038103910401041104210431044104510461047104810491050
  1. using System;
  2. using System.Collections.Generic;
  3. using System.ComponentModel;
  4. using System.Data;
  5. using System.Drawing;
  6. using System.Linq;
  7. using System.Text;
  8. using System.Threading.Tasks;
  9. using System.Windows.Forms;
  10. //подключение библиотек
  11. using Emgu.CV;
  12. using Emgu.CV.Structure;
  13. using Emgu.CV.Face;
  14. using Emgu.CV.CvEnum;
  15. using System.IO;
  16. using System.Threading;
  17. using System.Xml;
  18. using System.Drawing.Imaging;
  19. using System.Data.SqlClient;
  20. using DirectShowLib;
  21. using Emgu.CV.Util;
  22. using System.Runtime.CompilerServices;
  23. using Timer = System.Windows.Forms.Timer;
  24. using ZedGraph;
  25. using static System.Windows.Forms.VisualStyles.VisualStyleElement.StartPanel;
  26. namespace ImpulseVision
  27. {
  28. public partial class FormMain : Form
  29. {
  30. #region <Переменные>
  31. public event PropertyChangedEventHandler PropertyChanged;
  32. private VideoCapture Capture;
  33. private CascadeClassifier HaarCascade;
  34. private Image<Bgr, Byte> BgrFrame = null;
  35. private Image<Gray, Byte> DetectedFace = null;
  36. private List<FaceData> FaceList = new List<FaceData>();
  37. private VectorOfMat ImageList = new VectorOfMat();
  38. private List<string> NameList = new List<string>();
  39. private VectorOfInt LabelList = new VectorOfInt();
  40. private EigenFaceRecognizer recognizer;
  41. private Timer CaptureTimer;
  42. #region FaceName
  43. private string UserName = string.Empty;
  44. private string faceName;
  45. public string FaceName
  46. {
  47. get { return faceName; }
  48. set
  49. {
  50. faceName = value.ToUpper();
  51. UserName = faceName;
  52. //PbxFaces.Invoke(DispatcherPriority.Normal, new Action(() => { lblFaceName.Content = faceName; }));
  53. NotifyPropertyChanged();
  54. }
  55. }
  56. #endregion
  57. #region CameraCaptureImage
  58. private Bitmap cameraCapture;
  59. public Bitmap CameraCapture
  60. {
  61. get { return cameraCapture; }
  62. set
  63. {
  64. cameraCapture = value;
  65. //imgCamera.Dispatcher.Invoke(DispatcherPriority.Normal, new Action(() => { imgCamera.Source = BitmapToImageSource(cameraCapture); }));
  66. PbxEther.Image = cameraCapture;
  67. //PbxFaces.Image = BitmapToImageSource(cameraCapture);
  68. NotifyPropertyChanged();
  69. }
  70. }
  71. #endregion
  72. #region CameraCaptureFaceImage
  73. private Bitmap cameraCaptureFace;
  74. public Bitmap CameraCaptureFace
  75. {
  76. get { return cameraCaptureFace; }
  77. set
  78. {
  79. cameraCaptureFace = value;
  80. //imgDetectFace.Dispatcher.Invoke(DispatcherPriority.Normal, new Action(() => { imgDetectFace.Source = BitmapToImageSource(cameraCaptureFace); }));
  81. //PbxFaces.Image = BitmapToImageSource(cameraCapture);
  82. PbxEther.Image = cameraCapture;
  83. NotifyPropertyChanged();
  84. }
  85. }
  86. #endregion
  87. int SelectedCameraID = -1;
  88. //доступные видеокамеры
  89. private DsDevice[] WebCams = null;
  90. int CountCams = -1;
  91. //множество для хранения списка камер
  92. HashSet<string> HtBefore = new HashSet<string>();
  93. //включена ли на данный момент камера
  94. bool IsWorking = false;
  95. public static string TxtCon = $@"Data Source=213.155.192.79,3002;Initial Catalog=ImpulseVisionApp;Persist Security Info=True;User ID=u20teresh;Password=bfg2";
  96. //хранение информации о выбранном пользователе
  97. UserItem CurrentUser = null;
  98. SqlConnection SCon = new SqlConnection(Properties.Settings.Default.ImpulseVisionAppConnectionString);
  99. //список с пользователями системы
  100. List<Users> LstUsers = new List<Users>();
  101. //ID пользователя, который был только что добавлен
  102. string AddingUserID = string.Empty;
  103. //список, в котором хранятся пути изображений пользователей
  104. List<string> LstPathImage = new List<string>();
  105. //уведомление о том, что сохранение выполнено
  106. bool Saving = false;
  107. #endregion
  108. //пути доступа к изображениям пользователей
  109. List<Pictures> LstUserPictures = new List<Pictures>();
  110. struct Pictures
  111. {
  112. public string UserID, PicturePath;
  113. }
  114. struct Users
  115. {
  116. public string FIO, PassportSeria, PassportNum, UserID;
  117. }
  118. public FormMain()
  119. {
  120. InitializeComponent();
  121. CaptureTimer = new Timer()
  122. {
  123. Interval = Config.TimerResponseValue
  124. };
  125. CaptureTimer.Tick += CaptureTimer_Tick;
  126. }
  127. private void CaptureTimer_Tick(object sender, EventArgs e)
  128. {
  129. ProcessFrame();
  130. }
  131. /// <summary>
  132. /// получение данных с камеры и обработка изображени
  133. /// </summary>
  134. private void ProcessFrame()
  135. {
  136. BgrFrame = Capture.QueryFrame().ToImage<Bgr, Byte>().Flip(FlipType.Horizontal);
  137. Pen PenForFace = new Pen(Brushes.Red, 5);
  138. Brush BrushForFace = Brushes.White;
  139. Font MyFont = new Font("Segoe UI Variable Small Semibol; 14pt; style=Bold", 14, FontStyle.Regular);
  140. Brush BrushInfo = Brushes.White;
  141. Pen PenInfo = new Pen(Brushes.White, 4);
  142. if (BgrFrame != null)
  143. {
  144. try
  145. {//for emgu cv bug
  146. Image<Gray, byte> grayframe = BgrFrame.Convert<Gray, byte>();
  147. Rectangle[] Faces = HaarCascade.DetectMultiScale(grayframe, 1.2, 10, new System.Drawing.Size(50, 50), new System.Drawing.Size(200, 200));
  148. //detect face
  149. FaceName = "No face detected";
  150. foreach (var face in Faces)
  151. {
  152. BgrFrame.Draw(face, new Bgr(53, 23, 247), 2);
  153. DetectedFace = BgrFrame.Copy(face).Convert<Gray, byte>();
  154. FaceRecognition();
  155. break;
  156. }
  157. CameraCapture = BgrFrame.ToBitmap();
  158. }
  159. catch (Exception ex)
  160. {
  161. //todo log
  162. }
  163. }
  164. }
  165. /// <summary>
  166. /// получение данных об изображениях
  167. /// </summary>
  168. public void GetFacesList()
  169. {
  170. //haar cascade classifier
  171. if (!File.Exists(Config.HaarCascadePath))
  172. {
  173. string text = "Cannot find Haar cascade data file:\n\n";
  174. text += Config.HaarCascadePath;
  175. DialogResult result = MessageBox.Show(text, "Error",
  176. MessageBoxButtons.OK, MessageBoxIcon.Error);
  177. }
  178. HaarCascade = new CascadeClassifier(Config.HaarCascadePath);
  179. FaceList.Clear();
  180. string line;
  181. FaceData faceInstance = null;
  182. // Create empty directory / file for face data if it doesn't exist
  183. if (!Directory.Exists(Config.FacePhotosPath))
  184. {
  185. Directory.CreateDirectory(Config.FacePhotosPath);
  186. }
  187. if (!File.Exists(Config.FaceListTextFile))
  188. {
  189. string text = "Cannot find face data file:\n\n";
  190. text += Config.FaceListTextFile + "\n\n";
  191. text += "If this is your first time running the app, an empty file will be created for you.";
  192. DialogResult result = MessageBox.Show(text, "Warning",
  193. MessageBoxButtons.OK, MessageBoxIcon.Warning);
  194. switch (result)
  195. {
  196. case DialogResult.OK:
  197. String dirName = Path.GetDirectoryName(Config.FaceListTextFile);
  198. Directory.CreateDirectory(dirName);
  199. File.Create(Config.FaceListTextFile).Close();
  200. break;
  201. }
  202. }
  203. StreamReader reader = new StreamReader(Config.FaceListTextFile);
  204. int i = 0;
  205. while ((line = reader.ReadLine()) != null)
  206. {
  207. string[] lineParts = line.Split(':');
  208. faceInstance = new FaceData();
  209. faceInstance.FaceImage = new Image<Gray, byte>(Config.FacePhotosPath + lineParts[0] + Config.ImageFileExtension);
  210. faceInstance.PersonName = lineParts[1];
  211. FaceList.Add(faceInstance);
  212. }
  213. foreach (var face in FaceList)
  214. {
  215. ImageList.Push(face.FaceImage.Mat);
  216. NameList.Add(face.PersonName);
  217. LabelList.Push(new[] { i++ });
  218. }
  219. reader.Close();
  220. // Train recogniser
  221. if (ImageList.Size > 0)
  222. {
  223. recognizer = new EigenFaceRecognizer(ImageList.Size);
  224. recognizer.Train(ImageList, LabelList);
  225. }
  226. }
  227. /// <summary>
  228. /// распознавание лица
  229. /// </summary>
  230. private void FaceRecognition()
  231. {
  232. if (ImageList.Size != 0)
  233. {
  234. //Eigen Face Algorithm
  235. FaceRecognizer.PredictionResult result = recognizer.Predict(DetectedFace.Resize(100, 100, Inter.Cubic));
  236. FaceName = NameList[result.Label];
  237. CameraCaptureFace = DetectedFace.ToBitmap();
  238. }
  239. else
  240. {
  241. FaceName = "Please Add Face";
  242. }
  243. }
  244. protected virtual void NotifyPropertyChanged([CallerMemberName] String propertyName = "")
  245. {
  246. var handler = PropertyChanged;
  247. if (handler != null)
  248. handler(this, new PropertyChangedEventArgs(propertyName));
  249. }
  250. private void FormMain_Load(object sender, EventArgs e)
  251. {
  252. HideAdding();
  253. //скрытие заголовков вкладок в TabControl
  254. TabPages.Appearance = TabAppearance.FlatButtons;
  255. TabPages.ItemSize = new Size(0, 1);
  256. TabPages.SizeMode = TabSizeMode.Fixed;
  257. this.Show();
  258. GetCams();
  259. //ColorRegular(false);
  260. CmbCams.Visible = false;
  261. TslSelCamText.Visible = false;
  262. GetUsersFromDB();
  263. }
  264. /// <summary>
  265. /// получение списка доступных камер
  266. /// </summary>
  267. private void GetCams()
  268. {
  269. WebCams = DsDevice.GetDevicesOfCat(FilterCategory.VideoInputDevice);
  270. CountCams = WebCams.Length;
  271. CmbCams.Items.Clear();
  272. for (int i = 0; i < CountCams; i++)
  273. {
  274. CmbCams.Items.Add(WebCams[i].Name);
  275. HtBefore.Add(WebCams[i].Name);
  276. }
  277. if (CountCams > 0)
  278. {
  279. CmbCams.SelectedIndex = 0;
  280. SelectedCameraID = 0;
  281. }
  282. }
  283. private void BtnDelUser_Click(object sender, EventArgs e)
  284. {
  285. string IdUser = string.Empty;
  286. IdUser = CurrentUser.UserID;
  287. DialogResult Res = MessageBox.Show("Подтверждение данной операции приведёт к безвозвратному удалению пользователя из системы.\r\nПодтвердить удаление?", "ImpulseVision", MessageBoxButtons.YesNo, MessageBoxIcon.Exclamation);
  288. if (Res == DialogResult.No)
  289. return;
  290. SCon.Open();
  291. string QueryDelUser = $@"delete
  292. from FaceImages
  293. where UserID = '{IdUser}'";
  294. SqlCommand Cmd = new SqlCommand(QueryDelUser, SCon);
  295. Cmd.ExecuteNonQuery();
  296. QueryDelUser = $@"delete
  297. from Users
  298. where ID = '{IdUser}'";
  299. Cmd = new SqlCommand(QueryDelUser, SCon);
  300. Cmd.ExecuteNonQuery();
  301. SCon.Close();
  302. string PhotoName = string.Empty;
  303. for (int i = 0; i < LstUsers.Count; i++)
  304. {
  305. if (LstUsers[i].UserID == IdUser)
  306. {
  307. PhotoName = LstUsers[i].FIO.Split(' ')[1] + LstUsers[i].PassportSeria + LstUsers[i].PassportNum;
  308. }
  309. }
  310. try
  311. {
  312. //удалить из папки фотографию пользователя
  313. File.Delete(Application.StartupPath + Config.FacePhotosPath + $"{PhotoName}.bmp");
  314. }
  315. catch
  316. {
  317. MessageBox.Show("Фотографии пользователя не найдены!", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Exclamation);
  318. return;
  319. }
  320. GetUsersFromDB();
  321. MessageBox.Show("Пользователь безвозвратно удалён из системы!", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Information);
  322. }
  323. /// <summary>
  324. /// получение информации об идентификаторах пользователей и путях доступа к их фотографиям
  325. /// </summary>
  326. private void GetPicturesPath()
  327. {
  328. SCon.Open();
  329. string Query1 = $@"select UserID,Picture
  330. from FaceImages";
  331. SqlCommand Cmd = new SqlCommand(Query1, SCon);
  332. SqlDataReader Res = Cmd.ExecuteReader();
  333. if (Res.HasRows)
  334. {
  335. LstUserPictures.Clear();
  336. while (Res.Read())
  337. {
  338. Pictures Pic = new Pictures();
  339. Pic.UserID = Res["UserID"].ToString();
  340. Pic.PicturePath = Res["Picture"].ToString();
  341. LstUserPictures.Add(Pic);
  342. }
  343. }
  344. else
  345. {
  346. MessageBox.Show("Не удалось получить информацию об изображениях!", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Error);
  347. }
  348. SCon.Close();
  349. }
  350. /// <summary>
  351. /// показ окна добавления
  352. /// </summary>
  353. private void ShowAdding()
  354. {
  355. TableLayoutWorks.ColumnStyles[0].Width = 250;
  356. TableLayoutWorks.BackColor = Color.White;
  357. }
  358. /// <summary>
  359. /// скрытие окна добавления
  360. /// </summary>
  361. private void HideAdding()
  362. {
  363. TableLayoutWorks.ColumnStyles[0].Width = 0;
  364. TableLayoutWorks.BackColor = Color.Black;
  365. }
  366. private void PbxEther_Click(object sender, EventArgs e)
  367. {
  368. HideAdding();
  369. }
  370. /// <summary>
  371. /// добавление нового пользоввателя
  372. /// </summary>
  373. private void BtnAddUser_Click(object sender, EventArgs e)
  374. {
  375. CmbCams.Visible = true;
  376. TslSelCamText.Visible = true;
  377. BtnEditUser.Enabled = false;
  378. BtnDelUser.Enabled = false;
  379. TbxLastname.Text = "";
  380. TbxFirstname.Text = "";
  381. TbxPatronymic.Text = "";
  382. TbxPasportSeria.Text = "";
  383. TbxPasportNum.Text = "";
  384. TabPages.SelectTab(1);
  385. if (IsWorking)
  386. return;
  387. TableLayoutWorks.BackColor = Color.Black;
  388. IsWorking = true;//камера включена
  389. GetFacesList();
  390. Capture = new VideoCapture(Config.ActiveCameraIndex);
  391. Capture.SetCaptureProperty(CapProp.Fps, 30);
  392. Capture.SetCaptureProperty(CapProp.FrameHeight, 450);
  393. Capture.SetCaptureProperty(CapProp.FrameWidth, 370);
  394. CaptureTimer.Start();
  395. ShowAdding();
  396. //ColorRegular(IsWorking);
  397. }
  398. /// <summary>
  399. /// распознавание изображения, его отображение и сохранение
  400. /// </summary>
  401. /*
  402. private void VideoCapture_ImageGrabbed(object sender, EventArgs e)
  403. {
  404. int CountAllRectangle = 0;
  405. int CountRecognize = 0;
  406. if (VideoCapture == null && VideoCapture.Ptr == IntPtr.Zero)
  407. return;
  408. //1. Захват видео
  409. VideoCapture.Retrieve(Frame, 0);//восстановить нулевой кадр
  410. CurrentFrame = Frame.ToImage<Bgr, Byte>().Flip(FlipType.Horizontal);
  411. //2. Обнаружение лиц
  412. if (FacesDetectionEnabled)
  413. {
  414. //преобразовать изображение в серое
  415. Mat GrayImage = new Mat();
  416. CvInvoke.CvtColor(CurrentFrame, GrayImage, ColorConversion.Bgr2Gray);
  417. //выравнивание гистограммы изображения
  418. CvInvoke.EqualizeHist(GrayImage, GrayImage);
  419. CvInvoke.EqualizeHist(GrayImage, GrayImage);
  420. CvInvoke.EqualizeHist(GrayImage, GrayImage);
  421. Pen PenForFace = new Pen(Brushes.Red, 5);
  422. Brush BrushForFace = Brushes.White;
  423. Font MyFont = new Font("Segoe UI Variable Small Semibol; 14pt; style=Bold", 14, FontStyle.Regular);
  424. Brush BrushInfo = Brushes.White;
  425. Pen PenInfo = new Pen(Brushes.White, 4);
  426. Point PointInfo = new Point(CurrentFrame.Width - CurrentFrame.Width, 0);
  427. Graphics GraphInfo = Graphics.FromImage(CurrentFrame.Bitmap);
  428. //записать распознанные изображения в массив
  429. Rectangle[] RectFaces = Classifier.DetectMultiScale(GrayImage, 1.1, 3, Size.Empty, Size.Empty);
  430. GraphInfo.DrawString("Перед сохранением, убедитесь, что лицо\r\nхорошо освещено и находится в красном прямоугольнике.", MyFont, BrushInfo, PointInfo);
  431. //если лица обнаружены
  432. if (RectFaces.Length > 0)
  433. {
  434. foreach (Rectangle CurrentFace in RectFaces)
  435. {
  436. CountAllRectangle++;
  437. //нарисовать прямоугольники вокруг лиц
  438. //CvInvoke.Rectangle(CurrentFrame, CurrentFace, new Bgr(Color.White).MCvScalar, 5);
  439. Point PointForFace = new Point(CurrentFace.X, CurrentFace.Y);
  440. //результирующее изображение
  441. Image<Bgr, Byte> ResultImage = CurrentFrame.Convert<Bgr, Byte>();
  442. Graphics Graph = Graphics.FromImage(CurrentFrame.Bitmap);
  443. Graph.DrawRectangle(PenForFace, PointForFace.X, PointForFace.Y, CurrentFace.Width, CurrentFace.Height);
  444. //позиция отрисовки имени человека
  445. Point PersonName = new Point(CurrentFace.X, CurrentFace.Y - 25);
  446. //Graph.DrawString("Распознано", MyFont, MyBrush, PersonName);
  447. //3. Добавление человека (лица)
  448. ////результирующее изображение
  449. //Image<Bgr, Byte> ResultImage = CurrentFrame.Convert<Bgr, Byte>();
  450. ResultImage.ROI = CurrentFace;
  451. //отобразить на форме найденное изображение
  452. //PbxDetected.Image = ResultImage.ToBitmap();
  453. //******************
  454. TempImageForRazn = ResultImage;
  455. //если сохранение изображения включено
  456. if (EnableSaveImage)
  457. {
  458. //создать каталог, если он не существует
  459. string Path = Directory.GetCurrentDirectory() + $@"\TrainedImages\{TbxFirstname.Text.Trim()}{TbxPasportSeria.Text.Trim()}{TbxPasportNum.Text.Trim()}";
  460. string PathPhoto = $@"\TrainedImages\{TbxFirstname.Text.Trim()}{TbxPasportSeria.Text.Trim()}{TbxPasportNum.Text.Trim()}";
  461. if (!Directory.Exists(Path))
  462. {
  463. Directory.CreateDirectory(Path);
  464. }
  465. //сохранить 30 изображений
  466. Task.Factory.StartNew(() =>
  467. {
  468. Saving = false;
  469. string FullPath = string.Empty;
  470. LstPathImage.Clear();
  471. for (int i = 0; i < 60; i++)
  472. {
  473. FullPath = PathPhoto + @"\" + TbxLastname.Text.Trim() + "+" + TbxFirstname.Text.Trim() + "__" + DateTime.Now.ToString("dd-MM-yyyy-hh-mm-ss") + Guid.NewGuid().ToString().Substring(0, 6) + ".jpg";
  474. ResultImage.Resize(200, 200, Inter.Cubic).Save(Application.StartupPath + FullPath);
  475. LstPathImage.Add(FullPath);
  476. Thread.Sleep(200);
  477. }
  478. Saving = true;
  479. MessageBox.Show("Сохранение завершено!", "Результат операции.", MessageBoxButtons.OK, MessageBoxIcon.Information);
  480. //TrainImageFromDir();
  481. });
  482. }
  483. EnableSaveImage = false;
  484. if (BtnSave.InvokeRequired)
  485. {
  486. BtnSave.Invoke(new ThreadStart(delegate {
  487. BtnSave.Enabled = true;
  488. }));
  489. }
  490. //5. Узнавание изображения
  491. if (IsTrained)
  492. {
  493. Image<Gray, byte> GrayFaceResult = ResultImage.Convert<Gray, byte>().Resize(200, 200, Inter.Cubic);
  494. CvInvoke.EqualizeHist(GrayFaceResult, GrayFaceResult);
  495. var Result = Recognizer.Predict(GrayFaceResult);
  496. if (Result.Label > 0)//если лица найдены
  497. {
  498. CountRecognize++;
  499. BrushForFace = Brushes.LightGreen;
  500. Graph.DrawString($"{LstPersonNames[Result.Label]}", MyFont, BrushForFace, PersonName);
  501. GraphInfo.DrawString($"На изображении: {LstPersonNames[Result.Label]}", MyFont, BrushInfo, PointInfo);
  502. }
  503. else
  504. {
  505. BrushForFace = Brushes.LightPink;
  506. Graph.DrawString("Неизвестный", MyFont, BrushForFace, PersonName);
  507. }
  508. }
  509. }
  510. if(CountRecognize > CountRecognize/2)
  511. {
  512. MessageBox.Show("Распознан");
  513. }
  514. }
  515. }
  516. //NormalizeImage(CurrentFrame);
  517. try
  518. {
  519. //вывести изображение в PictureBox
  520. PbxEther.Image = CurrentFrame.Bitmap;
  521. }
  522. catch(Exception ex)
  523. {
  524. MessageBox.Show(ex.Message, "Внимание!", MessageBoxButtons.OK, MessageBoxIcon.Error);
  525. }
  526. }
  527. */
  528. /// <summary>
  529. /// выключение распознавания
  530. /// </summary>
  531. private void RecogniseOff()
  532. {
  533. HideAdding();
  534. BtnDelUser.Enabled = true;
  535. if (Capture != null)
  536. {
  537. BgrFrame = null;
  538. Capture.Stop();
  539. Capture.Dispose();
  540. Capture = null;
  541. }
  542. PbxEther.Image = Properties.Resources._9110852_video_no_icon;
  543. TableLayoutWorks.BackColor = Color.Gray;
  544. IsWorking = false;
  545. }
  546. /// <summary>
  547. /// переключение цветов кнопок включения/выключения
  548. /// </summary>
  549. /// <param name="IsWorking">статус работы камеры</param>
  550. private void ColorRegular(bool IsWorking)
  551. {
  552. if(IsWorking)
  553. {
  554. BtnAddUser.BackColor = Color.LightGreen;
  555. BtnEditUser.BackColor = Color.White;
  556. }
  557. else
  558. {
  559. BtnAddUser.BackColor = Color.White;
  560. BtnEditUser.BackColor = Color.LightPink;
  561. }
  562. }
  563. /// <summary>
  564. /// сохранение информации для нового пользователя
  565. /// </summary>
  566. private void BtnSave_Click(object sender, EventArgs e)
  567. {
  568. if (DetectedFace == null)
  569. {
  570. MessageBox.Show("Лица не обнаружены!\r\nУбедитесь что лицо находится в кадре и обведено красным прямоугольником.", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Error);
  571. return;
  572. }
  573. string PhotoPath = string.Empty;
  574. ProgressTrain.Value = 0;
  575. bool Flag = TbxLastname.Text.Trim() == "" || TbxFirstname.Text.Trim() == "" || TbxPasportSeria.Text.Trim() == "" || TbxPasportNum.Text.Trim() == "";
  576. if(Flag)
  577. {
  578. MessageBox.Show("Заполните все поля и повторите попытку!", "Ошибка добавления!", MessageBoxButtons.OK, MessageBoxIcon.Exclamation);
  579. return;
  580. }
  581. SCon.Open();
  582. string QueryCheckPassport = $@"select PassportSeria,PassportNum
  583. from Users
  584. where PassportSeria = '{TbxPasportSeria.Text.Trim()}' and PassportNum = '{TbxPasportNum.Text.Trim()}'";
  585. SqlCommand CmdCheck = new SqlCommand(QueryCheckPassport, SCon);
  586. SqlDataReader Res = CmdCheck.ExecuteReader();
  587. if(Res.HasRows)
  588. {
  589. MessageBox.Show("Данные паспорта указаны неверно!", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Error);
  590. SCon.Close();
  591. ProgressTrain.Value = 0;
  592. return;
  593. }
  594. SCon.Close();
  595. SCon.Open();
  596. string QueryAdd = $@"insert into Users (Lastname,Firstname, Patronymic, PassportSeria, PassportNum,Phone, IDUserType) values (@last,@first,@patr,@seria,@number,@phone,3)";
  597. SqlCommand Cmd = new SqlCommand(QueryAdd, SCon);
  598. Cmd.Parameters.AddWithValue("@last", TbxLastname.Text.Trim());
  599. Cmd.Parameters.AddWithValue("@first", TbxFirstname.Text.Trim());
  600. Cmd.Parameters.AddWithValue("@patr", TbxPatronymic.Text.Trim());
  601. Cmd.Parameters.AddWithValue("@seria", TbxPasportSeria.Text.Trim());
  602. Cmd.Parameters.AddWithValue("@number", TbxPasportNum.Text.Trim());
  603. Cmd.Parameters.AddWithValue("@phone", TbxPhone.Text.Trim());
  604. Cmd.ExecuteNonQuery();//выполнить запрос
  605. SCon.Close();
  606. SCon.Open();
  607. string QueryAddingUserID = $@"select MAX(ID) as LastID
  608. from Users";
  609. Cmd = new SqlCommand(QueryAddingUserID, SCon);
  610. SqlDataReader ResID = Cmd.ExecuteReader();
  611. if(ResID.HasRows)
  612. {
  613. ResID.Read();
  614. //получить id только что добавленного пользователя
  615. AddingUserID = ResID["LastID"].ToString();
  616. }
  617. SCon.Close();
  618. //изменить размеры изображения
  619. DetectedFace = DetectedFace.Resize(100, 100, Inter.Cubic);
  620. //сохранить изображение в папку
  621. DetectedFace.Save(Config.FacePhotosPath + $"{TbxFirstname.Text.Trim()}{TbxPasportSeria.Text.Trim()}{TbxPasportNum.Text.Trim()}" + Config.ImageFileExtension);
  622. PhotoPath = Config.FacePhotosPath + $"{TbxFirstname.Text.Trim()}{TbxPasportSeria.Text.Trim()}{TbxPasportNum.Text.Trim()}" + Config.ImageFileExtension;
  623. TslStatus.Text = "Сохранение данных о пользователе...";
  624. ProgressTrain.Value = 50;
  625. BtnSave.Text = "Сохранение...";
  626. BtnSave.Text = "Сохранить";
  627. //сохранение пути до фотографии
  628. SCon.Open();
  629. string QueryAddPathImage = $@"insert into FaceImages (UserID,Picture)
  630. values ({AddingUserID},'{PhotoPath}')";
  631. Cmd = new SqlCommand(QueryAddPathImage, SCon);
  632. Cmd.ExecuteNonQuery();//выполнить запрос на добавление пути фото для пользователя
  633. SCon.Close();
  634. MessageBox.Show("Успешно сохранено!", "ImpulseVision", MessageBoxButtons.OK, MessageBoxIcon.Information);
  635. TimerSaving.Enabled = true;
  636. TimerSaving.Start();
  637. TslStatus.Text = "Готов";
  638. ProgressTrain.Value = 100;
  639. }
  640. /// <summary>
  641. /// тренировка изображения
  642. /// </summary>
  643. /// <returns>результат тренировки (true или false)</returns>
  644. /*
  645. private void TrainImageFromDir()
  646. {
  647. int CountImage = 0;
  648. //порог
  649. double Threshold = 10000;
  650. LstTrainedFaces.Clear();
  651. PersonLabes.Clear();
  652. LstPersonNames.Clear();
  653. try
  654. {
  655. //ProgressTrain.Value += 15;
  656. string MyPath = Directory.GetCurrentDirectory() + @"\TrainedImages\";
  657. string[] Files = Directory.GetFiles(MyPath, "*.jpg", SearchOption.AllDirectories);
  658. int n = Files.Length;
  659. foreach (string file in Files)
  660. {
  661. //ProgressTrain.Value += (int)PlusDigit;
  662. Image<Gray, Byte> TrainedImage = new Image<Gray, Byte>(file);
  663. //добавить обученное изображение
  664. LstTrainedFaces.Add(TrainedImage);
  665. PersonLabes.Add(CountImage);
  666. string CurrentFileName = Path.GetFileName(file);
  667. string Name = CurrentFileName.Remove(CurrentFileName.IndexOf("_"), CurrentFileName.Length - CurrentFileName.IndexOf("_"));
  668. //(0, CurrentFileName.Length - CurrentFileName.IndexOf("_") + 1);
  669. //добавить имя
  670. LstPersonNames.Add(Name);
  671. CountImage++;
  672. }
  673. if (CountImage == 0)
  674. {
  675. IsTrained = false;
  676. return;
  677. }
  678. //тренировка изображения
  679. Recognizer = new EigenFaceRecognizer(CountImage, Threshold);
  680. Recognizer.Train(LstTrainedFaces.ToArray(), PersonLabes.ToArray());
  681. //ProgressTrain.Value += 100 - ProgressTrain.Value;
  682. //записать, что обучен
  683. IsTrained = true;
  684. MessageBox.Show("Тренировка изображений выполнена!");
  685. }
  686. catch (Exception ex)
  687. {
  688. IsTrained = false;
  689. }
  690. }
  691. */
  692. private void CmbCams_SelectedIndexChanged(object sender, EventArgs e)
  693. {
  694. try
  695. {
  696. //если захват видео уже идёт
  697. //if(VideoCapture != null)
  698. //{
  699. // VideoCapture.Pause();
  700. // VideoCapture.Stop();
  701. // VideoCapture.Dispose();
  702. // VideoCapture = null;
  703. // PbxEther.Image = null;
  704. // SelectedCameraID = -1;
  705. //}
  706. }
  707. catch(Exception ex)
  708. {
  709. MessageBox.Show(ex.Message, "Внимание!", MessageBoxButtons.OK, MessageBoxIcon.Exclamation);
  710. }
  711. SelectedCameraID = CmbCams.SelectedIndex;
  712. if (IsWorking)
  713. {
  714. //VideoCapture = new VideoCapture(SelectedCameraID);
  715. //////VideoCapture.ImageGrabbed += VideoCapture_ImageGrabbed;
  716. //VideoCapture.Start();
  717. //FacesDetectionEnabled = true;//включить распознавание
  718. //CvInvoke.UseOpenCL = true;
  719. }
  720. }
  721. private void FormMain_FormClosing(object sender, FormClosingEventArgs e)
  722. {
  723. }
  724. private void TimerNewCam_Tick(object sender, EventArgs e)
  725. {
  726. DsDevice[] Cams = DsDevice.GetDevicesOfCat(FilterCategory.VideoInputDevice);
  727. int Count = Cams.Length;
  728. //если количество подключённых камер изменилось
  729. if(Count != CountCams)
  730. {
  731. if (Count > CountCams)
  732. {
  733. StatusAddNewDevice(Cams);
  734. }
  735. else if(Count < CountCams)
  736. {
  737. StatusOffDevice(Cams);
  738. }
  739. GetCams();
  740. }
  741. }
  742. /// <summary>
  743. /// уведомление об отключении web-камеры
  744. /// </summary>
  745. /// <param name="cams">массив с доступными камерами</param>
  746. async void StatusOffDevice(DsDevice[] cams)
  747. {
  748. HashSet<string> HtAfter = new HashSet<string>();
  749. foreach(DsDevice device in cams)
  750. {
  751. HtAfter.Add(device.Name);
  752. }
  753. HtBefore.Except(HtAfter);
  754. ProgressTrain.Value = 0;
  755. TslStatus.Text = $"Устройство: {string.Join(" ",HtBefore)} - отключено";
  756. await Task.Delay(1000);
  757. ProgressTrain.Value = 100;
  758. TslStatus.Text = "Готов";
  759. }
  760. /// <summary>
  761. /// уведомление о подключении нового устройствва
  762. /// </summary>
  763. /// <param name="Cams">массив с доступными web-камерами</param>
  764. async void StatusAddNewDevice(DsDevice[] Cams)
  765. {
  766. TslStatus.Text = "Добавление нового устройства..";
  767. ProgressTrain.Value = 0;
  768. while(ProgressTrain.Value < 100)
  769. {
  770. ProgressTrain.Value += 5;
  771. await Task.Delay(50);
  772. }
  773. TslStatus.Text = "Добавлено новое устройство";
  774. await Task.Delay(1000);
  775. TslStatus.Text = $"{Cams[Cams.Length-1].Name}";
  776. await Task.Delay(1000);
  777. ProgressTrain.Value = 100;
  778. TslStatus.Text = "Готов";
  779. }
  780. private void BtnCheck_Click(object sender, EventArgs e)
  781. {
  782. TslStatus.Text = "Подождите.. выполняется анализ лица..";
  783. ProgressTrain.Value = 45;
  784. //TrainImageFromDir();
  785. //FaceDifferent();
  786. //Task.Factory.StartNew(new Action(() => TrainImageFromDir()));
  787. //ProgressTrain.Value = 55;
  788. //TslStatus.Text = "Готов";
  789. }
  790. private void PbxEther_Click_1(object sender, EventArgs e)
  791. {
  792. //HideAdding();
  793. }
  794. private void STools_Click(object sender, EventArgs e)
  795. {
  796. TabPages.SelectTab(2);
  797. ToolsMenu.Enabled = false;
  798. }
  799. /// <summary>
  800. /// получить список пользователй системы
  801. /// </summary>
  802. private void SUsers_Click(object sender, EventArgs e)
  803. {
  804. }
  805. /// <summary>
  806. /// получение пользователей из БД
  807. /// </summary>
  808. private void GetUsersFromDB()
  809. {
  810. SCon.Open();
  811. string QueryForGetUser = @"select ID, Lastname + ' ' + Firstname + ' ' + Patronymic as FIO, PassportSeria, PassportNum
  812. from Users";
  813. SqlCommand Cmd = new SqlCommand(QueryForGetUser, SCon);
  814. SqlDataReader Res = Cmd.ExecuteReader();
  815. LstUsers.Clear();
  816. while (Res.Read())
  817. {
  818. Users user = new Users();
  819. user.FIO = Res["FIO"].ToString();
  820. user.UserID = Res["ID"].ToString();
  821. user.PassportSeria = Res["PassportSeria"].ToString();
  822. user.PassportNum = Res["PassportNum"].ToString();
  823. LstUsers.Add(user);
  824. }
  825. SCon.Close();
  826. TabPages.SelectTab(0);
  827. TableUsers.Controls.Clear();
  828. for (int i = 0; i < LstUsers.Count; i++)
  829. {
  830. UserItem Item = new UserItem();
  831. Item.UserID = LstUsers[i].UserID;
  832. Item.LblNameUser.Text = LstUsers[i].FIO;
  833. Item.Click += User_Click;
  834. Item.LblNameUser.Click += Object_Click;
  835. TableUsers.Controls.Add(Item);
  836. if (TableUsers.Controls.Count == 1)
  837. {
  838. CurrentUser = Item;
  839. CurrentUser.BackColor = ColorTranslator.FromHtml("#C3EB78");
  840. }
  841. }
  842. }
  843. /// <summary>
  844. /// выбор пользователя из списка
  845. /// </summary>
  846. private void Object_Click(object sender, EventArgs e)
  847. {
  848. CurrentUser.BackColor = Color.FromArgb(((int)(((byte)(184)))), ((int)(((byte)(184)))), ((int)(((byte)(255)))));
  849. CurrentUser = (sender as Control).Parent as UserItem;
  850. CurrentUser.BackColor = ColorTranslator.FromHtml("#C3EB78");
  851. }
  852. private void User_Click(object sender, EventArgs e)
  853. {
  854. CurrentUser.BackColor = Color.FromArgb(((int)(((byte)(184)))), ((int)(((byte)(184)))), ((int)(((byte)(255)))));
  855. CurrentUser = sender as UserItem;
  856. CurrentUser.BackColor = ColorTranslator.FromHtml("#C3EB78");
  857. }
  858. private void MExit_Click(object sender, EventArgs e)
  859. {
  860. Close();
  861. }
  862. private void MMain_Click(object sender, EventArgs e)
  863. {
  864. CmbCams.Visible = false;
  865. TslSelCamText.Visible = false;
  866. BtnEditUser.Enabled = true;
  867. BtnDelUser.Enabled = true;
  868. RecogniseOff();
  869. TabPages.SelectTab(0);
  870. }
  871. private void BtnEditUser_Click(object sender, EventArgs e)
  872. {
  873. FormEditUser FEdit = new FormEditUser();
  874. FEdit.LblSelectUserID.Text = CurrentUser.UserID.ToString();
  875. FEdit.ShowDialog();
  876. GetUsersFromDB();
  877. }
  878. private void TimerSaving_Tick(object sender, EventArgs e)
  879. {
  880. if (Saving)
  881. {
  882. MMain_Click(sender, e);
  883. GetUsersFromDB();
  884. TimerSaving.Stop();
  885. TimerSaving.Enabled = false;
  886. }
  887. }
  888. }
  889. }